首页
最新
热门
推荐
登录
首页
最新
热门
推荐
热门文章
1
Anaconda详细安装及使用教程(带图文)
2
手摸手,带你用vue撸后台 系列一(基础篇)
3
Linux常用命令
4
Java基础知识面试题(2020最新版)
5
支持向量机通俗导论(理解SVM的三层境界)
6
MySQL数据库面试题(2020最新版)
7
别搞目录探测了,OK?
8
H2Miner变种,利用Redis漏洞入侵云服务器wa矿
9
手摸手,带你用vue撸后台 系列二(登录权限篇)
10
Deep Learning(深度学习)学习笔记整理系列之(一)
大数据
大数据
Flink高手之路2-Flink集群的搭建
文章目录Flink高手之路2-Flink集群的搭建一、Flink的安装模式1.本地local模式2.独立集群模式standalone3.高可用的独立集群模式standalone HA4.基于yarn模式Flink on yarn二、基础环境...
2024-03-18
2033
13694
大数据
大数据
Flink读取kafka数据报错
报错如下:D:software_installjavainjava.exe"-javaagent:C:Program FilesJetBrainsIntelliJ IDEA 2021.2.3libidea_rt.jar=...
2024-03-18
3675
10219
大数据
实时Flink数据流与ApacheHadoop集成
大数据
实时Flink数据流与ApacheHadoop集成
实时Flink数据流与ApacheHadoop集成
1.背景介绍在大数据时代,实时数据处理和批处理数据分析都是非常重要的。Apache Flink 和 Apache Hadoop 是两个非常受欢迎的大数据处理框架。Flink 是一个流处理框架,专注于实时数据处理,而 Hadoop 是一个批处...
2024-03-18
4490
13831
大数据
大数据
【Python实战】数据预处理(数据清理、集成、变换、归约)
【Python实战】数据预处理(数据清理、集成、变换、归约)前言数据预处理概述数据清理异常数据处理1、异常数据分析2、异常数据处理方法缺失值处理噪声数据处理数据集成1、实体识别2、冗余属性3、数据不一致数据变换1、使用简单的数学函数对数据进...
2024-03-18
3082
12544
大数据
大数据
大数据相关软件的安装指南(超详细的图文教程)
大数据软件的安装指南VMware的安装-博客地址- 内含:十一、Linux操作系统的第三种获取方式;十二、vmware安装操作系统的步骤VMware的配置-博客地址- 内含:4、VMware的安装;5、在VMware中安装CentOSLin...
2024-03-18
3690
14301
大数据
大数据
【大数据】Flink 架构(三):事件时间处理
《Flink 架构》系列(已完结),共包含以下 6 篇文章:Flink 架构(一):系统架构Flink 架构(二):数据传输Flink 架构(三):事件时间处理Flink 架构(四):状态管理Flink 架构(五):检查点 Checkpoi...
2024-03-18
3816
6018
大数据
大数据
kafka为什么不支持读写分离?
kafka为什么不支持读写分离?在kafka中,生产者写入消息,消费者读取消息的操作都是与 leader 副本进行交互的,从而实现的是一种主写主读的生产消费模型。kafka不支持读写分离,也就是主写从读。读写分离有以下不足:(1) 主从延时...
2024-03-18
4035
11802
大数据
大数据
初始RabbitMQ(入门篇)
消息队列(MQ)本质上就是一个队列,一个先进先出的队列,队列中存放的内容是message(消息),是一种跨进程的通信机制,用于上下游传递消息,为什么使用MQ:削峰填谷:MQ可以很好的做一个缓冲机制,例如在一个系统中有A和B两个应用,A是接收...
2024-03-18
2822
9527
大数据
大数据
springboot RabbitMQ客户端连接故障恢复
最近做RabbitMQ故障演练发现RabbitMQ服务器停止后,基于springboot的消费端不可以自动的恢复,队列的消费者消失,消息一直积压到队列中,这种情况肯定是不可接收的;通过研究源代码找到了解决方案。一、添加自动恢复配置autom...
2024-03-18
3509
12972
大数据
大数据
消息中间件之Kafka(一)
1.简介高性能的消息中间件,在大数据的业务场景下性能比较好,kafka本身不维护消息位点,而是交由Consumer来维护,消息可以重复消费,并且内部使用了零拷贝技术,性能比较好Broker持久化消息时采用了MMAP的技术,Consumer拉...
2024-03-18
2660
12395
大数据
大数据
python毕设选题 - 大数据二手房数据爬取与分析可视化 -python 数据分析 可视化
# 1 前言? 这两年开始毕业设计和毕业答辩的要求和难度不断提升,传统的毕设题目缺少创新和亮点,往往达不到毕业答辩的要求,这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设,学长分享优质毕业...
2024-03-18
2274
6701
大数据
大数据
59、Flink CEP - Flink的复杂事件处理介绍及示例(1)-入门
Flink 系列文章一、Flink 专栏Flink 专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、Flink 部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink 的基础部分,比如术语、架...
2024-03-17
3600
10663
大数据
大数据
2023美赛ABCDEF各赛题思路浅析
2023美赛(MCM/ICM)如期开赛,为了尽早的帮大家确定选题。这里我们加急为大家编辑出2023美赛(MCM/ICM)赛题浅评,方便大家快速对各个题目的难度有个大致的了解。同时,我们也给出了各个题目简要的解题思路,以及该问题在实际解决中可...
2024-03-17
4151
13095
大数据
Flink与ApacheSuperset集成
大数据
Flink与ApacheSuperset集成
Flink与ApacheSuperset集成
1.背景介绍在大数据处理领域,Apache Flink 和 Apache Superset 都是非常重要的工具。Flink 是一个流处理框架,用于实时处理大量数据,而 Superset 是一个用于数据可视化和探索性数据分析的开源平台。在本文...
2024-03-17
4440
14180
大数据
大数据
深入解析 Flink CDC 增量快照读取机制
一、Flink-CDC 1.x 痛点Flink CDC 1.x 使用 Debezium 引擎集成来实现数据采集,支持全量加增量模式,确保数据的一致性。然而,这种集成存在一些痛点需要注意:一致性通过加锁保证:在保证数据一致性时,Debeziu...
2024-03-17
2472
9969
大数据
大数据
HBase集群部署
1.HBase安装相关版本:Hadoop:2.7.3hbase:1.3.1hbase相关版本下载安装HBase需要安装hbase-1.3.1-bin.tar.gz软件包,下载并解压到/opt目录下2.HBase参数配置2.1 修改Maste...
2024-03-17
3473
12957
大数据
大数据
flink 从kafka读取数据报错
报错:Caused by: org.apache.flink.runtime.JobException: Recovery is suppressed by NoRestartBackoffTimeStrategyat org.apache...
2024-03-17
4514
11444
大数据
大数据
大数据编程实验四:Spark Streaming
一、目的与要求1、通过实验掌握SparkStreaming的基本编程方法;2、熟悉利用Spark Streaming处理来自不同数据源的数据。3、熟悉DStream的各种转换操作。4、熟悉把DStream的数据输出保存到文本文件或MySQL...
2024-03-17
3377
11242
大数据
大数据
Chunjun纯钧(Flinkx)同步任务开发通用配置参数详解
Chunjun纯钧(Flinkx)是一款稳定、易用、高效、批流一体的数据集成框架,目前基于实时计算引擎Flink实现多种异构数据源之间的数据同步与计算,支持JSON模版配置任务,兼容FlinkSQL语法。本文对chunjun同步任务的配置文...
2024-03-17
3106
8908
大数据
大数据
数据科学与大数据专业毕业设计(论文)选题指导 2024
前言大四是整个大学期间最忙碌的时光,一边要忙着准备考研,考公,考教资或者实习为毕业后面临的就业升学做准备,一边要为毕业设计耗费大量精力。大四的同学马上要开始毕业设计,对选题有疑问可以问学长哦!以下整理了适合不同方向的计算机专业的毕业设计选题...
2024-03-17
3600
13012
点击加载更多
111
大数据