欢迎来到天剑厚德,这里有最新的大数据技术原创分享。

最新发布 第3页

天剑厚德 -- 康健的个人博客

  • None data.
flink

5 Flink批处理DataSource

5 Flink批处理DataSource
DataSource 是什么呢?就字面意思其实就可以知道:数据来源。 Flink 做为一款流式计算框架,它可用来做批处理,即处理静态的数据集、历史的数据集;也可以用来做流处理,即实时的处理些实时数据流,实时的产生数据流结果,只要数据源源不断的过来,Flink 就能够一直计...

healthsun 2个月前 (08-10) 0评论 0喜欢

flink

4 Flink批处理开发

4 Flink批处理开发
Flink 应用程序结构主要包含三部分,Source/Transformation/Sink,如下图所示: Source: 数据源,Flink 在流处理和批处理上的 source 大概有 4 类:基于本地集合的 source基于文件的 source基于网络套接字的 sou...

healthsun 2个月前 (08-10) 0评论 0喜欢

flink

3 Flink架构介绍

3 Flink架构介绍
3.1. Flink基石 Flink之所以能这么流行,离不开它最重要的四个基石:Checkpoint、State、Time、Window。 首先是Checkpoint机制,这是Flink最重要的一个特性。Flink基于Chandy-Lamport算法实现了一...

healthsun 2个月前 (08-10) 0评论 1喜欢

flink

2 Flink集群安装

2 Flink集群安装
Flink支持多种安装模式 local(本地)——单机模式,一般不使用standalone——独立模式,Flink自带集群,开发测试环境使用yarn——计算资源统一由Hadoop YARN管理,生产测试环境使用 2.1. 伪分布环境部署 Flink程序...

healthsun 2个月前 (08-10) 0评论 0喜欢

flink

1 Flink基本介绍

1 Flink基本介绍
学习目标大数据发展历史 Flink性能比较 Flink在阿里的现状 1.1. Flink引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有Hadoop 、Storm ,以及后来的 Spark ,他们都有着各自专注的应用场景。Spark 掀开...

healthsun 2个月前 (08-10) 0评论 0喜欢