
Flume
文章平均质量分 97
独憩
有事可联系qq:1286072413
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
浏览器用户行为集群建设-数仓建模-数据计算
该项目旨在将通路进行模拟,以达到熟悉整个数据流程的效果。该项目模拟浏览器后台数据集群身份,收集用户浏览器访问数据传入数据集群,并进行数仓建模,以此基础进行相关计算和看数。该项目的主要目的是体验整个数据开发流程,故而深度一般,但是可以按照相同的方式自行拓展。原创 2024-09-28 14:20:16 · 1130 阅读 · 0 评论 -
Flume
这里的目的是根据头文件的不同,发往不同的channel,然后发往不同的sink需要自己写一个jar包,这里相当于是自己给netcat的信息增加的头文件,如果信息中含有"lmx’,则在头信息中加入 type:lmx,反之加入type:other@Override@Override// 获取事件中的头信息// 获取事件中的 body 信息// 根据 body 中是否有 lmx 来决定添加怎样的头信息// 添加头信息} else{// 添加头信息@Override。原创 2024-04-15 16:21:20 · 996 阅读 · 0 评论