请稍等 ...
×

采纳答案成功!

向帮助你的同学说点啥吧!感谢那些助人为乐的人

老师你好,想请教一下实时数仓的问题

目前实时数仓整个设计链路是 MySQL-kafka-MySQL(Hive)
从MySQL-kafka是一个工程source源,和一个sink输出
那么从kafka-MySQL(Hive或其他下游业务端)是不是要另外起一个工程,kafka作为source,然后自定义下游业务sink?
整个链路可以写在一套工程中吗?

正在回答 回答被采纳积分+3

插入代码

2回答

Michael_PK 2021-05-19 11:45:50

工程分开还是一起要看你们团队咋定的,这个外人不知道的,按照团队规则走

0 回复 有任何疑惑可以回复我~
  • 提问者 Link_scnu #1
    老师,现在的问题是没有我们没有这方面的技术团队。我不懂问题是通过中间件从mysql(Source)抽取数据到kafka(Sink),kafka(Source)分发到下游业务端【ES、mysql、HIVE】(Sink)。这里两个Source-Sink能写到一套工程里吗?怎么写到一套工程里
    回复 有任何疑惑可以回复我~ 2021-05-20 16:20:49
  • 提问者 Link_scnu #2
    老师,如果是两套工程,是不是部署的时候就要起两个任务?
    回复 有任何疑惑可以回复我~ 2021-05-20 16:24:51
  • Michael_PK 回复 提问者 Link_scnu #3
    两套流处理吗?那用哪套就启哪个就行了
    回复 有任何疑惑可以回复我~ 2021-05-21 20:02:03
Michael_PK 2021-05-19 11:45:09

不同公司不同选型。没有对错,只有是否合适之说

0 回复 有任何疑惑可以回复我~
问题已解决,确定采纳
还有疑问,暂不采纳
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号