老师你好，想请教一下实时数仓的问题

Question

目前实时数仓整个设计链路是 MySQL-kafka-MySQL（Hive）
从MySQL-kafka是一个工程source源，和一个sink输出
那么从kafka-MySQL(Hive或其他下游业务端)是不是要另外起一个工程，kafka作为source，然后自定义下游业务sink？
整个链路可以写在一套工程中吗？

Answer 1

Michael_PK 2021-05-19 11:45:50

工程分开还是一起要看你们团队咋定的，这个外人不知道的，按照团队规则走

• 提问者 Link_scnu #1

  老师，现在的问题是没有我们没有这方面的技术团队。我不懂问题是通过中间件从mysql（Source）抽取数据到kafka（Sink），kafka（Source）分发到下游业务端【ES、mysql、HIVE】（Sink）。这里两个Source-Sink能写到一套工程里吗？怎么写到一套工程里

• 提问者 Link_scnu #2

  老师，如果是两套工程，是不是部署的时候就要起两个任务？

• Michael_PK 回复 提问者 Link_scnu #3

  两套流处理吗？那用哪套就启哪个就行了

Answer 2

Michael_PK 2021-05-19 11:45:09

不同公司不同选型。没有对错，只有是否合适之说