sparkstreming消费kafka算一个消费者吗？

Question

老师，请问一下，sparkstreming消费kafka算一个消费者吗？可以设置多个消费者吗？

Answer 1

Michael_PK 2020-03-17 22:57:31

流处理系统对接Kafka那么流处理就是一个消费者，当然可以多个消费者的，有消费者组的概念

• 提问者 慕慕2074236 #1

  多个消费者是需要流程序运行多次么？

• Michael_PK 回复 提问者 慕慕2074236 #2

  一般情况下  一个应用对接一个topic来处理的，就是一个消费者。而且sparkstremaing的版本就是按照topic的分区来决定spark的并行度的

• 提问者 慕慕2074236 回复 Michael_PK #3

  老师，那如果现在kafka中有5个topic，是用一个sparkstreming呢，还是需要5个sparkstreming程序处理呢？

点开查看后面1条评论