多个agent的意义是什么？

Question

串联在一起，agentA的sink对应agentB的source，然后再由agentB的sink将数据转到HDFS，那为啥不直接agentA的sink将数据转到HDFS，加串联是为了削减数据压力吗？但是这样感觉也没削减啊

Answer 1

Michael_PK 2022-10-10 00:00:36

1）HDFS的权限不一定对外开放的

2）即使对外开放，第一层那么多agent直接写HDFS，压力很大的

3）所以才会加一层聚合层，再到HDFS