定时加载外部数据

Question

老师你好，可以请教一下不同数据量，定时加载外部数据到内存的做法吗？

Answer 1

Michael_PK 2021-07-30 09:37:50

有几个问题需要考量：

1）内存是否能cover住你想要加载的数据量

2）加载到内存的目的是什么？

• 提问者 KLC #1

  1. 是可以的, 大慨有多个Map(股票号码 对应 状态/交易量等)
  2. 现在有需求是要定时(每分钟, 每小时)根据数据的状态, 
  	去判断要不要处理这条从websocket来的数据,
  	目的是不想每一条websocket数据都要去访问外部一次

• Michael_PK 回复 提问者 KLC #2

  这个好像不是大数据的吧？

• 提问者 KLC 回复 Michael_PK #3

  我已经把每只股票的每笔交易用每分钟和每小时的窗口把它们聚合了, 目前我是需要根据外部给的股票状态去判断那笔交易要不要去做聚合

点开查看后面1条评论