请问老师，使用Python来开发大数据管理平台可行吗？

Question

老师好，可以使用Python来开发这套平台嘛？Hadoop，Spark，presto这些工具虽然本身是Java开发的，可是我发现和它们的交互方式，都是基于内置的rest api来实现的。所以搭建大数据管理平台任何语言都能完好的实现吗？

Answer 1

叁金 2020-03-06 21:08:04

可以，只要你对于Python使用比较熟练是可以的。  Python操作hadoop hive presto都是可以的    其他都是基于http的操作

• 提问者 邱晨100 #1

  非常感谢！

• 叁金 回复 提问者 邱晨100 #2

  Python操作hdfs   pyarrow
  操作hive  presto  是pyhive
  其他的就是自己使用requests包封装
  有问题可以随时问。

• 提问者 邱晨100 回复 叁金 #3

  老师真是太负责了。说真的，在大技术领域，Java大部分公司好像都是绝对主角，业务开发基本也都是Java为主。所以，我就在想开发数据中台或者大数据管理平台这样都产品，业界普遍考虑Java，究竟是因为会java都人多，还是Java更适合开发大数据产品。

点开查看后面3条评论