老师您好，关于不能fit问题

Question

在运行该代码时stage中止，重新调整spark资源出现同样错误，请问老师这个问题该怎么解决

Answer 1

Daniel 2024-04-30 15:59:44

同学你好，这个看起来是网络的问题，你是用的本地的 spark 吗？检查一下端口的访问权限

• 提问者 Sy1023 #1

  之前的hadoop2.7.4已经删除了，这应该使用的是pycharm自带的虚拟系统，之前在运行整个recall召回层都没有出现这样的问题

• 提问者 Sy1023 #2

  老师，那我应该重新下载一下hadoop然后再运行吗，还是有别的方法

• 提问者 Sy1023 #3

  非常感谢！

点开查看后面2条评论

Answer 2

Daniel 2024-05-02 17:35:37

你试试 ping 一下spark 端口能联通吗

• 提问者 Sy1023 #1

  老师这个应该输入什么代码啊，我现在下载了hadoop3.1依旧会出现这样的错误，正在安装scale2.11和spark2.4重新试一下

• Daniel 回复 提问者 Sy1023 #2

  我还是建议你直接试试用docker 跑，会方便很多

• 提问者 Sy1023 回复 Daniel #3

  回复 Daniel：好的老师，这几天我研究一下docker，谢谢老师的建议