今天我在本地使用Pycharm编写spark程序的时候,去连接hive数据库读取数据,然后报java.util.NoSuchElementException: key not found: _PYSPARK_DRIVER_CALLBACK_HOST问题
最后发现是pip安装的pyspark版本和集群的版本不一致,我本地安装的pyspark=2.4.4,而我的集群是spark=2.3.0
解决办法:
先卸载之前的pyspark版本,然后安装对应的pyspark版本
pip3 uninstall pyspark
pip3 install pyspark==2.3.0
因篇幅问题不能全部显示,请点此查看更多更全内容
Copyright © 2019- obuygou.com 版权所有 赣ICP备2024042798号-5
违法及侵权请联系:TEL:199 18 7713 E-MAIL:2724546146@qq.com
本站由北京市万商天勤律师事务所王兴未律师提供法律服务