#pyspark
CDH Spark 设置python版本
配置好 重启 spark服务即可
...
Spark 默认 python版本修改
# 路径
/opt/cloudera/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/bin/pyspark
# 找到python
...
pyspark 解决报错问题
问题描述
需要切换 hdfs 用户，默认是不能登录的
修改 hdfs 即可
只要非管理员用户也可以
vim /etc/passwd
# 原
hdfs:x
...
设置pyspark 启动时所使用的python版本
以下操作均为使用非root用户进行。
...
pyspark连接MySQL出错
解决方法
报错内容： java.sql.SQLException: No suitable driver
解决办法是将mysql的驱动jar包，拷贝到jdk文
...
