without haste but without rest

spark2 - pyspark TypeError: an integer is required (got type bytes) & zeppelin pyspark is not responding 본문

Data Engineering & DataOps/Spark

spark2 - pyspark TypeError: an integer is required (got type bytes) & zeppelin pyspark is not responding

JinungKim 2021. 8. 5. 22:35

spark2 버전은 python3.7까지만 지원한다.

파이썬 3.8을 쓰고 있어서 에러가 발생했다. 3.7 버전으로 변경해주었더니 정상 작동한다.

 

 

 

PySpark 2.4.5 is not compatible with Python 3.8.3, how do I solve this?

Code from pyspark import SparkContext,SparkConf conf=SparkConf().setMaster('local').setAppName('Test App') sc=SparkContext(conf) Error Message Traceback (most recent call last): File ...

stackoverflow.com

 

저작자표시

'Data Engineering & DataOps > Spark' 카테고리의 다른 글

IntelliJ에서 Scala로 Spark 프로젝트 시작하기  (0) 2022.02.18
Zeppelin 커스텀 컨테이너 이미지 빌드  (0) 2022.02.08
Spark Streaming tutorial  (0) 2022.01.07
Spark 개념과 특징  (0) 2021.12.10
'Data Engineering & DataOps/Spark' Related Articles more
Comments