728x90
반응형
Pyspark
콘솔에 로깅이 1초마다 뜨는게 거슬려서 알아봄
SparkContext.setLogLevel()
Log levels: ALL, DEBUG, ERROR, FATAL, INFO, OFF, TRACE, WARN
728x90
반응형
'코딩해 > Kafka, Spark, Data Engineering' 카테고리의 다른 글
[Spark] RDD | GroupByKey 보다는 ReduceByKey (0) | 2023.02.08 |
---|---|
[Redis] Mac Redis 설치 (0) | 2022.12.13 |
[Spark] spark.driver.maxResultSize 에러 (0) | 2022.05.11 |
[Kafka] 카프카 파티션 | 순서 (0) | 2022.03.31 |
[Kafka | 카프카 핵심 가이드 ] Chapter 01. 카프카 훑어보기 (0) | 2022.03.30 |