728x90
from pyspark.sql import functions as f
df.select([f.count(f.when(f.isnull(c),c)).alias(c) for c,t in df.dtypes if t not in ('timestamp','boolean','date')]).show()df.select([f.count(f.when(f.isnull(c),c)).alias(c) for c,t in df.columns]).show()
728x90
'데이터 분석 > [Python] 기초' 카테고리의 다른 글
| [python] 그래프에 라인/텍스트 추가하기 (0) | 2023.06.23 |
|---|---|
| [python] pyspark null값 제거 (0) | 2022.10.26 |
| [python] pyspark 집계함수 (0) | 2022.09.14 |
| [python] list 안에 각 원소들 타입 변경 (0) | 2022.04.04 |
| [python] plot axis 지수 포맷팅 (0) | 2022.03.03 |