ㅋㄷㅋㄷ

df.na.drop(subset=["col_name"])

from pyspark.sql import functions as f df.select([f.count(f.when(f.isnull(c),c)).alias(c) for c,t in df.dtypes if t not in ('timestamp','boolean','date')]).show() df.select([f.count(f.when(f.isnull(c),c)).alias(c) for c,t in df.columns]).show()

원인 : 한 프로젝트 내에 여러 개의 소스파일을 생성하고, main을 정의했을 때 발생하는 오류 해결 방법 1. 실행하지 않을 소스파일의 속성에 들어간다. 2. 일반 > 빌드에서 제외 > 예 3. 해당 소스파일에 금지표시(-)가 뜬 것을 확인할 수 있다. 다시 실행해보면 오류없이 실행된다.

count count(컬럼명) : null 미포함 count(*) : null 포함 from pyspark.sql.functions import count df.select(count('colname')).show() countDistinct countDistinct(컬럼명) : 고유 레코드 수의 카운트 from pyspark.sql.functions import countDistinct df.select(countDistinct('colname')).show() first / last first(컬럼명) : 첫 번째 값 last(컬럼명) : 마지막 값 from pyspark.sql.functions import first, last df.select(first('colname'), last('colna..

conda install -c conda-forge pyclustering https://anaconda.org/conda-forge/pyclustering Pyclustering :: Anaconda.org License: GPL-3.0 40381 total downloads Last upload: 10 months and 28 days ago Installers Info: This package contains files in non-standard labels. conda install linux-64 v0.10.1 osx-64 v0.10.1 win-64 v0.10.1 To install this package with conda run one anaconda.org https://pycluster..

바빠지기 전에 즉흥 여행 장소는 바로 대구! 원래계획은 부산이었으나 어차피 장마라서 맛있는 거나 땡기고 오자 싶어서 계획한 대구….(왜그랬을까?) 출발부터 험난하다 SRT대전에서 탈선으로 1시간 출발지연, 도착은 2시간 지연….그래도 코레일의 빠른 응대로 반액 환불 받았다😮 퇴근하고 가느라 도착하니까 밤10시 30분…! 라스트 오더시간에 딱맞춰 갔다 휴휴ㅠ 목구멍⭐️⭐️⭐️⭐️ 삼겹1인분 + 갈비살 2인분 총 4만원 갈비살은 소니까 말할 필요없이 맛있지만 삼겹살이 생각보다 너무 맛있다!!약간 오겹스타일? 그리고 솥뚜껑에 구워줘서 빨리익고 구워준다! [카카오맵] 목구멍 대구신세계점 대구 동구 동부로30길 35 (신천동) http://kko.to/ANO_3YYZ9 목구멍 대구 동구 동부로30길 35 map...

가족 여행으로 다녀온 울릉도 여행! 15년전 쯤인가, 일본이 도발해서 아빠가 빡쳐서 가족들 전체 본적지를 독도로 바꾸고 처음으로 방문하기로 결정! 패키지 여행은 정말 지양 하는데 택시투어나 선박티켓 예매하기 귀찮아서 네이버쇼핑에서 패키지 예약 (편-안) https://m.smartstore.naver.com/aratour/products/3088714033?NaPm=ct%3Dl3i3qsd5%7Cci%3Dcheckout%7Ctr%3Dppc%7Ctrx%3D%7Chk%3D33539aca778625cde813610b2adad8e1f2b56bfc 아라여행사 패키지 : 아라여행사 패키지 아라여행사 패키지 smartstore.naver.com 후기도 제일 많고, 별점도 높고 가격도 괜찮도 일정도 괜찮아서 골랐다! 2..

빅쿼리에 visitStartTime은 POSIX 시간으로 표현되고 있습니다. 1. POSIX 형태의 시간을 UTC(협정 세계시)로 변환 2. UTC를 한국시간대로 변환 UTC+9시간 DATETIME( timestampe_expression [, timezone]) 1. POSIX -> UTC (알아볼 수 있는 형태로 바꾸기) TIMESTAMP_SECONDS(visitStartTime) 2. UTC -> 한국시간대로 변경하기 - URC+9시간 TIMESTAMP_SECONDS(SAFE_CAST((visitStartTime) AS INT64)+32400) SAFE_CAST : 데이터 유형 변환 32400 : 9시간 x 60분 x 60초 = 32,400 https://cloud.google.com/bigquer..

https://code-code.tistory.com/m/110 [공주여행] 뚜벅이 여행지로 최고🌸 - (1) 급 여행을 추진해서 오랜만에 친구들 다섯이서 여행을 다녀왔다❣️ 뚜벅이 여행지로 추천받았던 충남 공주 여행! 서울에서 버스로 1~2시간이면 갈 수 있으니 너뮤 좋다 숙소는 숙박대전 쿠폰 code-code.tistory.com 첫 째날은 금강과 공산성이었다면, 둘 째날(마지막)은 무령왕릉과 한옥마을!! 공산성 앞에 코끼리열차처럼 고마열차가 있는데 이거 다음날 아침에 꼭 타야겠다 싶어서 여유롭게 티켓사고 사진찰칵 11시부터 정시에 1시간 마다(12시 제외) 다니는 열차!!⭐️⭐️⭐️⭐️ 성인은 3,000원 내릴 수 있는 정류장은 바로 다음 정류장인 “무령왕릉”만 가능하다! 우리의 목적지가 무령왕릉이..

급 여행을 추진해서 오랜만에 친구들 다섯이서 여행을 다녀왔다❣️ 뚜벅이 여행지로 추천받았던 충남 공주 여행! 서울에서 버스로 1~2시간이면 갈 수 있으니 너뮤 좋다 숙소는 숙박대전 쿠폰 먹여서 야놀자에서 11만원에!! 하루한옥스테이 매우매우추천!! ⭐️⭐️⭐️⭐️⭐️ 외관도 이쁘고 쉼터라고 공용공간 있어서 전자레인지, 보드게임, 주방도구들(숙소 안에는 부엌은 없다 딱 방과 화장실!!) 그리고 너무 좋은 건 아침에 조식을 주시는데 직접 빚은 송편과 빵, 우유, 삶은계란을 주신다👍🏻 그 중에서도 가장 좋았던 점은 이불이 너~~~무 관리가 잘돼서 깨끗! 방도 너무 깨끗! 알고보니 1층에 세탁실이 따로 있음 굿.. 단점이라 하믄…. 방음이 약함..우리 다섯명 시끄러버서 신고당할까봐 새벽까지 놀면서 눈치봄 ㅠㅠ ..