분류 전체보기(134)
-
ADsP 자격증 취득 후기 (꿀팁 포함)
2022.08.28 제34회 데이터 분석 준전문가(ADsP)를 쳤다. 예상보다 난이도가 있으며, 만만하게 보고 들어갔다간 큰코다칠 수 있다. 다만, 합격 커트라인이 낮아서... 그럼에도 합격은 할 수 있지 않았었을까 예상. 약 2-3주 준비했으며, 하루에 2시간 정도씩 공부했다. 물론 빠진 날도 있었지만! 총 3과목을 봐야 하며, 총점 60점을 넘으면 합격이다. 결과는 다행히 합격. 지금부터는 합격 꿀팁을 전달하도록 하겠다. Let's Go. 1. 책 책은 ADsP에서 가장 유명한 책으로 선정했다. 이 책은 개념과 문제가 섞여있으며, 사실 이것만 봐도 무방할 정도다. ADsP를 준비하는 사람이라면, 그냥 이 책을 사면 된다. 다른 책은 필요 없다. 2. 공부 방법 ADsP는 빠르게 보고 끝내야 하는 자격..
2022.12.12 -
NH투자증권 빅데이터 경진대회 후기 - 입선편
NH투자증권 빅데이터 경진대회에 참여한 지 어느덧 1달. 본선 진출 후, 곧바로 움직이기 시작했다. [본선 진출편] https://mengu.tistory.com/127 NH투자증권 빅데이터 경진대회 후기 - 본선 진출편 2022.09.08, 2022년 NH투자증권 빅데이터 경진대회가 개최되었다. 데이터도, 상금도, 참가팀 수도 거대한 Big 이벤트였다. https://aifactory.space/competition/detail/2126 2022년 NH투자증권 빅데이터 경진대회 | 데 mengu.tistory.com Github https://github.com/menguri/NH_investment GitHub - menguri/NH_investment: NH투자증권 빅데이터 경진대회 입선상 수상 N..
2022.12.10 -
NH투자증권 빅데이터 경진대회 후기 - 본선 진출편
2022.09.08, 2022년 NH투자증권 빅데이터 경진대회가 개최되었다. 데이터도, 상금도, 참가팀 수도 거대한 Big 이벤트였다. https://aifactory.space/competition/detail/2126 2022년 NH투자증권 빅데이터 경진대회 | 데이터, 문화가 되다 aifactory.space [시상 규모] 솔직히 데이터 분석, IT 공모전 중에서 가장 파격적이었다. 입선만 해도 100만 원을 상금으로 준다니, 데이터 분석자들이 모인 커뮤니티에 속해 있는데 그곳에서도 이 공모전은 핫했다. 필자 역시 공모전에 관심이 생겼고, 팀원들을 모아 대회에 참석하기로 했다. 우리 팀은 모두 대학 학부생으로 구성되어 있으며, 각 전공은 다음과 같다. 경영학부(3학년) 통계학과(졸업예정) 통계학과(..
2022.12.08 -
[Error] ModuleNotFoundError: No module named 'html.entities'; 'html' is not a package
python으로 html 파일을 수정하는 함수를 만들던 중... 다음과 함수가 떴다. ModuleNotFoundError: No module named 'html.entities'; 'html' is not a package (1) 모듈에러라고 해서 import를 잘못했나 봤는데 없었다. (2) 결국 찾아보니, 같은 폴도 내에 html.py 파일이 있으면 이를 import 파일로 인식해서 에러가 뜨는 것이라고 한다. 그래서 냉큼 html.py 파일을 다른 이름으로 바꿔줬더니 해결되었다.
2022.09.24 -
[Airflow] Airflow & Spark 연동해서 활용하기 (2)
저번 포스팅에선 airflow와 spark을 연동하는 방법에 대해 알아봤습니다. 이번 포스팅에선 간단한 실습을 바로 진행해보도록 하겠습니다. * 본 포스팅은 해당 강의를 참고한 것임을 밝힙니다. [pyspark 세팅하러 가기] https://mengu.tistory.com/25?category=932924 [Spark] 초기 환경 세팅 ft. 호환 문제 해결 이번 포스팅은 Spark 초기 환경 세팅이다. Spark, pyspark, java 등 그냥 설치해서 끝내면 되는 거 아니냐 할 수 있지만, 중간에 버전 호환 문제가 존재해서 막힐 수 있다. 그 부분을 집어주고자 포스팅 mengu.tistory.com [Airflow&Spark 연동하러 가기] https://mengu.tistory.com/124 [..
2022.09.19 -
[Airflow] Airflow & Spark 연동해서 활용하기 (1)
이번 포스팅에선 Airlfow와 Spark의 연동에 대해 다루겠습니다. Spark에서의 작업을 Airflow를 통해 자동화시키는 작업까지 해보겠습니다. 당연히 Airlflow와 pyspark 환경이 세팅되어 있어야 합니다. * 본 포스팅은 해당 강의를 참고한 것임을 밝힙니다. [pyspark 세팅하러 가기] https://mengu.tistory.com/25?category=932924 [Spark] 초기 환경 세팅 ft. 호환 문제 해결 이번 포스팅은 Spark 초기 환경 세팅이다. Spark, pyspark, java 등 그냥 설치해서 끝내면 되는 거 아니냐 할 수 있지만, 중간에 버전 호환 문제가 존재해서 막힐 수 있다. 그 부분을 집어주고자 포스팅 mengu.tistory.com 목차 📃 Airf..
2022.09.17