한 밀레니얼의 일기

지난번 시험 후기를 남겼던 ADP 최종 합격했습니다! 합격률이 낮고 한 번 떨어졌던 어려운 시험이라 정말 기쁘네요 :) 시험장에서 왜인지 사이킷런에서 뉴럴네트워크가 안 돌아가서 못했는데 그 부분 감안하면 납득할만한 점수인 것 같네요 자세한 문제와 답은 지난번 글에 남겨두었으니 참고 부탁드리고 이 글에서는 제 공부 방법을 소개해드리겠습니다. 28회 ADP 실기 후기 / 기출문제 복원 / 가답안 2023년 3월 12일 ADP 실기 시험 보고 왔습니다. 기억이 사라지기 전에 바로 후기 남깁니다. 다음과 같은 문제가 나왔습니다. 기계학습 [1~3 모두 결석 데이터 사용, 변수는 모두 범주형이었음] 1-1. EDA, cestmavie.tistory.com 1. 사전 지식 아주 오래 전인 2019년에 ADsP를 취..

2023년 3월 12일 ADP 실기 시험 보고 왔습니다. 기억이 사라지기 전에 바로 후기 남깁니다. 다음과 같은 문제가 나왔습니다. 기계학습 [1~3 모두 결석 데이터 사용, 변수는 모두 범주형이었음] 1-1. EDA, 차원 축소 필요한지 확인, 기타 문제 확인 1-2. 1-1.에서 찾은 문제 처리 후 해결되었는지 재확인 1-3. 과적합 문제가 있다고 가정하고 해결하는 방법 2가지 이상 제시/수행/결과 비교 2-1. 랜덤포레스트, 인공신경망, lightGBM 모델링 # sklearn.ensemble.RandomForestClassifier # sklearn.neural_network.MLPClassifier # lightgbm.LGBMClassifier 2-2. 위 세 가지 모델로 하드 보팅, 소프트 보..

2022년 5월 21일 진행된 데이터 분석 전문가 필기시험을 보고 왔습니다. *6월 10일 조기발표된 결과로 합격 확인했습니다! 1. 사전 지식 올해 빅데이터 분석기사 필기 시험을 공부해서 합격한 상황이었고 3년 정도 전 ADsP를 따서 대략적인 내용은 알고 있는 상태였습니다. 2. 공부 방법 및 기간 데이터 분석 전문가는 여타 자격증보다는 합격선이 높은 70점 이상을 득점해야 합니다만 역시나 필기 시험의 왕도는 문제를 많이 푸는 것이라고 생각했습니다. 서점에서 여러가지 교재를 비교해 본 결과 상대적으로 내용이 눈에 잘 들어오고 문제가 많은 데이터에듀의 ADP 필기 올패키지 데이터 분석 전문가 교재로 공부를 시작했습니다. 공부는 4월 24일부터 시작했고 내용이 많은 4장을 제외하고는 하루에 한 장씩 살펴..

1장 Cinematch는 넷플릭스의 영화 추천 시스템이다 빅데이터 활용의 3요소는 데이터, 기술, 인력이다 데이터베이스의 특징 : 통합된 데이터, 저장된 데이터, 공용 데이터, 운영 데이터 빅데이터 가치 패러다임의 변화 : 디지털화 > 연결 > 에이전시 2장 EAI는 CDC 매커니즘을 구현할 수 없다 Spark는 하둡과 관련이 없다 Staus on Rows는 타임 스탬프, 버전 넘버 기법에 대한 보완 용도로 활용된다 프레스토는 페이스북의 데이터 웨어 하우징 엔진이다 ESB는 미들웨어(bus)를 이용하여 서비스 중심으로 시스템을 유기적으로 연계한다 무공유 클러스터는 노드 확장에 제한이 없다 무공유 클러스터는 규모가 커지면 디스크 영역에서 병목현상이 발생한다 GFS를 설계할 때 낮은 응답 지연시간보다 높은 ..