Final Project : 데이터베이스 변경 및 설계 목차 데이터베이스 변경 데이터베이스 설계 데이터베이스 변경 앞서서 MySQL로 데이터베이스를 선정했으나 너무 비효율적인 문제가 있기 때문에 다시 NoSQL로 데이터베이스를 변경하기로 했습니다. 익숙하게 사용했던 MongoDB를 다시 꺼냈고 GCP를 사용하는 클라우드 데이터...

Day82 : 두런두런 수근수근 속닥속닥 부스트캠프 벌써 네이버 부스트캠프에서 활동한 지 4개월이 됐습니다. 합격했다고 글 남긴게 엊그제 같은데 벌써 몇주뒤면 수료식이네요. 사실 저는 부스트캠프를 신청한 목적이 좀 여러가지가 있습니다. 머신러닝 공부하려고 하는데 강압적인 뭔가가 없으니까 잘 안함 솔직히 체계적으로 공부하는 방법 모...

Product Serving : MLOps 개론 모델 개발 프로세스 Research VS Production 모델 개발 : Research 모델 개발의 연구분야는 일반적으로 위 프로세스를 수행 고정된 데이터를 사용하는 학습 학습이 어느정도 진행되면 서비스를 배포하는 단계로 넘어감 모델 개발 : Production 배포...

데이터 파이프라인과 Airflow ‘Apache Airflow 기반의 데이터 파이프라인’ 내용을 기반으로 작성되었습니다. 데이터 파이프라인 최근 데이터에 대한 집중이 높아져서 데이터 파이프라인을 구축해서 관리하고 있음 데이터 파이프라인을 핸들링하는 기술은 Airflow, Luigi와 같이 다양한 기술들이 활용되고 있음 데이터 파이...

Final Project : 더미데이터 제작 및 GCP 세팅 목차 Dummy data 제작 GCP 세팅 및 인프라 구축 Dummy data 제작 github에서 데이터 수집용 API를 제공해서 그것을 활용해서 데이터를 수집함 모델의 간이 학습 결과 및 데이터 분석을 위해 팀원 사이언티스트 팀에서 더미 데이터를 요청함 ...

Final Project : 프로젝트 개요 목차 프로젝트 주제 선정 프로젝트 기본 설계 역할분담 프로젝트 주제 선정 깃허브 Repository You may also like 사용자의 직군, 사용언어와 같은 기본 정보를 확인하고 이를 토대로 필요할 것으로 추정되는 repository를 추천 기본적으로 item ...

DKT : Sequence Modelling Sequence Modelling Sequence Modelling이란 단순한 tabular 데이터를 활용하는 것이 아닌 1개의 행이 어떤 유저나 요소의 시간적 데이터의 일부인 sequence data를 적용하는 모델 sequence data를 tabular 형태로 전환해서 feature e...

P Stage 2 : Project Day 6 Day 6 역할분담 EDA 역할분담 이전 대회에서 아쉬웠던 점을 회고하던 중 역할분담이 부족했다는 피드백이 있었음 이번에는 기간별, 역할 분담을 진행해서 어느정도 cross-check 방식으로 진행하기로 함 내가 맡은 역할은 EDA, Feature Engineering...

DKT : DKT 이해 및 DKT Trend DKT란? 최근 연구가 활발히 이루어지고 있는 분야 기존에도 지식 상태를 추적하는 Knowledge Tracing(KT) 연구는 있었음 기존의 KT에 Deep Learning을 적용하는 방식이라고 해서 DKT라는 이름이 붙음 Knowledge Tracing Knowledge T...

P Stage 2 : Project Day Final Day Fianl 전반적인 회고 전반적인 회고 이번 대회에서 내가 맡은 역할 데이터 분석 : 대회 데이터 EDA 코드 최적화 및 모델 개발 이번 대회의 문제 분석을 가장 중요하고 제대로 했다고 생각했음 결과적으로 보면 섣...