AI 부트캠프 이어드림스쿨 3기 Data Engineer 과정 수료
▻ 중소벤처기업부 장관상 수상
▻ 우수학습자 3회, 개근상 수상
언어:
클라우드 컴퓨팅 및 인프라:
빅데이터 및 데이터 처리:
데이터베이스:
- 4주간, 5인 팀 프로젝트
- AWS EC2 인스턴스를 사용하여 6대 규모 클러스터 구축
- WebHDFS의 REST API를 사용하여 통신 및 데이터 적재
- 6주간, 5인 기업연계 팀 프로젝트
- AWS Redshift 에서 ELT로 작업 시 과부하가 걸려 ETL로 변경
- JupyterLab 환경에서 PySpark 이용해 데이터 처리