Skip to content
View zyaparrot's full-sized avatar
🦜
parrot
🦜
parrot
  • Korea
  • 05:21 (UTC +09:00)

Block or report zyaparrot

Block user

Prevent this user from interacting with your repositories and sending you notifications. Learn more about blocking users.

You must be logged in to block users.

Please don't include any personal information such as legal names or email addresses. Maximum 100 characters, markdown supported. This note will be visible to only you.
Report abuse

Contact GitHub support about this user’s behavior. Learn more about reporting abuse.

Report abuse
zyaparrot/README.md

🚀About me

AI 부트캠프 이어드림스쿨 3기 Data Engineer 과정 수료


🏅Awards

AI 부트캠프 이어드림스쿨

 ▻ 중소벤처기업부 장관상 수상
 ▻ 우수학습자 3회, 개근상 수상


🧑🏻‍💻Stack

언어:
Python Badge
클라우드 컴퓨팅 및 인프라:
AWS Badge Ubuntu Badge Docker Badge
빅데이터 및 데이터 처리:
Hadoop Badge Spark Badge
데이터베이스:
MySQL Badge Redshift Badge


📝Project

AWS EC2로 Hadoop Ecosystem 구축

  • 4주간, 5인 팀 프로젝트
  • AWS EC2 인스턴스를 사용하여 6대 규모 클러스터 구축
  • WebHDFS의 REST API를 사용하여 통신 및 데이터 적재

AWS EMR플랫폼 환경에서 ETL 파이프라인 구축 프로젝트

  • 6주간, 5인 기업연계 팀 프로젝트
  • AWS Redshift 에서 ELT로 작업 시 과부하가 걸려 ETL로 변경
  • JupyterLab 환경에서 PySpark 이용해 데이터 처리

🤙Contact

Linkedin Badge Gmail Badge


Pinned Loading

  1. LearnCode LearnCode Public

    1