Data Engineering[Data Engineering] Docker와 WSL로 구현하는 Kafka 클러스터: 데이터 엔지니어링 환경 구축 튜토리얼WSL 설치 방법 이 포스트에서는 WSL에 대한 내용은 나오지 않습니다. WSL은 다음 포스트를 확인 후 …NASA15152022-05-09 2 min
Data Engineering[Data Engineering] 데이터 엔지니어를 위한 GCP Dataproc 활용법: PySpark로 BigQuery 데이터 변환 및 적재✌ DataProc Cluster 생성 GCP 탐색 메뉴 > Dataproc > 클러스터 선택 > 클러스터…NASA15152021-09-08 2 min
Data Engineering[Data Engineering] GCP DataFlow로 구현하는 BigQuery ETL: PySpark 활용 실전 가이드✔ DataFlow에 대해서.. DataFlow는 GCP에서 DataPipeline(ETL, MR 등)을 …NASA15152021-09-02 1 min
Data Engineering[Spark] Apache Hadoop 클러스터에서 YARN과 Spark 애플리케이션 연동하기: 완벽 가이드😎 About This Post Spark Standalone Cluster도 구성해보았고 - Spark…NASA15152021-08-16 1 min
Data Engineering[Data Engineering] Apache Hadoop Full Distribute 클러스터 설치부터 구성까지: 실전 튜토리얼✔ 설치 환경 Hadoop 3.3.0 (Full-Distribute Mode) Server Master W…NASA15152021-08-15 2 min
Data Engineering[Spark] Apache Spark 3.0 Standalone 클러스터 설정부터 Zeppelin 연동까지: 실전 가이드✔ Azure VM에 Spark StandAlone Cluster 구성 Spark StandAlone Cl…NASA15152021-08-14 1 min