Apache Spark Cluster on Google Cloud Platform
in Data on Engineering
구글 클라우드 플랫폼(Google Cloud Platform, GCP)을 사용해 Apache Spark Cluster를 띄우는 방법을 작성한 글입니다.
1) Compute Engine에서 클러스터를 띄우는 방법과 2) Dataproc을 사용하는 방법 2가지를 설명합니다.
Spark 공식 문서 참고
Apache Spark RDD NotSerializableException
in Data on Engineering
Apache Spark RDD NotSerializableException 오류에 대한 포스팅입니다!
Apache SparkSQL과 Dataframe
in Data on Engineering
SparkSQL과 Dataframe에 대한 포스팅입니다!
CS231n 12강. Visualizing and Understanding
Stanfoard CS231n 2017 12강을 요약한 글입니다.
Apache Zeppelin(아파치 제플린)
in Data on Engineering
Apache Zeppelin 장점
- Apache Spark와 궁합이 잘맞음
- Interactive한 레포트 작성 가능
