Apache Spark RDD, Dataframe을 DB(MySQL, PostgreSQL)에 저장하기
in Data on Engineering
Apaceh Spark RDD, Dataframe을 MySQL, PostgreSQL에 저장하는 방법에 대해 작성한 글입니다. Mac 환경에서 작업했으며, Spark Version은 2.3.0입니다
Xgboost 논문 리뷰 및 코드
in Data on Machine-Learning
Xgboost 논문 리뷰 및 코드를 작성한 내용입니다. 논문의 전체를 리뷰하진 않고 특정 부분만 했습니다
Up-sampling with Transposed Convolution 번역
in Data on Deep-Learning
Naoki Shubuya님의 Up-sampling with Transposed Convolution을 허락받고 번역한 글입니다.
번역이 어색한 경우엔 영어 표현을 그대로 사용했으며, 의역이 존재할 수 있습니다. 피드백 언제나 환영합니다!
Apache Kafka(아파치 카프카) Intro
in Data on Engineering
카프카, 데이터 플랫폼의 최강자를 읽고 Apache Kafka에 대해 정리한 글입니다!
Google Cloud Platform에서 Tensorflow, Jupyter Notebook 설치 및 startup script 설정
in Google Cloud Platform on Basic
이 글은 Google Cloud Platform의 Compute Engine에서 Tensorflow, Pytorch, Keras, Jupyter Notebook를 설치하는 내용을 다룹니다. 그리고 인스턴스 시작할 때마다 jupyter notebook을 자동으로 켜주는 startup script을 사용하는 방법도 포함되어 있습니다.
