28 Posts Tagged: “DataEngineering”
Spark의 Temporary View에 대하여
June 16, 2017
2 min read
SQL의 View 처럼 Spark에서도 View를 지원합니다. 이 포스팅에서는 Spark 2.1.…
Jupyter에서 Scala로 Spark 사용하는 방법
March 22, 2017
2 min read
이 글은 평소에 Jupyter Notebook 에 익숙해져있는 분들께 유용할 듯 합니다. Zeppelin Notebook…
빅데이터 처리에 Scala가 필요한 이유
March 17, 2017
4 min read
StackOverFlow나 Quora를 보면 Scala has taken over the Big Data world…
GFS, HDFS 그리고 MapReduce
March 14, 2017
2 min read
…
OS X에서 Homebrew로 Spark, Zeppelin 설치하기
March 13, 2017
2 min read
Apache Spark is a fast and general engine for large-scale data processing…
Pandas DataFrame을 병렬처리 하는 방법
February 27, 2017
1 min read
Scikit-learn의 모델들은 cython과 joblib으로 최적화 및 자동 병렬처리 되도록 설계되어 있지만, Pandas…
