[Spark] 01. GFS와 하둡, 스파크까지 데이터 처리 기술 흐름
·
데이터분석/04. Apach Spark
부동산 플랫폼의 인턴 기간이 끝난 후, 최근 넥슨의 데이터 분석가 채용공고에 서류 합격 연락을 받았다. 우여곡절 끝?에 채용과제를 제출하고 결과를 기다리기 전까지 어떤걸 공부할까 고민하던 중넥슨 채용공고에 어렴풋이 적혀있던 우대사항이 기억이 났다. 그것은 바로Spark, Zeppelin, Airflow, Tableau 활용 경험을 보유한 지원자를 뽑고있다.Airflow와 Tableau는 예전 코드잇 데이터분석 부트캠프에서 다뤄본 경험이 있지만 Spark, Zeppelin은 활용경험은 아직 없던 상태이다. 그래서 이번 기회에 Spark와 Zeppelin을 공부해볼겸, 블로그에다가 기록까지 남기면 좋을 것 같아서 오랜만에 포스트를 작성 중이다.먼저 빅데이터의 처리 과정을 간단하게.. 아주 짧게 요약해서 나열..