빅연디

지난 9/5일에 제 42회 SQLD 시험을 보고 왔습니다!!! 5일의 기적을 위해 스터디 카페 시간권도 끊고, SQL 벼락치기 공부를 했는데요,, 지난 회차들에 비해 이번 회차는 쉬운 편이라고는 하는데 합격여부는 나와봐야 알 것 같습니다. 도움이 될지는 모르겠지만 제가 공부했던 방법 공유하겠습니다. + SQL 경험 : 통계학 전공, SQL에 대해서 배운적은 없었지만 이번 방학에 참여했던 공공빅데이터 청년 인턴십 과정에 SQL 기본 및 활용 수업이 있어서 그때 처음 접하게 되었습니다. 간단한 SQL 개념 및 문법만 배웠고 SQL이 뭐구나.. 이정도만 안 상태였습니다. ( 복잡한 구문은 안배웠고, JOIN이나 WHERE 절.. 수준밖에 몰랐 ) + 시험 목적 : 데이터 분석에서 R, Python과 같은 프로..

3. 하둡 아키텍쳐 3.1 하둡 아키텍쳐 개념 - 하둡 1.0 : HDFS 및 Map Reduce를 근간으로 분산 병렬처리가 가능한 오픈소스 프레임워크 3.2 HDFS - HDFS(Hadoop File System) : 다수의 서버를 이용하여 클러스터를 구성하고 파일을 분산 저장하여 가용성을 높인 파일 시스템 3.3 Map Reduce - Map Reduce : HDFS 저장소를 기반으로 Key별로 로직을 처리하는 Map 작업과 결과를 취합하는 Reduce 작업으로 구성되어 병렬 연산 가능한 하둡 처리기술 - Map Reduce의 구성 : Job Tracker, Task Tracker - Map Reduce의 특징 : HDFS에 저장된 데이터를 소스로 병렬 연산 수행, 개발자는 Map 함수와 Reduce..