[무료교육 2차] Real 빅데이터 플랫폼 구축 해보기~
관리자
0
3258
0
2019.02.28 10:01
날짜 : 2018-03-16
위치 : 추후통지
유형 : 무료교육
안녕하세요? NoSQL 한국 사용자그룹 운영자입니다.
저희 커뮤니티는 지난 2012년 2월부터 2019년 현재까지 NoSQL의 기술 전달과 공유를 위해
꾸준한 노력을 해 왔습니다.
이에 제15기 NoSQL 기초/중급 스터디 그룹 8차 모임에 참여할 멤버를 다음과 같이 모집합니다.
라즈베리파이를 이용한 실생활 데이터의 발생/수집부터 MongoDB 서버 저장 그리고 ElasticSearch & Kibana를 이용한 분석까지
전체 단계를 직접 구축하는 100% 실무 환경으로 Real 빅데이터 플랫폼 교육 과정입니다.
* 교육비는 무료이지만 참가비(교육장소 임대 및 라즈베리파이 구입 비용 그리고 다과비용이 일부 발생합니다.)
* 본 과정은 하반기부터 유료과정으로 전환됩니다.
** 2인 1조로 실습하여 실무 중심의 빅데이터 플랫폼 구축을 직접해 보실 수 있습니다.
선착순 모집 (7차 모임에 참석하셨던 분들은 우선 선정)
** 금번 모임에서는 ElasticSearch & Kibana 구축 및 카메라 센서를 이용한 방범 데이터를
실시간 수집 및 전송에 관련한 플랫폼 구축이 목적입니다.
* 목차
<개요>
1) 빅데이터 Processing Flow
2) 빅데이터 구축 사례 소개
- 실시간 수도 검침 분석 서비스
- 동영상 콘텐츠 서비스
- Smart Farm을 이용한 영농이력 서비스
- 온라인 광고 서비스
1장. 실생활 데이터 발생 및 수집
1) 빅데이터 플랫폼 이해 & IOT Device
2) Raspberry Pi
- Hardware 구조 이해
- Raspbian OS 설치
- 각종 Sensor (온습도, 초음파 거리측정, 모션측정, 카메라)
2장. 빅데이터 수집 및 전송
1) MQTT Broker & Client
- 관련 Library 설치
- MQTT 프로토콜에 대한 이해
- MQTT Dash 앱을 이용한 온습도 데이터 안드로이드 폰 데이터 전송 실습
2) 각종 센서 설치 및 파이썬 코딩
- 온도/습도 감지 데이터 수집 및 분석 &n Python Coding
- 초음파 거리측정 데이터 수집 및 분석
- 라즈베리파이 Disk 상태정보 수집 및 분석
- 침입자 감지 & 실시간 사진 전송 & 동영상 촬영 및 NoSQL 서버 저장
3) Fluent-Bit & FluentD & Nifi
- 관련 SW 설치
- Config 환경파일 설정(Routing & Buffering)
- Connection Between Raspberrypi and Route Server
- Nifi 설치 및 환경 설정(선택)
3장. 빅 데이터 저장 및 관리
- MongoDB 다운로더 & Shard-Cluster 설치 및 구축
- 분산 Read/Write 위한 Read-Preference 환경 설정
- Analysis & Aggregation Framework 활용
- Redis Replication 서버 구축 (선택)
4장. 시스템 동기화 솔루션 활용
- Monstache 설치 및 환경 설정
- Config 환경파일 설정
- Connection Between MongoDB(Redis) and ElasticSearch
5장. 빅 데이터 분석
- ElasticSearch/Kibana 설치
- 실습 데이터 Import
- 서울시 대기오염 수집 데이터 분석(Vertical-bar, pie 등)
- 서울 지하철 위치 정보 분석(coordinate-Map 등)
- R 설치 및 Rmongo를 이용한 분석
1) 멤 버 모 집 : 15th NoSQL Study Meetup
2) 모 집 기 간 : 선착순 모집 (인원수 제한함~) 2019-02-28 ~ 2019-03-15
8차모임 : 2019-03-16(토) 10:00 ~ 15:00
3) 자 격 :NoSQL에 대한 열정이 있는 일반 회원이면 누구나 참가할 수 있습니다.
참가신청하기 --> https://cafe.naver.com/mongodatabase/3455
