SlideShare a Scribd company logo
Storm
- Parallel and Distributed –
Taewoo Kim
Parallel
사전적 의미 : 평행한, 병렬의
- 1 -
작업을 동시에 수행
Parallel
- 2 -
같은 동작을 하는 Bolt를 여러 개
생성
주기적으로 동작하는 Spout로 부터
Stream을 받은 뒤 동일한 작업을
수행
Grouping을 통해서 신뢰성을 유지
Parallel
- 3 -
출처 : Getting Started with Storm
Distributed
- 4 -
사전적 의미 : 분산된
작업을 서로 다른 장비에서 수행
Distributed
- 5 -
출처 : Getting Started with Storm
Nimbus
관리 감독 Zookeeper
Cluster의 상태를 유지
Supervizor
Topology의 일부를 수행
Distributed
- 6 -
- How to make Storm Cluster?
>> Nimbus 설정
>> Zookeeper 설정
>> Supervisor 설정
- Remote Mode
>> StormSubmitter
- DRPC Topologies
>> Distributed Remote Procedure Calls
- Next Week
>> 분산 처리 환경 구축해보기

More Related Content

PDF
Kafka introduce kr
PPTX
[오픈소스컨설팅]Kafka message system 맛보기
PPTX
Ubuntu & C9(node.js) with AWS
PDF
Reactive Programming with Rxjs
PPTX
[넥슨] kubernetes 소개 (2018)
PDF
Mongo DB 활용가이드 Tip 35 ~ 41
PDF
스톰 미리보기
PDF
Storm 훑어보기
Kafka introduce kr
[오픈소스컨설팅]Kafka message system 맛보기
Ubuntu & C9(node.js) with AWS
Reactive Programming with Rxjs
[넥슨] kubernetes 소개 (2018)
Mongo DB 활용가이드 Tip 35 ~ 41
스톰 미리보기
Storm 훑어보기

Viewers also liked (20)

PDF
실시간 빅 데이터 기술 현황 및 Daum 활용 사례 소개 (2013)
PDF
Storm begins
PPTX
Storm - understand by coding
PDF
Real-time Big Data Analytics Practice with Unstructured Data
PDF
기술6기 3조
PDF
하둡2 YARN 짧게 보기
PPTX
스사모 테크톡 - GraphX
PPTX
빅데이터 구축 사례
PDF
지금 핫한 Real-time In-memory Stream Processing 이야기
PDF
Chapter3 - learning spark
PDF
SPARK SQL
PPTX
클라우드 서비스운영 플랫폼 가루다
PDF
NiFi 시작하기
PDF
Apache Zeppelin으로 데이터 분석하기
PDF
Spark 의 핵심은 무엇인가? RDD! (RDD paper review)
PDF
[241] Storm과 Elasticsearch를 활용한 로깅 플랫폼의 실시간 알람 시스템 구현
PDF
빅데이터 기술 현황과 시장 전망(2014)
PPTX
Resource Aware Scheduling in Apache Storm
PDF
Scaling Apache Storm - Strata + Hadoop World 2014
PDF
Storm: distributed and fault-tolerant realtime computation
실시간 빅 데이터 기술 현황 및 Daum 활용 사례 소개 (2013)
Storm begins
Storm - understand by coding
Real-time Big Data Analytics Practice with Unstructured Data
기술6기 3조
하둡2 YARN 짧게 보기
스사모 테크톡 - GraphX
빅데이터 구축 사례
지금 핫한 Real-time In-memory Stream Processing 이야기
Chapter3 - learning spark
SPARK SQL
클라우드 서비스운영 플랫폼 가루다
NiFi 시작하기
Apache Zeppelin으로 데이터 분석하기
Spark 의 핵심은 무엇인가? RDD! (RDD paper review)
[241] Storm과 Elasticsearch를 활용한 로깅 플랫폼의 실시간 알람 시스템 구현
빅데이터 기술 현황과 시장 전망(2014)
Resource Aware Scheduling in Apache Storm
Scaling Apache Storm - Strata + Hadoop World 2014
Storm: distributed and fault-tolerant realtime computation
Ad

More from Taewoo Kim (15)

PDF
[김태우] Simplechat using firebase
PDF
[김태우] 한국의 태초마을 유람기
PDF
[김태우] Soscon 후기
PPTX
Eclipse 4 RCP - 2nd Week
PPTX
Eclipse rcp - first week
PDF
Operating system #1
PPTX
I know - Chrome and Plugin
PPTX
Advanced operation system
PPTX
Streaming join & lesson 4.
PPTX
[Taewoo Kim] Real-Time Analytics with Apache Storm
PPTX
Real-Time Analytics with Apache Storm
PPTX
One Week Project #1
PPTX
Real-time Video Analysis System
PPT
Big Data & Hadoop by Skidmarkii
PPT
Apache Storm by Skidmarkii
[김태우] Simplechat using firebase
[김태우] 한국의 태초마을 유람기
[김태우] Soscon 후기
Eclipse 4 RCP - 2nd Week
Eclipse rcp - first week
Operating system #1
I know - Chrome and Plugin
Advanced operation system
Streaming join & lesson 4.
[Taewoo Kim] Real-Time Analytics with Apache Storm
Real-Time Analytics with Apache Storm
One Week Project #1
Real-time Video Analysis System
Big Data & Hadoop by Skidmarkii
Apache Storm by Skidmarkii
Ad

Storm - parallel and distributed

  • 1. Storm - Parallel and Distributed – Taewoo Kim
  • 2. Parallel 사전적 의미 : 평행한, 병렬의 - 1 - 작업을 동시에 수행
  • 3. Parallel - 2 - 같은 동작을 하는 Bolt를 여러 개 생성 주기적으로 동작하는 Spout로 부터 Stream을 받은 뒤 동일한 작업을 수행 Grouping을 통해서 신뢰성을 유지
  • 4. Parallel - 3 - 출처 : Getting Started with Storm
  • 5. Distributed - 4 - 사전적 의미 : 분산된 작업을 서로 다른 장비에서 수행
  • 6. Distributed - 5 - 출처 : Getting Started with Storm Nimbus 관리 감독 Zookeeper Cluster의 상태를 유지 Supervizor Topology의 일부를 수행
  • 7. Distributed - 6 - - How to make Storm Cluster? >> Nimbus 설정 >> Zookeeper 설정 >> Supervisor 설정 - Remote Mode >> StormSubmitter - DRPC Topologies >> Distributed Remote Procedure Calls - Next Week >> 분산 처리 환경 구축해보기