Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 | 31 |
Tags
- Adapter 패턴
- 안드로이드 웹뷰
- 주키퍼
- Play2 로 웹 개발
- 파이썬 데이터분석
- 하이퍼레저 패브릭
- Hyperledger fabric gossip protocol
- Actor
- Play2
- play2 강좌
- 파이썬 동시성
- 플레이프레임워크
- hyperledger fabric
- 이더리움
- 엔터프라이즈 블록체인
- 파이썬
- 하이브리드앱
- Akka
- 스위프트
- 파이썬 머신러닝
- 스칼라
- akka 강좌
- Golang
- play 강좌
- 스칼라 강좌
- 파이썬 강좌
- 블록체인
- CORDA
- 스칼라 동시성
- 그라파나
Archives
- Today
- Total
HAMA 블로그
[ 하둡 인사이드 ] 5. 하둡 HDFS 쓰기 본문
순서
1) 하둡 RPC
2) 하둡 스트리밍
3) 하둡 & 보안
4) 하둡 HDFS 읽기
5) 하둡 HDFS 쓰기
6) 하둡 IO (Writable / Avro)
7) 하둡 & 가용성 (Zookeeper)
8) 하둡 쉘 스크립트 및 환경
하둡은 HDFS 라는 분산파일시스템과 맵리듀스라는 그것을 이용하여 계산을 하는 도구를 가지고있습니다. (YARN 이전) 계산에는 간단한 배치성 작업이 주를 이루며 다양한 머신러닝 알고리즘 (머하웃 라이브러리) 을 실행할수도 있습니다.계산복잡도,알고리즘형태에 따라서 지라프,하마같은 다른 도구를 사용할수도 있으며 , 하둡 YARN 과 함께 다양한 빅데이터 솔루션들이 하모니를 이루고 있습니다.
Storm-yarn 같은 도구를 사용하여 실시간 분석을 용이하게 할수도있으며, 메모리를 적극적으로 활용한 Spark 라는 제품도 각광을 받고 있습니다.
... 작성중 ...
'Hadoop' 카테고리의 다른 글
[ 하둡 인사이드 ] 3. 하둡과 보안 (0) | 2015.05.15 |
---|---|
[ 하둡 인사이드 ] 4. HDFS 읽기 (0) | 2015.05.02 |
[ 하둡 인사이드 ] 2. Hadoop Streamming (0) | 2015.05.01 |
하둡 쉘 스크립트 실행 순서도 | (0) | 2015.04.27 |
hadoop-1.2.1 이클랩스 import 하기 (0) | 2015.04.27 |
Comments