Hadoop　NTTD　セミナー 午前1

gistfile1.txt

基調講演 10:18
NTTD OSS

2008年からHadoopに取り組んでいる
Doug Cuttin氏　は現Cloudera

エンタープライズということで
Hadoopを知らない人もかなりきてるので入門的な内容

Hadoop1
M/R
HDFS

Hadoop2
M/R
YARN
HDFS

YARNの上にM/R以外のアプリが動けるようになった
Storm
Spark

[これまでのNTTDのHadoopへの取り組み]
経済産業省 2009年実証実験　渋滞解析アプリケーション 100大規模
資料全300P公開

2010年Hadoop構築運用ソリューションを発表

運用例 IAサーバー1000台 NTTドコモ 社会の頭脳システム
国立国会図書館サーチ　（名寄せ処理、検索インデックス作成）


書籍を書いた
Hadoop徹底入門
Hadoop Hack (HadoopTips集)

懇親会で本一部プレゼント

[NTTDがお客様に提供できるもの]
OSS適材適所を見極める
長期に渡り利用方法を改善し続ける
コミュニティの力を引き出す

①Twitterデータ提供サービス

NTTDはHadoop貢献コード行数 6位

1,Hortonworks
2,cloudera
3.Yahoo
4.intel
5.MS
7.twitter


コミッターの紹介

[これからの取り組み]
YARNの本格導入
社会インフラを担うシステムへの導入（セキュリティなどのニーズへの対応強化
長期間運用への対応(EOS対応・バージョンアップ・クラスタ移行など)

Sparkへの取り組みを強化
Apacheプロジェクトでもトップ５にはいる活発さ
本日２セッションはある
Sparkをサポートする企業はあまりない（ない）のでNTTDが選考していきたい

Spark開発者のメッセージ
英語
10分

-----------
NTTDがイノベーションを起こしたい