Hadoopエンタープライズソリューションセミナー2015
日時:2015年1月26日(月)
会場:東京コンファレンスセンター品川
ビッグデータ活用を支える基盤としてスタンダードとなったApache Hadoop。 Hadoopは並列分散処理の力で蓄積したデータを効率的に処理する オープンソースソフトウェアで、ビジネス上の価値がある情報を見出すことに広く活用されています。Hadoopをエンタープライズ用途で活用する要求と共に、 Hadoop2系やApache Sparkなど、新たな仕組みが次々と生まれ、Hadoopは進化し続けています。
NTTデータはこのHadoopにいち早く取り組み、日本でHadoopという言葉が浸透する以前の2008年から数多くのシステムで運用経験を培ってきました。 本セミナーではHadoopの「今」をお伝えするとともに、NTTデータが長年かけて培ってきたノウハウや企業システムにおける利用事例をご紹介します。 また、NTTデータで取り組む他のオープンソースソフトウェアについてご紹介する「NTTデータ オープンソースDAY2015」も同時開催いたします。ご来場お待ちしております。
- 日 時:2015年1月26日(月)
- 会 場:東京コンファレンスセンター・品川
- 参加費:無料
- 主 催:株式会社NTTデータ
(同時開催:NTTデータオープンソースDAY 2015※1回の参加登録でどちらのイベントにもご参加いただけます)
本セミナーは盛況に終了しました。
みなさまご来場ありがとうございました。
PROGRAM SESSION LIST
プログラム・セッション一覧
プログラム一覧
オープニングトーク・ご案内
NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス シニアエキスパート
濱野 賢一朗
【基調講演1】NTTデータの Hadoop / OSS 戦略
NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 課長 下垣 徹
<講演概要>
NTTデータは2008年からHadoopへの取り組みを開始し、エンタープライズ用途で数多くのHadoopシステムを運用しています。
本講演では、NTTデータがHadoopを含めたOSSの現状をどのように捉えているかを説明し、 NTTデータがお客様の課題解決のために何が実現できるのかをお伝えします。
【基調講演2】Twitterデータ提供サービスにおけるHadoopの活用事例
NTTデータ 第三法人事業本部 ソーシャルビジネス推進室 課長 佐藤 勇一郎
NTTデータ 基盤システム事業本部 OSSプロフェッショナルサービス 主任 関 堅吾
<講演概要>
NTTデータは、ツイートデータの再販をTwitter社から許諾されている、国内初に して唯一の企業であり、過去に投稿されたすべての日本語ツイートを取得できる 「Twitterデータ提供サービス」を提供しています。
本講演では、Twitter データ提供サービスの概要や、本サービスの導入事例をご紹介します。また、大量のデータを蓄積し処理するためにHadoopを活用していることに加え、オープンソースソフトウェアのみで構成された本システムの特徴についてもご紹介いたします。
ランチタイム(※大ホール内は作業のためご利用いただけません)
-
Hadoopエンタープライズ
ソリューションセミナー 2015事例
NTTデータだからこそできるHadoop徹底活用のための取り組み~OSS並列分散処理技術を安心・安全に利用するために~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長
下垣 徹A1 (40min) :【事例】NTTデータだからこそできるHadoop徹底活用のための取り組み~OSS並列分散処理技術を安心・安全に利用するために~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長
下垣 徹NTTデータは日本におけるHadoopのリーディングカンパニーとして、それまでに培ってきたOSSに対する知見を踏まえたうえで、 最新技術を安心・安定して使えるよう工夫しながらこれまでお客様に提供してまいりました。
本セッションではお客様からの信頼を得ながらOSSを導入してきた経験を踏まえ、Hadoopを初めとするOSSの並列分散処理技術を 導入する上での工夫点や、他社とは一味違うNTTデータ流の適用のコツをお伝えします。 -
Hadoopエンタープライズ
ソリューションセミナー 2015テクノロジー
40分でよくわかる!Hadoop超初心者入門
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
徳田 学B1 (40min) :【テクノロジー】40分でよくわかる!Hadoop超初心者入門
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
徳田 学Hadoop という単語は新聞・雑誌・Webでよく耳にするものの、 実際にHadoopがどのようなものかをご存知ない方もいらっしゃいます。
本セッションではそのような方向けに「ここだけ押さえておけば大丈夫」というHadoopの基本的な概念や動作について、分かりやすく解説します。 -
NTTデータ
オープンソースDAY 2015事例
OpenStack技術ユースケース紹介 ~「ドコモメール」を支えるペタバイトクラスのクラウドアーカイブストレージ~
NTTデータ
基盤システム事業本部
システム方式技術事業部
課長代理
桝本 圭NTTデータ
基盤システム事業本部
システム方式技術事業部
梶波 崇C1 (40min) :【事例】OpenStack技術ユースケース紹介 ~「ドコモメール」を支えるペタバイトクラスのクラウドアーカイブストレージ~
NTTデータ
基盤システム事業本部
システム方式技術事業部
課長代理
桝本 圭NTTデータ
基盤システム事業本部
システム方式技術事業部
梶波 崇NTTドコモ様が提供する「ドコモメール」のアーカイブストレージは約1800万人のエンドユーザを受けきる6.4PBにも及ぶ大規模ストレージです。
この度、当社プライベート・クラウドストレージ・ソリューションを用いてこのストレージを構築した事例をご紹介いたします。 昨今エンタープライズ用途への適用が注目されるOpenStack Swiftを用いて実現したものであり、 関連する当社の取り組みも併せてご紹介いたします。
-
事例
電力情報子会社におけるHadoopバッチ処理基盤の実現にむけて
株式会社中電シーティーアイ
ITソリューション事業部
クラウドセンター
石野 佑弥NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
山口 雅博A2 (40min) :【事例】電力情報子会社におけるHadoopバッチ処理基盤の実現にむけて
株式会社中電シーティーアイ
ITソリューション事業部
クラウドセンター
石野 佑弥
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
山口 雅博電力業界においてもHadoopは注目されており、評価を積極的に進めています。本セッションでは、評価を通じて得られた、電力業界に必要なバッチ処理基盤としてのHadoopに対する知見や、 今後の期待についてユーザ企業の立場からお話します。
-
テクノロジー
Hadoop安定運用の勘所 ~Hadoopサポートサービスから伝える、迷走しないためのポイント~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
山下 真一B2 (40min) :【テクノロジー】Hadoop安定運用の勘所 ~Hadoopサポートサービスから伝える、迷走しないためのポイント~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
山下 真一NTTデータのHadoopサポートサービスでは、年間数百件に及ぶ問い合わせに対応しています。 その中には頻出する問い合わせもあり、Hadoopを利用されている方がつまづきやすいポイントがあることが分かりました。
本セッションでは、それらのポイントの中から特に有用と思われるものをピックアップし、 Hadoopを安定運用するための勘所として、ご紹介します。 -
事例
NTTデータと PostgreSQL が挑んだ総力戦 ~ PostgreSQL を極限まで使い切ったその先に見たものとは? ~
NTTデータ
基盤システム事業本部
システム方式技術事業部
澤田 雅彦C2 (40min) :【事例】NTTデータと PostgreSQL が挑んだ総力戦 ~ PostgreSQL を極限まで使い切ったその先に見たものとは? ~
NTTデータ
基盤システム事業本部
システム方式技術事業部
澤田 雅彦NTTデータではこれまで数多くの大規模基幹系システムへPostgreSQLを適用してきました。 高信頼、高性能が求められるシステムへの適用には、PostgreSQLを最大限使いこなすことが不可欠です。 本セッションでは、NTTデータ 10 年間の PostgreSQL ノウハウを結集し挑んだ導入事例を交えて、 PostgreSQL がどのように使われているかを紹介します。
-
事例
国内大手金融機関におけるメインフレームから Hadoopへの移行検討事例
NTTデータ
第一金融事業本部
金融グローバルITサービス事業部
課長
坂巻 資浩NTTデータ
第一金融事業本部
金融グローバルITサービス事業部
課長代理
岡 信行A3 (40min) :【事例】国内大手金融機関におけるメインフレームから Hadoop への移行検討事例
NTTデータ
第一金融事業本部
金融グローバルITサービス事業部
課長
坂巻 資浩NTTデータ
第一金融事業本部
金融グローバルITサービス事業部
課長代理
岡 信行国内の多くの金融機関では、トラフィックの増加に伴い特に月次処理で必要なデータ件数が増え続けています。 メインフレーム上のバッチ負荷のピークカットによるコスト削減が必要とされており、実際に、 某国内大手金融機関においてバッチ処理をHadoopに移行する検討を進めています。
本セッションでは、検討のポイントや、MapReduce処理を実装し得られた知見について、 実践的な内容に踏み込んでお話しいたします。 -
事例
はじめてのSpark ~プロが伝える Hadoop + Spark 活用術~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
土橋 昌B3 (40min) :【事例】はじめてのSpark ~プロが伝える Hadoop + Spark 活用術~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
土橋 昌NTTデータは、Hadoop上での多様な処理の実現やさらなる処理高速化の要求に応えるため、Apache Sparkに取り組んでいます。 Sparkは単体で使用するよりも、Hadoopと組み合わせて使用することで真価を発揮します。 Hadoopに蓄積したデータをSparkで 多様に分析することで、システムの有用性が大きく高まります。
本セッションでは、約4000コアの環境にSparkを導入した経験を踏まえて、Spark導入のメリットや、 HadoopとSparkを連携させる際のポイントをご紹介します。 -
テクノロジー
HeapStats: A New Java VM Monitoring and Analysis Tool
日本電信電話株式会社
シニアエキスパート
髙雄 慎二日本電信電話株式会社
エキスパート
久保田 祐史C3 (40min) :【テクノロジー】HeapStats: A New Java VM Monitoring and Analysis Tool
日本電信電話株式会社
シニアエキスパート
髙雄 慎二
日本電信電話株式会社
エキスパート
久保田 祐史OpenJDK には数多くのトラブルシューティングツールが備わっていますが、 目的別に用意されているツールを一つ一つ理解したり、アプリケーションを 実行する前に準備をする必要があります。更には実行時の手間や負荷が大きく、 商用環境では使い辛いといった課題がありました。
NTT OSS センタでは、日ごろのトラブルシューティングの経験を活かし、Java ランタイムの各種詳細情報を継続的かつ網羅的に収集することで、事後 解析が可能となる軽量な解析支援ツール「HeapStats」を開発しました。
本セッションでは、実際の事例に沿ったデモを交えながら「HeapStats」を 紹介します。
-
テクノロジー
Spark 最新動向とエンタープライズ適用に向けたNTTデータのコミュニティ貢献
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
都築 正宜A4 (40min) :【テクノロジー】Spark 最新動向とエンタープライズ適用に向けたNTTデータのコミュニティ貢献
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
都築 正宜NTTデータは Hadoopだけでは成し得ない多様な処理の実現や さらなる処理高速化の要求に応えるため、 Apache Sparkに積極的に取り組んでいます。
本セッションでは、開発が非常に活発なSparkの中でも、 特に注目すべきと考えている機能について、 最新情報とともにご紹介します。 また、海外で普及が進んでいるSparkを日本のエンター プライズ環境に適用するためのポイントを解説し Hadoop を長く運用してきた経験に基づく Spark コミュニティへの貢献についてお伝えします。 -
事例
北米金融業界のHadoop事例
ホートンワークス
プリンシパル・アーキテクト
Aaron WiebeB4 (40min) :【事例】北米金融業界のHadoop事例
ホートンワークス
プリンシパル・アーキテクト
Aaron Wiebe世界規模の金融機関に対しホートンワークスのHadoopソリューションは先進的サービスの提供のみならず、 不正検出、リスク・マネージメント、法規制順守といった根本的な問題にも対処。 金融機関特有のセキュリティ問題を克服してきた事例も含めAaron Wiebeが具体的な例とともに 効果的なソリューション、戦略を解説します。
-
事例
IoT時代のデータ処理を担う Storm によるストリーム処理活用術
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
竹内 一弓C4 :【テクニカル】ストリームデータ分散処理基盤「Storm」のご紹介
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
課長代理
竹内 一弓IoT時代の到来により、端末機器からセンサデータが大量に生成されるようになりました。 不正検出やリアルタイムな集計・モニタリング等の実現のためにストリーム処理の導入が適切なケースが増加しています。NTTデータは、OSSのStormとKafkaを用いてストリーム処理を実現し、大規模環境で利用しています。
本セッションでは、導入事例と、実際に導入して得られた知見についてご紹介します。
~
17:30
-
事例
リクルートライフスタイルにおけるJubatus活用事例 ~オンラインレコメンドの導入に向けて~
株式会社リクルートライフスタイル
プロダクトマネジメントユニット
データアナリスト
小林 元NTTデータ
第三法人事業本部
方式基盤技術部
課長代理
高木 成典A5 (40min) :【事例】リクルートライフスタイルにおけるJubatus活用事例 ~オンラインレコメンドの導入に向けて~
株式会社リクルートライフスタイル
プロダクトマネジメントユニット
データアナリスト
小林 元NTTデータ
第三法人事業本部
方式基盤技術部
課長代理
高木 成典リクルートライフスタイルが提供する「ポンパレモール」や「Hot Pepper」では、 訪問されたお客様により良い商品を提供できるようレコメンドシステムの共通基盤の導入を進めています。
バッチ処理によるレコメンドの実現に加えて、サイト訪問中をアクションを即時反映させたオンラインレコメンドの導入にあたり、 Jubatusを適用しました。本講演ではサービス化するにあたってのポイントを解説します。 -
テクノロジー
Hadoopコミッタが語るYARNの世界 ~Hadoop 2.6 最新機能より~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
鯵坂 明B5 (40min) :【テクノロジー】Hadoopコミッタが語るYARNの世界 ~Hadoop 2.6 最新機能より~
NTTデータ
基盤システム事業本部
OSSプロフェッショナルサービス
主任
鯵坂 明Hadoop 2系では、従来型の Hadoop からアーキテクチャが変更されて、YARN と呼ばれる Hadoop クラスタ内のリソース制御基盤が導入されました。 それにより、複数の異なるデータ処理エンジンを1つのクラスタ上で動かせるようになりました。
本セッションでは、先日Hadoopコミッタ(主要開発者)に就任した鯵坂がHadoop 2.6の最新機能を解説しつつ、YARNを導入することに寄るメリットやYARNを利用する上でのポイントを紹介します。 -
テクノロジー
監視もジョブも、クラウド管理も「Hinemos」で
NTTデータ
基盤システム事業本部
システム方式技術事業部
主任
石田 純一C5 (40min) :【テクノロジー】監視もジョブも、クラウド管理も「Hinemos」で
NTTデータ
基盤システム事業本部
システム方式技術事業部
主任
石田 純一Hinemosは、監視機能 ジョブ機能を併せ持つ 唯一のオープンソースソフトウェアです。 本セッションでは、Hinemosを利用するメリット、各種機能、活用方法などを、 クラウド環境での活用例も交えながら、お伝えします。
また、来春リリース予定「Hinemos ver.5.0」の新機能についても、合わせてご紹介します。
A会場入口前スペースにて懇親会を開催します。
お気軽にご参加ください。軽食をご用意しています。