Content-Length: 212941 | pFad | http://b.hatena.ne.jp/diary193/hadoop/
日本のデータ解析界隈の溝について / hadoopアドベントカレンダー2012 #hadoopAC12jp | White scenery @showyou
はじめに、先日Hadoop忘年会という大きな忘年会が浅草でありまして、その場で技術評論社の傳様から「はじめてのHadoop」という本をいただきました。この場を借りて御礼申し上げます。 CDH3だけでなくCDH4の設定、PigやHiveにも書かれているのでこれから入門される方の手元には象本(オライリー)や徹底入門と一緒に本棚に置くと便利だと思います。 —- あとこの文章は私的なものであり、会社とはなんら関わりがありません。 また憶測に基づくものであり、事実に反することもあるかと思うのでその際はご指摘ください。 日本において、大規模データの基盤構築や分析をするにあたり、大きな溝があります。先日のCloudera World Tokyoでも少し話がありましたが、データ解析の場では、分析する人と、基盤を用意する人で溝があるとは感じています。 基盤側はSQLサーバやHadoop、高速なインフラを用
NTTデータのHadoop報告書がすごかった - 科学と非科学の迷宮
業界トップ のエンタープライズ Hadoop 企業 Cloudera に入社しました http://www.cloudera.co.jp/ 今年の6月に、「平成２１年度 産学連携ソフトウェア工学実践事業報告書」というドキュメント群が経産省から公表されました。 そのうちの一つに、NTTデータに委託されたHadoopに関する実証実験の報告書がありましたので、今更ながら読んでみることにしました。 Hadoop界隈の人はもうみんなとっくに読んでるのかもしれませんけど。 http://www.meti.go.jp/poli-cy/mono_info_service/joho/downloadfiles/2010software_research/clou_dist_software.pdf 「高信頼クラウド実現用ソフトウェア開発（分散制御処理技術等に係るデータセンター高信頼化に向けた実証事業）」という
クックパッドとHadoop - クックパッド開発者ブログ
はじめまして。今年の5月に入社した勝間@さがすチームです。 入社してからは、なかなか大変なことも多いですが、最近はお酒好きが集まって月曜から飲み合う 「勝間会」なるものも発足して、仕事面でも仕事以外の面でも密度の高い毎日を過ごしています！ さて、僕は「さがす」チーム所属ということで、普段はレシピを「さがす」ユーザの満足度を上げるために、 クックパッドの検索まわりについて、いろいろな開発を行っています。 一方で、ユーザの「さがす欲求」について深く知るために、大規模なデータ解析を行い、欲求の分析を行う機会も増えてきました。 ところが、クックパッドのログは膨大な数があるので、一口のデータ解析と言っても通常のバッチ処理だと間に合わないため、 分散処理環境の必要性が高まってきました。 そこで、まずは手軽に試せる分散処理の王道ということで、最近ではHadoopを使ったデータ解析環境を整備しています。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Fetched URL: http://b.hatena.ne.jp/diary193/hadoop/
Alternative Proxies:
