CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。
メールアドレスがこのグループでは匿名化されているか、メンバーのメールアドレスを表示する権限がないため、元のメッセージを表示できません 落合と申します。 HBaseを使っていた際に、 1台のマシンの性能劣化で書き込み速度が大幅に劣化する問題が起こりました。 このような問題が設定で回避可能か、 ご教示いただけますでしょうか。 構成： ZooKeeper用サーバ（ZooKeeper） 1台 Masterサーバ（NameNode, JobTracker, HBaseMaster） 1台 Slaveサーバ（DataNode, TaskTracker, HRegionServer） 6台 1台のSlaveサーバに発生した問題： Slaveのうち1台だけ、 Masterからのpingの応答が、0.45ms ほどかかっていることを確認しました。 他のSlaveへのpingの応答は、0.15ms で、約3倍
1年経ってiPhone4の電池がヘタってきた、太田です。 指数関数的にエントリ数が少なくなってきた本ブログですがw、景気付けのためにエントリを投稿したいと思います！本日はHBaseについてです。 Linux と Hadoop と HBase と ZooKeeper に詳しいあなた！あなたがターゲットです。 HBaseとは? HBaseとは、HDFS (Hadoop Distributed File System)上に構築された分散データベースです。大量の非常に細かいデータをリアルタイムに読み書き出来るのが特徴です。最近ではFacebook Messageの基盤技術として使用された事で注目を集めています。 HBase公式サイト Apache HBase ブック 保存されたデータはHDFS上に保存され、HDFSの仕組みによってレプリケーションされるため安全にデータを保持することが出来ます。 ま
Introduction This page documents the Hive/HBase integration support originally introduced in HIVE-705. This feature allows Hive QL statements to access HBase tables for both read (SELECT) and write (INSERT). It is even possible to combine access to HBase tables with native Hive tables via joins and unions. A presentation is available from the HBase HUG10 Meetup This feature is a work in progress,
Apache HBase 入門 (第３回） Big Data のための Hadoop データベース by Tatsuya Kawano <http://twitter.com/tatsuya6502> Hadoop ソースコードリーディング 東京, #4, 2010年8月17日 2010年8月17日火曜日 [ ]自己紹介 Twitter: @tatsuya6502 証券会社の グローバル IT部門に勤務 シニア Java / Scala デベロッパー 個人研究として、2009年秋から HBase を評価中 グラフィックデザイナーでもある ニューヨークの美大 Pratt Institute を卒業し 数年間、現地アメリカ企業に勤務 HBase エバンジェリスト！ 2010年8月17日火曜日 [ ]内容 HBase と Cassandra ̶ トレードオフを理解する（続き） Map Redu
This document appears to be test results from running the Yahoo! Cloud Serving Benchmark on a system. It includes performance metrics like request latency distributions and throughput for different request sizes and concurrency levels. Various graphs and tables are presented showing results from multiple benchmark runs. The benchmark was run to test the performance of the system for serving reques
The document discusses big data and Hadoop concepts. It covers Hadoop operations like put, get, scan, filter, delete as well as join and group by. It also discusses the different types of data access patterns like random write, sequential read, sequential write and random read. The document focuses on big data, Hadoop operations, and data access patterns.Read less
Update: I want to thank Ben Black, Todd Lipcon, and Kelley Reynolds for pointing out the inaccuracies in the original post. I’ve gone through the references they provided and made corrections. Facebook, the data giant of the internet, recently unveiled a new messaging system. To be fair, I would normally ignore feature roll outs and marketing flimflam, but Facebook’s announcement is worthy of atte
Facebookが15日に発表した新しいサービス「Facebook Messages」は、チャットやつぶやき、そして電子メールなど、自分宛のテキストやメッセージをすべて1つのインボックスで管理できると発表されました。 同社が15カ月かけて開発してきたこの新サービスのバックエンドデータベースは、これまで同社が大規模運用してきたMySQLでも、同社が開発したNoSQLデータベースのCassandraでもなく、グーグルのBigTableをモデルとしてオープンソースで開発された分散データベース「HBase」でした。 Facebookのソフトウェアエンジニア、Kannan Muthukkaruppan氏がFacebookにポストした記事「The Underlying Technology of Messages」で、その技術的背景が紹介されています。 MySQLとCassandraが落選した理由 H
第10回Cassandra勉強会にて発表したスライドに、勉強会後のフィードバックを反映させた物です。Read less
ICHIRO SATOH @ichiro_satoh 分散システム屋的にはVector Clockは実システムでは使えないという、よく知られた経験則がありまして（スケールしないんですよ）RT @shot6: ちなみにCassandraで採用しようとしているのはVector ClockではなくVersioned Clockなのでっす。
Hi folks, We have been conducting a performance study comparing Cassandra and HBase (and Yahoo! PNUTS and MySQL) on identical hardware under identical workloads. Our focus has been on serving workloads (e.g. read and write individual records, rather than scan a whole table for MapReduce.) This is part of a larger effort to develop a benchmark for these kinds of systems (which we are calling YCSB,
If you’re looking for a developerWorks forum — Don't panic! You are in the right place. You are here because specific IBM developerWorks forums, blogs and other Connections content have been decommissioned. This page will help you find the content you are looking for, get answers to your questions, and find a new community to call home. Where am I? You are on the IBM Community area, a collection o
No self-respecting geek can resist either of these incredible temptations: Correct something wrong on “the internets” Produce a little bit of graphviz candy (what a fantastic tool) Imagine my total happiness discovering that I can exercise both of them simultaneously. I can only thank Digg’s John Quinn for creating the opportunity in his otherwise very interesting presentation, by including this d
Twitterで、@tatsuya6502(Tatsuya Kawano (@tatsuya6502) | Twitter)さんが、色々、教えてくれていたので 揮発性の頭脳としては、忘備録として書いておかなくては。。 補足：http://jp.hmaster.info/で、色々な資料を公開されています。 最初は、キャッシュ設定の例を教えてくれていた。 tatsuya6502. @yutuki_r 今朝の HBase のキャッシュ関連の件ですが、僕のおすすめの基本設定を教えます ( 2010-04-23 01:04:50 )tatsuya6502. @yutuki_r まず、hbase-env.shで、 HBASE_HEAPSIZEを最低でも2000に設定してください。これにより、-XX:+UseConcMarkSweepGCが有効に働いて、ガベージコレクションの影響を受けにくくなります (
このページの最終更新は 2009年10月15日 (木) 09:45 に行われました。 このページは 214 回アクセスされました。 プライバシー・ポリシー LunaBiblosについて 免責事項
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
