Hadoopのセキュリティについての雑記 認証についてはKerberosを使うというのがスタンダードですが、暗号化についても徐々に進んでいます。 ネットワークの暗号化 例えば、ネットワークの暗号化については下記のブログがお勧めです。http://blog.cloudera.com…

Facebookのグラフ処理はApache Giraph たまたまTwitterでGiraphの記事を見つけたのでメモ。 Facebookがグラフ処理にApache Giraphを使っているという記事 https://m.facebook.com/notes/facebook-engineering/scaling-apache-giraph-to-a-trillion-edges/101…

HDFSのShort-Circuit Local Readについてのブログ記事を読んで 先週お盆休みに公開されたブログ、「How Improved Short-Circuit Local Reads Bring Better Performance and Security to Hadoop」には興味深い内容が書いてあります。これは必読では？と思った…

前回に引き続き、EnterprisezineのDBOnlineに記事が掲載されました！ Cloudera Managerはかなり良くできていますし、無償版でもかなり使えるので、疑心暗鬼な方もだまされたと思って一度使って下さい。きっと止められなくなる、、、はずですw。（ツールなの…

夏なので、軽いネタをいくつか投稿していきます。 [質問] Hadoopって圧縮ファイルをサポートしているよね？例えばgzipとかbzip2とか。でも、何でzipはダメなの？意味わからへん。 という質問をもらったので、Jiraを調べてみました。結果、恐るべき事実が、、…