Tech Blog 〜ぞうの日記

HadoopやLinux関連の技術的な内容の紹介です

Giraph関係のメモ

Facebookのグラフ処理はApache Giraph

たまたまTwitterでGiraphの記事を見つけたのでメモ。

Facebookがグラフ処理にApache Giraphを使っているという記事

https://m.facebook.com/notes/facebook-engineering/scaling-apache-giraph-to-a-trillion-edges/10151617006153920

FacebookはGiraphに貢献しているようです。この記事ではGiraph関連の話題が中心ですが、個人的に少々興味深かったのは、CoronaではなくYARNというところ(Hadoopからみて)。GiraphがYARNに対応したからでしょうね

https://issues.apache.org/jira/browse/GIRAPH-13

NSAはAccumuloを使っている?

関連するスレッドで、NSAがグラフ処理にApache Accumuloを使っているというスライドを発見。

http://es.slideshare.net/daniel_bilar/big-graph-analysis-issues-nsa

この手法は、CyberAgentのHornetに近いのかも?(Hornetではグラフ処理にHBaseを使用している)

HBaseを使ったグラフDB、Hornet

http://www.slideshare.net/brfrn169/hbasedbhornet-16105526

 

 

 余談

いよいよ本家のサーバ(linux.wwing.net)を移行することになりました。うまく移行できると良いんですが、、、だめならこちら(Hatena Blog)が本家になるかもしれません。