2008-06

ミラクルリナックス吉岡さんにお世話になって、第88回カーネル読書会で話させて頂く事になりました。

お題はHadooooooooop!です。

- 第88回カーネル読書会のおしらせ

是非お越しくださいませ

Hadoop記事の第３回が公開されました。

• 複数マシンへHadoopをインストールする

今回はついに複数マシンでHadoopを動作させる方法を解説しています。次回は大倉さんの記事になります。

第１回、第２回は以下になります。

• Hadoop、hBaseで構築する大規模分散データ処理システム
• Hadoopのインストールとサンプルプログラムの実行

うちの学科のHPがリニューアルしました。色々な人の努力が結集されているみたいなので、宣伝させていただきます。

- ホームページ

大学３年生からの人も、大学院からの人も、是非ご覧下さい。

少し前から気になっていた、インテルによる並列プログラミングライブラリIntel Threading Building Block (TBB) を試してみました。

id:nishidakeisukeさんも最近書かれていましたね。

- インテル スレッディング・ビルディング・ブロック

オライリーの本自体は４月ぐらいに読み終わっていたのだが、実際に試してなかったので試してみた。

Continue reading

Erlang勉強会

行ってきました。初mixiオフィス。

Dynamoのアルゴリズムに関しては知ってる話だったので、僕としてはErlangの実装の所が色々と楽しかったです。プログラミング言語Erlangを４月に読んで、結局実際に書かずじまいになってるので良くないなあ。

あとTokyoTyrantではepoll(2)で読み込み可能なfdをゲットしてそれをqueueに入れて、スレッドプール(8 thread)で同期的にread(2)して処理しているらしい。

それだとまだ届いてないパケットが有る時にread(2)がブロックして最大性能が出ない気がするのですが、mixiで実際に運用してる所をみるとあんまり関係無いのかしら。

僕はいつもepoll(2)ループでプロトコルの終端までread(2)してから、その内容と共にqueueに突っ込んでたので、あれ？と思ってしまった。

打ち上げではid:tasukuchan、瀧内さん、みかかの人達と分散系・アルゴリズム系の話をしていた。余りにも面白かったので、一部の人としか話せなかったのはちょっと勿体無かったかな・・・。