/var/log/hadoop.log

logs about distributed processing frameworks

2013-08-05から1日間の記事一覧

HDFS-4953(mmap(2) を用いたローカル読み込みの高速化)について

HDFSが高速に?mmapによるzero-copyでの読み込みにて,id:kawamon さんが,HDFS-4953 のチケットについてコメントをしていた.Hadoop の処理は,IO した後の Java のオブジェクト生成などが原因で CPU ボトルネックになりやすい.よって,この手のCPUコスト…