社会の頭脳システム　—モバイル空間統計を支える大規模データ処理基盤

ドコモは大規模データの解析により、「モバイル空間統計」に代表される新たなサービスを開発、実行する「社会の頭脳システム」の研究に取り組んでいる。本稿では、大規模データ処理基盤としてのHadoopTMシステムの設計、構成、運用、プログラム開発について解説する。本システムは、市販のコモディティIA サーバ1,000台超から構成され、監視、運用にはオープンソースソフトウェアを活用した。さらに、MapReduce による大規模プログラムを開発し、その実行最適化を行った。