NECがビッグデータの機械学習を高速化する技術を開発、インメモリー処理やMPIを導入(インタビュ | itマサのブログ

itマサのブログ

IT関連のニュースを見て一言

 NECは、ビッグデータ分析を高速化する分散処理フレームワーク「Feliss」を開発した。ビッグデータ分析でよく用いられるHadoopは、Map-Reduce型の単純な分析であれば高速に実行できるが、繰り返し演算を多用する機械学習処理では、ジョブ間でストレージを経由してデータをやり取りするHDFSがボトルネックとなり、演算の効率を上げにくい。