リアルタイム性が要求されない場合

HDFSにファイルを上げて、JMSのTransactionつきQueueMessageでファイル名を流せば、バッチ処理が分散して出来ますねぇ。