富士通研、40Gbpsの通信データを蓄積しながら高速検索する技術を開発

富士通研究所は4月14日、ネットワーク解析の専用ハードウェアを用意しないと実現が難しかった40Gbpsの通信データを蓄積しながら高速検索する技術をソフトウェアで実現したと発表した。

これまで、この技術をソフトウェアで実現しようとすると、メモリやディスクの排他制御などの影響で性能に限界があり、高速な通信を詳細に分析しながら蓄積すること難しかった。

今回、通信データを取得するキャプチャ処理から蓄積までの各処理を細かく分解してデータの流れを止めずに実施し、各処理に適したデータ量にパケットをまとめて受け渡す、排他処理の不要な非ブロック型のデータ処理技術によって、汎用ハードウェアとソフトウェアだけで40Gpbsまでの通信データ蓄積と検索処理性能を達成した。

スケーラブル蓄積部は、ディスク容量の拡張性と並列書き込み性能を確保するため、汎用のサーバを複数組み合わせてストレージとして構成している。

ストリーム解析部は、パケット解析のような逐次処理を高速化するため、いくつかの段階（ステージ）に分けて順番に処理している。

同技術により、一部のデータを取得するサンプリングや短期の観測では見逃されていたネットワークのボトルネックや通信に紛れた外部からの攻撃なども低コストで確実に捕捉できるようになり、ネットワーク品質の向上・データセンターの運用安定化・セキュリティ強化などに活用することが可能になる。