essentia

エッセンティア

essentiaは基本的にクラウド上で稼働する、ビッグデータを簡単に処理できるソフトウェアエンジンです。仮想環境にも対応しており、柔軟な構成や拡張ができます。また、一般的なデータベースシステムとは異なり、gzipやzip形式の圧縮ファイルをそのままに高速ストリーミングして、フィルタリングしながらロードできる無駄のない事前処理が可能となっているため、そのまま取り込むことができます。

essentiaを提供しているAntuitが独自に開発したビッグデータ処理プロセッサは、SQLライクなスクリプトでデータの加工や集計が可能です。さらに、テラバイトや数十億件規模のビッグデータから、クロス集計や期間データ作成、マッチング、データ加工などをインメモリで高速に処理することが可能です。

一般的なシステムのストレージ管理では、既存DBシステムのファイル圧縮効率はおよそ2分の1となっています。たとえば18TBのデータをDBにロードする場合、圧縮後は9TBになり、予備の1TBとバックアップの10TBを合わせて20TBのストレージを管理することになります。一方、essentiaは圧縮ファイルの直接処理が可能なため、ファイル圧縮率は8分の1となっており、必要なストレージはバックアップを含めて6TBのストレージを管理することになるため、DBの4分の1程度で運用可能です。

さらにファイル単位で管理するため、世代管理不要や分散・部分バックアップも容易なので、低コストで長期的にデータを保存することができます。また、提供もパブリッククラウド、ハイブリッドクラウド、オンプレミスでの提供が可能です。

essentiaは、文字列整形、URL日本語デコード、カラム削除・追加などのデータ加工や、複数データ間の相互検索によるデータマッチングなどの機能を備えています。また、アクセス解析ツールRTmetricsのデータ技術を応用したエンジンで、各種のログやセンサーデータなどの非構造化データ、可変長データも高いコストパフォーマンスで高速に処理できるため、幅広い情報を必要とするPOSや顧客、店舗データなどの自社内のマーケティングや、市場調査データやソーシャルメディア、広告配信データ、プロモーションデータなどのデジタルマーケティングに活用することが可能になります。さらに複数システムのデータ突合や非定型データのクレンジング、フラグ化など、圧縮ファイルのままで加工ができるので、従来のDBシステムと比較して事前処理が格段に削減されます。