ストレージ論争:ヘイゼルキャスト、グリッドゲインがベンチマーク結果を偽造したと主張

Table of Contents

ストレージ論争:ヘイゼルキャスト、グリッドゲインがベンチマーク結果を偽造したと主張

インメモリソフトウェアの新興企業GridGainは、ベンチマーク詐欺を犯したというHazelcastの申し立てを否定した。

これは、GridGain が競合他社の 1 つである Hazelcast よりも高速であることを示すベンチマーク データを公開した後のことである。

ヘイゼルキャストのCEO、グレッグ・ラック氏は、グリッドゲインの「テストは偽造され、違法で、意図的に虚偽の表現がされていた」と考えており、自身のブログでその詳細を述べている。

GridGain/Apache Igniteは、Hazelcastよりも高速であることを示すベンチマークを公開しました。これは、GridGain/Apache Ignite独自のベンチマークであるYardstickを使用したHazelcast/Igniteベンチマークに続くもので、Hazelcast 3.6-EAはIgnite 1.4.1よりもはるかに高速であることが示されています。

調べてみると、彼らはテストを偽造していたことが判明しました。

グレッグ・ラック、ヘイゼルキャストCTO

ヘイゼルキャスト CEO グレッグ・ラック

彼は次のように書いています。「テストを同じ構成にする代わりに、彼らはHazelcastでmap.set()の代わりにmap.put()を使用していました。しかし、彼らのput()には戻り値がないため、put()の使用は私たちのset()操作と同等です。」さらに、ラック氏はGridGainが「レプリカのバックアップをHazelcastで同期しながら、独自のバックアップを非同期に設定していた」と主張しました。

「これらの問題を修正した独自のベンチマークツールを使って比較してみました」とラック氏は記している。「そして、Apache Ignite 1.4.1と比較した場合と同様に、はるかに高速化しました。」

そして彼ははっきりとこう言います。

彼らのベンチマークは意図的な虚偽表示であると考えます。

ブログではテスト結果の詳細と、テストを再現したい人への指示が書かれています。

GridGain応答

GridGainの共同創業者兼エンジニアリング担当EVPのドミトリー・セトラキアン氏は次のように述べています。「Hazelcastのブログを見て、非常に驚​​きました。特に、彼らが行っている非難の内容には驚きました。少なくとも、IgniteコミュニティやGridGainチームに働きかける努力はするだろうと誰もが思っていました。」

過去にもHazelcastのユーザーグループに連絡を取り、ベンチマーク結果を公開してレビューを依頼したことを付け加えておきます。しかし、Greg Luck氏は私たちの投稿を削除し、それ以上のコメントはしていません。これは、営利企業とApacheプロジェクトの違いを示していると言えるでしょう。

GridGainは当初のベンチマーク結果を再実行しました。Setrakyan氏は次のように述べています。「すべてのベンチマークを再実行し、Amazon AWSですべての結果を再確認しました。多くのテストでIgniteが50%から100%以上高速化しました。結果はIgniteのウェブサイトで公開されています。」

彼は、Hazelcast CEOのMap呼び出しに関する指摘に特に言及しました。Map.put() > Map.set()については、「ベンチマークを更新しましたが、この変更による目立った違いはなく、以前の結果にも影響はありませんでした」と述べています。

また、同期バックアップと非同期バックアップについて:「ベンチマークを実行した構成はApache IgniteとHazelcastで100%同一であるため、Hazelcastに関する記述は完全に誤りです。さらに、Hazelcastのブログによると、彼らはベンチマークを自社のハードウェアで実行し、何らかの理由でテストシナリオも変更したようです。私たちのベンチマークはAmazon AWSで実行され、コードは公開されているため、誰でも再試行できます。」

セトラキアン氏は、GridGainがベンチマークに注力していることを強調しました。「当社はベンチマークを非常に重視しており、定期的にベンチマークを実施してIgniteとGridGainのパフォーマンスを他社製品と比較しています。テストでは、20種類以上の異なる構成シナリオとユースケースをテストしています。本日、すべてのベンチマークを再実行したところ、すべてで優れた結果が出ました。」

資金調達ラウンド

GridGainはまた、ロシアのSberbankとMoneyTime Venturesが主導し、Almaz CapitalとRTP Venturesが参加したBラウンドの資金調達で1,500万ドルを獲得した。

MoneyTime VenturesのゼネラルパートナーであるVictor Orlovski氏がGridGainの取締役に就任します。調達した資金は、営業、マーケティング、研究開発の拡大に充てられ、GridGainの国際的な成長を加速させるでしょう。

資金調達総額は現在 2,720 万ドルで、昨年の成層圏ストレージ資金調達ラウンドと比較するとかなり控えめです。®

Discover More