コメントスーパーコンピューティング サミットの 3 日目です。1990 年代にカンファレンスに参加した時と非常によく似たこのような体験を再び味わえるのを 15 年以上、いや 20 年以上待ち望んでいたと思います。
いくつかのセッションは桁外れで、エキスポエリアはここ数年で見た中で最もオタク的でギークな雰囲気でした。ブースの女性陣は皆無で、皆エンジニアで、本当に自分の仕事に精通しています。
あらゆる技術が公開され、ラックには（稼働中の）機器、CPU、GPU が満載で、あちこちで実際のライブ デモが行われていますが、おそらく最も重要なのは、大学のブースと研究センターが HPC プロジェクト、成果、サービスを展示していることです。
展示フロアには多数の非常に小規模なスタートアップ企業が出展しており、その中には HPC だけでなくエンタープライズ IT にとっても非常に興味深い素晴らしいテクノロジーを持つ企業もあります。
商用HPC
超メガ クラスター、数百 PB のストレージ、信じられないほどのネットワークを備えた HPC 自体の他に、私が本当に興味深いと思うのは、HPC とエンタープライズ IT の交わりです。
石油・ガスやゲノミクスといった従来の分野を超越するユースケースを数多く見てきました。金融リスク分析やビッグデータ分析といった垂直的なハイエンドアプリケーション（これらは最も一般的なユースケースのほんの一例です）は、HPC分野で一般的に見られるテクノロジー、アーキテクチャ、そして製品を継承しています。
もう一つ興味深いのは、HPCインフラを運用している人たちの中には、（クラウドという言葉を一切口にせずに）まるで巨大なクラウドのように管理している人がいることです。実際、彼らは多くの異なるプロジェクトを同時に実行しており、複数のチーム間でリソースを共有しています。セルフサービスプロビジョニング、PaaSのようなHPC特有のライブラリやツール、セキュリティ、何らかのSLAなど、すべてがクラウドに似ています。
結局のところ、これは数千人のユーザーに同時にサービスを提供する大規模なプライベートクラウドを管理するようなものです。しかし、OpenStackはあまり話題になりませんでした。ベンダーが話題に出すことはあっても、エンドユーザーからはほとんど取り上げられることはありませんでした。おそらくOpenStackは当たり前のものと見なされているのでしょう。いずれにせよ、この2つの世界の間には多くの類似点があることは非常に興味深いことです。
HPCはオブジェクトストレージを好む
ほぼすべてのオブジェクトストレージベンダーがブースを出展しています。それには2つの理由があります。
まず、プライマリHPCストレージは非常に高速です（並列ファイルシステム、あらゆる場所にInfiniband、ディスク、そして少数のSSD）。また、維持できるスループットを考えると比較的安価ですが、生成されるデータの量は膨大で、一度データが生成され分析されると、どこからでもアクセスでき、アーカイブする必要があります（場合によっては長期間）。
オブジェクトストレージは、他のテクノロジーと比較して、コスト面でも使い勝手の面でもますます便利になっています。DDNが示しているような統合により、プロセスは極めてシームレスになります。
第二に、一部のベンダーはオブジェクトストレージとコンピューティングクラスタの興味深い統合に取り組んでいます。このシナリオについては以前お話ししましたが、当時は主にエンタープライズにおけるビッグデータ分析についてでした。しかし、当時も述べたように、HPCとハイエンドエンタープライズIT（あるいは商用HPC？）の境界は曖昧になりつつあります。これらの分析/HPCクラスタの将来的な設計では、ノード上のフラッシュベースのキャッシュと、バックエンドの巨大なオブジェクトストレージリポジトリを活用することが考えられます。
これらのファイルシステム（GPFSとLustreが最も一般的）は膨大な量のファイルと非常に大きな容量を管理できますが、複雑であり、アーカイブする際にはデータを別の場所に移動する必要があります。そして、クラスタがエクサバイト規模へと向かうにつれて、状況はますます複雑化していくでしょう…
円を閉じる
私にとって、このスーパーコンピューティング会議は子供にとってのお菓子屋さんのようなものです。見てきたものすべてを持ち帰ったら、きっとワクワクするでしょうし、そこから発展させるアイデアもたくさんあるでしょう。
HPC とエンタープライズ IT のような、2 つの異なるがやや平行した世界を見て、類似点を見つけ、このテクノロジーとノウハウの一部を 1 つの世界から別の世界にどのように転送できるかを考えるのは非常に興味深いことです。®
免責事項：私はDDNからこの会議に招待され、旅費と宿泊費を負担していただきました。時間に対する報酬は支払われておらず、この会議について執筆する義務もありません。また、この会議の内容は、Jukuチーム、そしてもちろんEl Regの編集補佐員以外のいかなる者によっても確認、承認、編集されていません。
