HTコンドル

HTCondorは、計算集約型タスクの粗粒度分散並列化のためのオープンソースの 高スループットコンピューティングソフトウェアフレームワークです。 ^[1]専用のコンピュータークラスター でワークロードを管理したり、アイドル状態のデスクトップコンピューターに作業を外注したりするために使用できます（いわゆるサイクルスカベンジング） 。HTCondorは、Linux、Unix、Mac OS X、FreeBSD、およびMicrosoft Windows オペレーティングシステムで動作します。HTCondorは、専用リソース（ラックマウントクラスター）と非専用デスクトップマシン（サイクルスカベンジング）の両方を1つのコンピューティング環境に統合できます。

HTCondorはウィスコンシン大学マディソン校のHTCondorチームによって開発され、無料で使用できます。HTCondorはオープンソースの哲学に従っており、Apache License 2.0に基づいてライセンスされています。^[2]

HTCondor は未使用のコンピューティング時間を活用しますが、HTCondor で使用するためにコンピューターをオンのままにしておくと、エネルギー消費量と関連コストが増加します。バージョン 7.1.1 以降、HTCondor はユーザー指定のポリシーに基づいてマシンを休止状態にしたり起動したりできるようになりました。この機能は、以前はサードパーティ ソフトウェアでのみ利用可能でした。

HTCondorの開発は1988年に始まりました。

HTCondorは以前はCondorとして知られていましたが、商標訴訟を解決するために2012年10月に名前が変更されました。^[3]

HTCondor は、ヒトゲノムの最初のドラフトアセンブリのジョブを分散するために使用されたスケジューラ ソフトウェアでした。

NASAの高度スーパーコンピューティング施設(NAS) HTCondor プールは、ソフトウェア開発、視覚化、電子メール、ドキュメント準備、およびその他のタスク用に購入され、使用されている約 350 台のSGIおよびSunワークステーションで構成されています。各ワークステーションは、ユーザーI/Oと CPU 負荷を監視するデーモンを実行します。ワークステーションが 2 時間アイドル状態になると、バッチ キューのジョブがワークステーションに割り当てられ、デーモンがキー入力、マウスの動き、または HTCondor 以外の CPU 使用率が高いことを検出するまで実行されます。その時点で、ジョブはワークステーションから削除され、バッチ キューに戻されます。

HTCondor は、シーケンシャル ジョブとパラレル ジョブの両方を実行できます。シーケンシャル ジョブは、ほとんどの「バッチ対応」プログラムを実行できる「バニラ」や、ターゲット アプリケーションがリモート ジョブ I/O とジョブ チェックポイントを提供する HTCondor I/O ライブラリに再リンクされる「標準ユニバース」など、いくつかの異なる「ユニバース」で実行できます。HTCondor は、「サブミット ホスト」でジョブを実行できる「ローカル ユニバース」も提供します。

並列ジョブの世界では、HTCondor は、高度な並列タスク用の独自のマスター ワーカー「MW」ライブラリに加えて、標準のメッセージ パッシング インターフェイスと並列仮想マシン(Goux 他、2000 年) をサポートしています。

HTCondor-G を使用すると、HTCondor ジョブは直接制御されていないリソースを使用できます。これは主に、pre-WS および WS Globus、Nordugrid ARC、UNICORE、Amazon Elastic Compute Cloudなどのグリッドおよびクラウドリソースとの通信に使用されます。ただし、 Torque/PBSやLSFなどの他のバッチ システムとの通信にも使用できます。Sun Grid Engineのサポートは、現在EGEEプロジェクトの一環として開発中です。^{[引用が必要]}

HTCondor はDRMAAジョブ API をサポートしています。これにより、DRMAA 準拠のクライアントは HTCondor ジョブを送信および監視できます。SAGA C++ リファレンス実装はHTCondor プラグイン (アダプタ) を提供し、これにより SAGA の Python および C++ API を介して HTCondor ジョブの送信と監視が可能になります。

HTCondor の他の機能には、ジョブの依存関係を記述するメカニズムを提供する「DAGMan」が含まれます。

• ボランティアコンピューティングプロジェクトのリスト
• サングリッドエンジン
• IBM スペクトラム LSF
• 高スループットコンピューティング

• 公式サイト