パイプラインパイロット

Pipeline Pilot は、Dassault Systèmesが開発したデスクトップ ソフトウェア アプリケーションです。当初は抽出、変換、ロード (ETL) プロセスとデータ分析に重点を置いていましたが、さまざまな科学および産業アプリケーションでより幅広い機能を提供できるように進化しました。

Pipeline Pilotはビジュアルおよびデータフロープログラミングインターフェースを使用しており、ユーザーはデータ処理のワークフローを設計できます。このソフトウェアの機能は、ケモインフォマティクス、QSAR、^{[1] [2]} 次世代シーケンシング、^[3] 画像解析、^[4]テキスト解析など、複数の領域にわたります。^[5]

Pipeline Pilot は主に、ライフサイエンス、材料科学、エンジニアリングなど、広範なデータ処理と分析を必要とする業界で使用されています。このソフトウェアを使用すると、ユーザーは機能コンポーネントをドラッグ アンド ドロップしてワークフローを作成し、データ分析タスクを自動化し、データベースと統合し、さまざまな科学計算を実行できます。これらのワークフローは「プロトコル」と呼ばれ、チームや組織内で共有および再利用できます。

この製品は、Python、.NET、Matlab、Perl、SQL、Java、VBScript、R などの複数のプログラミング言語をサポートしており、ユーザーはカスタム コードをワークフローに柔軟に統合できます。さらに、Pipeline Pilot は、PLSQL に基づく独自のスクリプト言語である PilotScript をサポートしており、ユーザーはワークフロー内でカスタム データ操作を実行できます。

Pipeline Pilot は、次世代シーケンス解析、ケモインフォマティクス、ポリマー特性予測などの特定の科学的タスク向けの追加モジュールとツールセットによって機能を拡張し続けています。

Pipeline Pilot は当初、 2004 年にBIOVIAに買収されたSciTegic社によって開発されました。2014年に、BIOVIA はDassault Systèmesの傘下になりました。

Pipeline Pilot はもともと化学のアプリケーション向けに設計されましたが、その後機能が拡張され、抽出、変換、ロード (ETL) プロセスや、さまざまな分野にわたる一般的な分析およびデータ処理タスクなど、より広範なデータ処理タスクをサポートするようになりました。このソフトウェアは、ライフサイエンス、材料科学、エンジニアリングなどの分野で使用されており、データ分析や科学計算のための自動化されたワークフローを作成するためのツールをユーザーに提供しています。

Pipeline Pilot は、データの操作と分析用に設計されたソフトウェア ツールです。CSV ファイル、テキスト ファイル、データベースなど、複数のソースからのデータを統合して処理するワークフローをユーザーが構築するためのグラフィカル ユーザー インターフェイスを提供します。このソフトウェアは、抽出、変換、ロード (ETL) タスクでよく使用されます。

Pipeline Pilot Professional Client と呼ばれるこのインターフェイスを使用すると、ユーザーは「コンポーネント」と呼ばれる個々のデータ処理ユニットを選択して配置することでワークフローを作成できます。これらのコンポーネントは、データの読み込み、フィルタリング、結合、変更など、さまざまな機能を実行します。追加のコンポーネントは、回帰モデルの構築、ニューラル ネットワークのトレーニング、PDF などの形式でのレポートの生成など、より複雑なタスクを実行できます。

Pipeline Pilot は、コンポーネントベースのアーキテクチャを採用しており、コンポーネントはワークフロー内のノードとして機能し、有向グラフでデータ フローを表す「パイプ」によって接続されます。このフレームワークにより、コンポーネント間を移動するデータの処理が可能になります。

ユーザーは、事前にインストールされたコンポーネントを使用したり、ワークフロー内で「プロトコル」と呼ばれるカスタム コンポーネントを開発したりすることができます。リンクされたコンポーネントで構成されるプロトコルは、保存、再利用、共有することができ、データ処理を効率化できます。インターフェイスは、コンポーネント間の接続を視覚化し、それらを操作のシーケンスとして提示することで、複雑なデータ ワークフローを簡素化します。

Pipeline Pilot は、遺伝子情報処理やポリマー分析などの特定の領域を対象とした専門機能のグループである「コレクション」と呼ばれるいくつかのアドオンを提供しています。これらのコレクションは、追加のライセンス料金を支払うことでユーザーが利用できます。

コレクションは、科学特化型と一般型の2つの主なグループに分かれています。科学特化型コレクションは化学、生物学、材料モデリングなどの分野に焦点を当てており、一般型コレクションはレポート作成、データ分析、文書検索のためのツールを提供しています。以下は利用可能なコレクションの概要です。^[6]

Pipeline Pilot は、1TB を超えることもよくある大規模で複雑なデータセットの処理によく使用されます。開発初期に Pipeline Pilot は「PilotScript」と呼ばれるスクリプト言語を導入しました。これにより、ユーザーはプロトコルに統合できる基本的なスクリプトを作成できます。時間の経過とともに、Python、.NET、Matlab、Perl、SQL、Java、VBScript、R などの追加のプログラミング言語のサポートが追加されました。これらの言語は、グラフィカル ユーザー インターフェイスを必要とせずにコマンドを実行する API を通じて使用できます。^[7]

PLSQL をモデルにした言語である PilotScript は、「カスタム マニピュレータ (PilotScript)」や「カスタム フィルタ (PilotScript)」などの特定のコンポーネント内で使用されます。以下に、単純な PilotScript コマンドの例を示します。ここでは、コンポーネントを通過する各レコードに「Hello」という名前のプロパティが値「Hello World!」とともに追加されます。

 Hello := "Hello World!" ;