Loading article…
機械生成データとは、人間の積極的な介入なしに、コンピュータプロセス、アプリケーション、またはその他のメカニズムによって自動的に生成される情報です。この用語は50年以上前に遡りますが、 [1]現在、この用語の範囲については不明確な点があります。モナッシュ研究所のカート・モナッシュは、これを「完全に機械によって生成されたデータ、または選択を記録するよりも人間を観察することに関するデータ」と定義しています。[2]一方、イェール大学 のコンピューターサイエンス教授であるダニエル・アバディは、より狭い定義を提案しています。「機械生成データとは、独立した計算エージェントの決定の結果として生成されるデータ、または人間の行動によって引き起こされないイベントの測定です。」[3]定義の違いにかかわらず、どちらも人が手動で入力したデータを除外します。[4]機械生成データは、すべての産業セクターにまたがっています。多くの場合、そしてますます、人間は自分の行動がデータを生成していることに気づいていません。[5]
関連性
機械生成データには単一の形式はありません。むしろ、タイプ、フォーマット、メタデータ、頻度は特定のビジネス目的に応じて異なります。機械は多くの場合、定義されたスケジュールに従って、または状態の変化、アクション、トランザクション、またはその他のイベントに応じてデータを作成します。イベントは過去のものであるため、データは更新または変更される可能性は低いです。この特性により、米国の 裁判所は機械生成データを非常に信頼できるものと見なしています。[6]
機械生成データはモノのインターネット（IoT）の生命線です。[7]
成長
2009年、ガートナーは、今後5年間でデータが650%増加すると発表しました。[8] データの増加のほとんどは、機械生成データの副産物です。[4] IDCは、2020年には接続されたモノの数が人の26倍になると予測しています。[9] Wikibonは、 2020年にインダストリアルインターネットに5,140億ドルが費やされるとの予測を発表しました。[10]
処理
機械生成データは非常に静的でありながら膨大な量であるため、データ所有者は、結果として得られるデータセットを処理および分析するために、高度にスケーラブルなツールに依存しています。機械生成データのほとんどは非構造化されていますが、共通の構造に派生されます。[4] 通常、これらの派生構造には多くのデータポイント/列が含まれます。これらのデータポイントの場合、課題は主にデータの分析にあります。高いパフォーマンス要件と大きなデータサイズを考えると、従来のデータベースのインデックス作成とパーティション分割では、処理するデータセットのサイズと履歴が制限されます。列指向データベースには、特定の分析中にデータセットの特定の「列」のみにアクセスするという 代替アプローチがあります。
例
- ウェブサーバログ[11]
- 通話詳細記録[11]
- 金融商品取引[11]
- ネットワークイベントログ[11]
- セキュリティ、ネットワーク、OS ソースからセキュリティ情報およびイベント管理(SIEM) システムに送信されるログ
- 政府が収集したテレメトリ[11]
注記
参考文献リスト
- ^制御システム機能とプログラミングアプローチ： アプリケーション、Dimitris N Chorafas著。Academic Press。1966-01-01。ISBN 978-0-08-095534-6。
- ^ モナッシュ、2010年12月30日
- ^ アバディ
- ^ abc Monash、データの3つの大まかなカテゴリー
- ^ デロッチ、機械生成データ
- ^ 連邦証拠審査、機械生成データは陳述ではなく、伝聞証拠も提示されていない
- ^ Seth Grimes [@SethGrimes] (2016 年 3 月 8 日)。「機械生成データはモノのインターネット (#IoT) の生命線です。重要だが欠けている点です」(ツイート) – Twitter経由。
- ^ サイエンスロジック
- ^ [1]、チャックのブログ
- ^ [2]、ウィキボン
- ^ abcde Monash、機械生成データの例
文献
- Abadi, Daniel. 「マシンと人間が生成したデータ」。BlogSpot。
- デロッチ、ドン。「マシン生成データ」。Infobright, Inc.
- 連邦証拠審査。「機械生成データは陳述ではなく、伝聞や対立を生じさせなかった」。
- モナッシュ、カート。「データの 3 つの広範なカテゴリ」。モナッシュ リサーチ。
- モナッシュ、カート。「機械生成データの例」。モナッシュ リサーチ。
- モナッシュ、カート。「機械生成データの例と定義」。モナッシュ リサーチ。
- サイエンス ロジック。「ガートナーが注目する 10 のテクノロジー」。