データ処理とは、デジタルデータを収集し、操作して意味のある情報を生成することである。[1]データ処理は情報処理の一種であり、観察者が検出できる方法で情報を変更(処理)することである。[注 1]
機能
データ処理には、次のようなさまざまなプロセスが含まれる場合があります。
- 検証– 提供されたデータが正確かつ関連性があることを確認します。
- ソート– 「アイテムを何らかの順序や異なるセットで並べること」
- 要約(統計的)または(自動) - 詳細なデータを要点に絞ります。
- 集約– 複数のデータを組み合わせる。
- 分析– 「データの収集、整理、分析、解釈、および提示」
- レポート– 詳細データまたは概要データ、あるいは計算された情報を一覧表示します。
- 分類– データをさまざまなカテゴリに分離します。
歴史
米国国勢調査局の歴史は、データ処理が手動から電子化の手順へと進化してきたことを示しています。
手動データ処理
データ処理という用語が広く使われるようになったのは1950 年代になってからですが、[2]データ処理機能は何千年も前から手作業で行われてきました。たとえば、簿記には取引の記録や貸借対照表やキャッシュフロー計算書などのレポートの作成などの機能が含まれます。完全に手作業で行われる方法は、機械式または電子式の計算機の応用によって強化されました。手作業または計算機を使用して計算を行う仕事をする人は「コンピュータ」と呼ばれていました。
1890 年の米国国勢調査スケジュールは、世帯ではなく個人別にデータを収集した最初のものでした。フォームの適切なボックスにチェックを入れることで、いくつかの質問に答えることができました。1850 年から 1880 年にかけて、国勢調査局は「必要な分類の組み合わせの数が増えたため、ますます複雑になる集計システムを採用しました。1 回の集計で記録できる組み合わせの数は限られていたため、独立した集計の数だけスケジュールを 5 回または 6 回処理する必要がありました。」[3] 「1880 年の国勢調査の結果を発表するのに 7 年以上かかりました」[4]手作業による処理方法を使用していました。
自動データ処理
自動データ処理という用語は、ユニット記録装置によって実行される操作に適用されました。たとえば、1890年の米国国勢調査でハーマン・ホレリスがパンチカード装置を適用したような操作です。「ホレリスのパンチカード装置を使用することで、国勢調査局は1890年の国勢調査データのほとんどを2~3年で集計することができました。1880年の国勢調査では7~8年かかりました。ホレリスのシステムを使用することで、質問数が1880年の2倍になったにもかかわらず、1890年のドル換算で 約500万ドルの処理コストが節約されたと推定されています」 [4] 。
コンピュータによるデータ処理
コンピュータ化されたデータ処理、または電子データ処理は、いくつかの独立した機器の代わりにコンピュータが使用される、後の発展を表しています。国勢調査局は、1952年に納品されたUNIVAC Iシステム[3]を使用して、1950年の米国国勢調査で初めて電子コンピュータを限定的に使用しました。
その他の動向
データ処理という用語は、より一般的な用語である情報技術(IT)にほとんど含まれている。 [5]古い用語「データ処理」は、古い技術を連想させる。たとえば、1996 年にデータ処理管理協会(DPMA) は、情報技術専門家協会に名称を変更した。しかし、これらの用語はほぼ同義である。
アプリケーション
商用データ処理
商用データ処理には、大量の入力データ、比較的少ない計算操作、および大量の出力が伴います。たとえば、保険会社は、数万または数十万の保険契約の記録を保持し、請求書を印刷して郵送し、支払いを受け取って投稿する必要があります。
データ分析
科学と工学では、データ処理と情報システムという用語は広すぎると考えられており、データ処理という用語は通常、全体的なデータ処理の第 2 段階のデータ分析に続く初期段階で使用されます。
データ分析では、一般的なビジネス環境ではあまり見られない特殊なアルゴリズムと統計計算が使用されます。データ分析には、 SPSSやSASなどのソフトウェアスイート、またはそれらの無料版であるDAP、gretl、PSPPがよく使用されます。これらのツールは、膨大な量の統計分析を処理できるため、さまざまな巨大なデータセットを処理するのに役立ちます。[6]
システム
データ処理システムは、一連の入力に対して定義された一連の出力を生成するマシン、人、プロセスの組み合わせです。入力と出力は、解釈者とシステムとの関係に応じて、データ、事実、情報などとして解釈されます。
データまたはストレージ(コード)処理システムと同義語として一般的に使用される用語は情報システムです。[7]特に電子データ処理に関しては、対応する概念は電子データ処理システムと呼ばれます。
例
簡単な例
データ処理システムの非常に単純な例として、小切手台帳を管理するプロセスがあります。小切手や預金などの取引は発生すると記録され、その取引がまとめられて現在の残高が算出されます。台帳に記録されたデータは、毎月、銀行が処理した取引のリストと照合されます。このリストは、おそらく同一です。
より洗練された記録管理システムでは、入金元別や小切手(慈善寄付など)など、取引をさらに識別することができます。この情報を使用して、年間の寄付金の合計などの情報を取得できます。
この例で重要なことは、すべての取引が一貫して記録され、毎回同じ銀行照合方法が使用される システムであるということです。
実際の例
これは、売掛金、請求書、総勘定元帳を処理するために手動処理とコンピュータ処理を組み合わせたデータ処理システムのフローチャートです。
com.onedebit.chime
参照
注記
- ^ データ処理は、一般的なデータではなくテキストに特化した操作であるワードプロセッシングとは異なります。 「データ処理」。Webopedia。1996年9月。 2013年6月24日閲覧。
外部リンク
参考文献
- ^ French, Carl (1996). データ処理と情報技術 (第 10 版). Thomson. p. 2. ISBN 1844801004。
- ^ Google Nグラムビューア。2013年6月26日閲覧。
- ^ ab Truesdell, Leon E. (1965). 国勢調査局におけるパンチカード集計の開発、1890年。米国商務省。
- ^ ab ボーム、フレデリック、ワイアット、J. ポール、カリー、ジェームズ P. (1991)。データ処理の 100 年: パンチカードの世紀。米国国勢調査局。
- ^ Google Nグラムビューア. 2018年4月28日閲覧。
- ^ V, Jalajakshi; A n, Myna (2022-06-01). 「データサイエンスにおける統計の重要性」。Global Transitions Proceedings . International Conference on Intelligent Engineering Approach(ICIEA-2022)。3 ( 1 ): 326–331. doi : 10.1016/j.gltp.2022.03.019 . ISSN 2666-285X.
- ^ Anthony Ralston 他編 (2000)。Encyclopedia of Computer Science 第 4 版。Nature Publishing Group。p. 865。
さらに読む
- Bourque, Linda B.; Clark, Virginia A. (1992) 「データ処理:調査例」(社会科学における定量的応用、第07-085号)。SAGE Publications。ISBN 0-8039-4741-0
- Levy, Joseph (1967) 「パンチカードデータ処理」McGraw-Hill Book Company。
