WARC (ファイル形式)

ウェブアーカイブ
ファイル名拡張子	.warc
インターネットメディアの種類	アプリケーション/warc
延長	ARC
標準	ISO 28500:2017
オープンフォーマット?	はい
Webサイト	iipc.github.io/warc-仕様/仕様/warc-format/warc-1.1-annotated/

WARC (Web ARChive)アーカイブ形式は、複数のデジタルリソースを関連情報とともに1 つの集約アーカイブファイルにまとめる方法を指定します。これらの結合されたリソースは WARCファイルとして保存され、適切なソフトウェアで再生したり、Wayback Machineなどのアーカイブ Web サイトで利用したりできます。

WARC 形式は、インターネットアーカイブのARC_IA ファイル形式^[4]の改訂版であり、従来はWorld Wide Webから収集したコンテンツブロックのシーケンスとして「ウェブクロール」を保存するために使用されていました。WARC 形式は、アーカイブ組織の収集、アクセス、および交換のニーズをより適切にサポートするために、古い形式を一般化しています。現在記録されている主要なコンテンツに加えて、この改訂版では、割り当てられたメタデータ、短縮された重複検出イベント (§7.6「再訪問」を参照)、および後日の変換などの関連する二次コンテンツも収容しています。 ^[5] WARC 形式は、HTTP/1.0 ストリームにヒントを得たもので、同様のヘッダーと CRLF を区切り文字として使用するため、クローラーの実装に非常に適しています。

2008年に初めて規定されたWARCは、^{[6]現在ではほとんどの}国立図書館システムでウェブアーカイブの標準として認められています。 ^[7]

ソフトウェア

参照

参考文献

^ "application/warc" . 2018年3月17日閲覧。
^ 「はじめに」SourceForge 2015年3月5日閲覧。
^ 「情報とドキュメント - WARC ファイル形式」。2018年3 月 16 日閲覧。
^ 「ARC_IA、インターネットアーカイブARCファイル形式」www.digitalpreservation.gov 2008年2月14日2015年5月9日閲覧。
^ 「WARC、Web ARChive ファイル形式」www.digitalpreservation.gov 2009 年 8 月 31 日。2015年 5 月 9 日閲覧。
^ Arvidson, Allan; Kunze, John; Mohr, Gordon; Stack, Michael (2008 年 7 月 5 日). 「WARC ファイル形式」. IETF . 2021 年 4 月 29 日閲覧。
^ アレグレッツァ、ステファノ (2016 年 4 月 21 日)。「Web アーカイブに関する新たな提案: Gli 標準 ISO 28500 (Formato WARC) e ISO/TR 14873 sulla qualità del Web archive」。デジタリア。2015 : 49–61。
^ Scrivano, Giuseppe (2012 年 8 月 6 日). 「GNU wget 1.14 がリリースされました」. GNU wget 1.14 がリリースされました. Free Software Foundation, Inc. 2016 年2 月 25 日閲覧。
^ 「Coniferの紹介」Rhizome 2020年6月11日2024年10月16日閲覧。

外部リンク

WARC ファイル形式の仕様
WARC ファイル形式 (ISO 28500) - 情報、メンテナンス、ドラフト
WARC、Web ARChive ファイル形式
WARC実装ガイドライン
いらっしゃいませ
13. インターネットアーカイブARCファイル
WARCエコシステム

[IIPC-1] "application/warc" . 2018年3月17日閲覧。

[SourceForge-2] 「はじめに」SourceForge 2015年3月5日閲覧。

[ISO-3] 「情報とドキュメント - WARC ファイル形式」。2018年3 月 16 日閲覧。

[ARC_IA-4] 「ARC_IA、インターネットアーカイブARCファイル形式」www.digitalpreservation.gov 2008年2月14日2015年5月9日閲覧。

[DigitalPreservation-5] 「WARC、Web ARChive ファイル形式」www.digitalpreservation.gov 2009 年 8 月 31 日。2015年 5 月 9 日閲覧。

[Arvidson-6] Arvidson, Allan; Kunze, John; Mohr, Gordon; Stack, Michael (2008 年 7 月 5 日). 「WARC ファイル形式」. IETF . 2021 年 4 月 29 日閲覧。

[Allegrezza-7] アレグレッツァ、ステファノ (2016 年 4 月 21 日)。「Web アーカイブに関する新たな提案: Gli 標準 ISO 28500 (Formato WARC) e ISO/TR 14873 sulla qualità del Web archive」。デジタリア。2015 : 49–61。

[FSF2012-8] Scrivano, Giuseppe (2012 年 8 月 6 日). 「GNU wget 1.14 がリリースされました」. GNU wget 1.14 がリリースされました. Free Software Foundation, Inc. 2016 年2 月 25 日閲覧。

[9] 「Coniferの紹介」Rhizome 2020年6月11日2024年10月16日閲覧。