Heritrix - Internet Archiveのクローラ。

リンク切れ（デッドリンク、死にリンク）

クローラ（ロボット）

デジタルアーカイブ - 実際のものを電子的に保存すること。