프로그램별 crawler.archive.org

아카이브 크롤러 프로젝트는 Heritrix를 구축하고 있습니다: 인터넷 에세일 블랙셜 콘텐츠의 다양성과 폭을 가져오고 보관하고 분석할 수 있는 유연하고 확장가능하며 확장 가능한 웹 크롤러입니다.