Diligenti, M., Coetzee, F., Lawrence, S., Giles, C. L., and Gori, M (2000). «Focused crawling using context graphs». In Proceedings of 26th International Conference on Very Large Databases (VLDB), pages 527-534, Cairo, Egypt.
Pant, Gautam; Srinivasan, Padmini; Menczer, Filippo (2004). «Crawling the Web». In Levene, Mark; Poulovassilis, Alexandra (eds.). Web Dynamics: Adapting to Change in Content, Size, Topology and Use. Springer. pp. 153–178.
Koster, M (1996). «A standard for robot exclusion». 7 November 2007 at the Wayback Machine. Archivado desde el original el 7 de noviembre de 2007. Consultado el 11 de diciembre de 2021.
Junghoo Cho; Hector Garcia-Molina (2000). «Synchronizing a database to improve freshness». Proceedings of the 2000 ACM SIGMOD international conference on Management of data. Dallas, Texas, United States: ACM. pp. 117–128. doi:10.1145/342009.335391. ISBN 1-58113-217-4.
Marc Najork and Janet L. Wiener (Mayo 2001). «Breadth-first crawling yields high-quality pages». In Proceedings of the Tenth Conference on World Wide Web, pages 114–118, Hong Kong. Elsevier Science. Archivado desde el original el 24 de diciembre de 2017. Consultado el 11 de diciembre de 2021.
Koster, M (1996). «A standard for robot exclusion». 7 November 2007 at the Wayback Machine. Archivado desde el original el 7 de noviembre de 2007. Consultado el 11 de diciembre de 2021.
Marc Najork and Janet L. Wiener (Mayo 2001). «Breadth-first crawling yields high-quality pages». In Proceedings of the Tenth Conference on World Wide Web, pages 114–118, Hong Kong. Elsevier Science. Archivado desde el original el 24 de diciembre de 2017. Consultado el 11 de diciembre de 2021.