Lưu trữ

Posts Tagged ‘Baidu’

Định nghĩa Web crawler – web spider – web robot – googlebot

googlebot1Web crawler, web spider hay web robot là một chương trình tự động tìm kiếm trên Internet. Nó được thiết kết để thu thập tài nguyên Internet (trang Web, hình ảnh, video, tài liệu Word, PDF hay PostScrips) , cho phép máy tìm kiếm đánh chỉ số sau đó. Xem chi tiết…