Cara Kerja Web Crawler:
1. Mesin pencari web bekerja dengan
cara menyimpan informasi tentang banyak halaman web, yang diambil langsung
dari WWW. Halaman-halaman ini diambil dengan web
crawler — browser web otomatis yang mengikuti setiap pranala yang
dilihatnya. Isi setiap halaman lalu dianalisis untuk menentukan cara
mengindeksnya (misalnya, kata-kata diambil dari judul, subjudul,
atau field khusus yang disebut meta tag). Data tentang halaman
web disimpan dalam sebuah database indeks untuk digunakan dalam pencarian
selanjutnya.
2. Mesin pencari juga menyimpan dan
memberikan informasi hasil pencarian berupa pranala yang merujuk
pada file, seperti file audio, file video,
gambar, foto dan sebagainya.
3. Ketika seorang pengguna mengunjungi mesin
pencari dan memasukkan query, biasanya dengan memasukkan kata kunci,
mesin mencari indeks dan memberikan daftar halaman web yang paling sesuai
dengan kriterianya.
Sumber : http://muhammadyusuf-gunadarma.blogspot.co.id/2013/04/apa-itu-web-crawler.html
Tidak ada komentar:
Posting Komentar