Web Crawling : Sering disebut juga Web Spide atau Web Robot yang merupakan program yang menulusuri WWW ( World Wide Web ) . Program ini dapat digunakan untuk membuat salinan dari semua halaman-halaman yang kita kunjungi . Dan untuk proses selanjutnya akan kita lakukan oleh mesin pencarian.
Program ini juga dapat digunakan untuk memelihara situs web secara otomatis , program ini dapat melakukan pemeriksaan link atau validasi kode HTML. ditambah lagi program inii dapat digunakan untuk mengumpulkan informasi spesifik dari halaman web , contohnya alamat email , seperti spam.
Selanjutnya Proses akan dilanjutkan oleh Mesin Pencarian dengan cara menyimpan banyak informasi halaman web yang diterima oleh WWW .
halaman akan di diterima untuk menentukan cara mengindeks halaman tersebut.
program web crawler ini diterapkan pada Search Engine ( seperti google , yahoo , dll )
Searc Engine akan meyimpan indeks untuk ratusan ribu halaman dan dokumen . maka kita dapat menemukan apa yang kita cari pada search engine sesuai dengan data / indeks yang disimpan oleh search engine tersebut.
0 komentar:
Posting Komentar