Pengantar Web Science
Web Crawler dan Routing Protocols Kelompok 4 1. Crislie Santoso / 51418581 2. Dewi Irwan / 51418817 3. Lisa Angeline / 53418803 4. Nabila Suraya / 55418085 5. Ronald Leonardo P. / 56418357 6. Windy Aulia / 57418364 Pengertian Web Crawler Web Crawler adalah sebuah perangkat lunak yang digunakan untuk menjelajah serta mengumpulkan halaman-halaman web yang selanjutnya diindeks oleh mesin pencari(Gatial E, 2005). Web Crawler dapat memperoleh informasi sesuai dengan kata kunci yang diberikan, sama halnya dengan mesin pencari/search engine. Web Crawler dirancang untuk menelusuri halaman web dan memasukkannya ke dalam database lokal. Cara Web Crawler Bekerja Secara umum crawler memulai prosesnya dengan memberikan daftar sejumlah alamat website untuk dikunjungi, disebut sebagai seeds. Kemudian web crawler akan mengunjungi URL tersebut satu per satu. Setiap page URL yang dikunjungi akan diidengtifikasi apakah ada hyperlink di dalamnya, dan jika ada maka akan ditambahka...