Pengantar Web Science

Kelompok 4
1. Crislie Santoso / 51418581
2. Dewi Irwan / 51418817
3. Lisa Angeline / 53418803
4. Nabila Suraya / 55418085
5. Ronald Leonardo P. / 56418357
6. Windy Aulia / 57418364

Pengertian Web Crawler
Web Crawler adalah sebuah perangkat lunak yang digunakan untuk menjelajah serta mengumpulkan halaman-halaman web yang selanjutnya diindeks oleh mesin pencari(Gatial E, 2005). Web Crawler dapat memperoleh informasi sesuai dengan kata kunci yang diberikan, sama halnya dengan mesin pencari/search engine. Web Crawler dirancang untuk menelusuri halaman web dan memasukkannya ke dalam database lokal.

Cara Web Crawler Bekerja
Secara umum crawler memulai prosesnya dengan memberikan daftar sejumlah alamat website untuk dikunjungi, disebut sebagai seeds. Kemudian web crawler akan mengunjungi URL tersebut satu per satu. Setiap page URL yang dikunjungi akan diidengtifikasi apakah ada hyperlink di dalamnya, dan jika ada maka akan ditambahkan ke list URL yang akan dikunjungi (disebut dengan crawl frontier).

Fungsi Web Crawler / Web Spider
  • Mengumpulkan data atau informasi dari internet dapat mendukung pertumbuhan ekonomi bisnis sebuah kota yang menjadikan “Smart Cities” sebagai tujuannya.
  • Memudahkan untuk pengambilan informasi yang tersebar dan selalu berubah-ubah di internet.
  • Melakukan penjelajahan dan pengambilan halaman-halaman web yang ada di internet. Hasil dari pengumpulan situs web akan di indeks oleh mensin pencari sehingga memudahkan untuk pencarian informasi di internet.

 Contoh Web Crawler 
Setiap mesin pencari yang ada di Internet memiliki web crawler-nya sendiri. Oleh karena itu, jika Anda melakukan pencarian dengan keyword yang sama di mesin pencari lain akan menghasilkan hasil yang berbeda pula.
Beberapa web crawler lain selain Googlebot adalah Bingbot dari Bing, Slurp Bot dari Yahoo, DuckDuckBot dari DuckDuckGO, Alexa Crawler dari Amazon.

Crawling Policies (Kebijakan Perayapan)
1. Kebijakan Pemilihan : Yang menyatakan halaman untuk diunduh.
2. Kebijakan Kunjungan Ulang : Yang menyatakan kapan memeriksa perubahan pada halaman.
3. Kebijakan Kesopanan : Yang menyatakan bagaimana menghindari kelebihan situs web.
4. Kebijakan Paralelisasi : Yang menyatakan cara mengoordinasikan perayap web terdistribusi.

Routing Protocols
1. Routing Information Protocol (RIP)
  • Menggunakan algoritma “distance vector”. 
  • Metric yang dilakukan pada protokol ini berdasarkan hop count untuk pemilihan jalur terbaik.
  • Jika hop count lebih dari 15, maka paket datagram akan dibuang dan tidak diteruskan.
  • Update routing table pada protokol ini akan dilakukan secara broadcast setiap 30 detik.
2. Interior Gateway Routing Protocol (IGRP)
  • Menggunakan algoritma “distance vector”.
  • Memiliki hop maksimum 255, tetapi default dari protokolnya sendiri adalah 100.
  • Menggunakan bandwidth dan garis menunda secara default untuk menentukan rute terbaik dalam sebuah interkoneksi.
  • Update routing pada protokol ini dilakukan secara broadcast setiap 90 detik.
3. Open Short Path First (OSPF)
  • Cocok diterapkan pada jaringan yang memiliki router yang berbeda-beda.
  • Jika jaringan yang dikelola adalah jaringan besar, maka OSPF adalah pilihan protokol satu-satunya agar semua router tersebut bisa melakukan routing.
  • Update routing table pada protokol ini dilakukan secara floaded saat terjadi perubahan topologi jaringan
4. Enhanced Interior Gateway Routing Protocol (EIGRP)
  • Menggunakan algoritma “advanced distance vector” dan menggunakan “cost load balancing” yang tidak sama. Algoritma yang dipakai adalah kombinasi antara “distance vector” dan “link-state”.
  • Menggunakan Diffusing Update Algorithm (DUAL) untuk menghitung jalur terpendek.
  • Broadcast-broadcast EIGRP di-update setiap 90 detik ke semua router EIGRP yang berdekatan.
5. Border Gateway Protocol (BGP)
  • Memiliki kemampuan untuk melakukan pengumpulan rute, pertukaran rute dan menentukan rute terbaik menuju ke sebuah lokasi dalam sebuah jaringan.
  • Termasuk ke dalam kategori routing protocol jenis Exterior Gateway Protocol (EGP).
  • Update informasi pada protokol ini akan dikirim melalui koneksi TCP.
  • Kelebihan dari protokol ini adalah instalasi yang sangat sederhana.
6. Intermediate System-to-Intermediate System (IS-IS)
  • Digunakan pada perangkat jaringan komputer yang berguna untuk menentukan jalur terbaik bagi datagram ketika diarahkan ke tujuan,

Sumber :
  • http://jurnal.atmaluhur.ac.id/index.php/knsi2018/article/download/413/338
  • http://jurnal.untan.ac.id/index.php/justin/article/download/18687/15772 
  • http://lib.itenas.ac.id/kti/wp-content/uploads/2013/10/No.-2-Vol.-2-Mei-Agustus-2011-5.pdf

Komentar

Posting Komentar

Postingan populer dari blog ini

KONSEP DASAR KOMPUTASI SERTA IMPLEMENTASINYA

KONSEP DASAR KOMPUTASI A. Definisi Komputasi merupakan bidang ilmu yang memiliki perhatian apda penyusunan model matematika dan teknis penyeleaian numerik serta penggunaan komputer untuk menganalisis dan memecahkan masalah ilmiah. Dalam prakteknya adalah penggunaan model matematik dan simulasi komputer serta berbagai bentuk komputasi numerik untuk menyelesaikan masalah ilmu pengetahuan dan teknologi, akan tetapi dalam perkembangannya digunakan juga untuk menemukan prinsip-prinsip baru ilmu pengetahuan yang mendasar. Peran pentingnya adalah ilmu Komputasi telah menjembatani tiga disiplin lain yaitu matematika terapan, ilmu komputer dan berbagai bidang ilmu pengetahuan alam, rekayasa, teknologi, ekonomi, keuangan, kedokteran, dan sebagainya. B. Sejarah Ilmuwan besar abad 21, John Von Neumann yang meletakkan dasar–dasar ilmu komputasi melalui karya–karyanya tidak hanya dalam bidang matematika, teori kuantum dan teori permainan, namun juga dalam fi...
Read more »

BISNIS INFORMATIKA : PT. XL AXIATA

Gambar
Memulai usaha sebagai perusahaan dagang dan jasa umum pada tanggal 6 Oktober 1989 dengan nama PT Grahametropolitan Lestari. Pada tahun 1996, perseroan memasuki sektor telekomunikasi setelah mendapatkan izin operasi GSM 900 dan secara resmi meluncurkan layanan GSM yang membuat XL Axiata menjadi perusahaan swasta pertama di Indonesia yang menyediakan layanan telepon seluler. Melalui perjanjian kerjasama dengan grup Rajawali dan tiga investor asing (NYNEX, AIF dan Mitsui), nama Perusahaan diubah menjadi PT Excelcomindo Pratama. Pada September 2005, Perusahaan melakukan penawaran Saham Perdana (IPO) dan mendaftarkan sahamnya di Bursa Efek Jakarta (BEJ) yang sekarang dikenal sebagai Bursa efek Indonesia (BEI). Pada saat itu, Perusahaan merupakan anak perusahaan Indocel Holding Sdn. Bhd., yang sekarang dikenal sebagai Axiata Investments (Indonesia) Sdn. Bhd., yang seluruh sahamnya dimiliki oleh TM International Sdn. Bhd. (“TMI”) melalui TM International (L) Limited. Pada tahun 2009, T...
Read more »

Pembuatan Pitch Deck

Gambar
APA ITU PITCH DECK? Pitch deck adalah sebuah presentasi singkat yang menjelaskan gambaran umum mengenai rencana bisnismu. Dengan Pitch Deck, kamu bisa menjelaskan seperti apa produkmu kepada calon investor dan membuat mereka tertarik memberikan pendanaan untuk bisnismu. TUJUAN PITCH DECK Tujuan pembuatan pitch deck yaitu untuk menjelaskan rencana bisnismu. Selain itu, bisa digunakan untuk menarik investor agar mau membiayai atau mendanai startup yang dibuat dan saat bertemu dengan perusahaan lain untuk bekerja sama atau orang yang akan menjadi calon Co-Founder. Pitch Deck juga memudahkan kita dalam memberikan penjelasan terhadap calon investor maupun konsumen. TOOLS YANG DIGUNAKAN UNTUK MEMBUAT PITCH DECK Pitch Deck biasanya dibuat dengan berbagai macam tools seperti: 1. Powerpoint 2. KeyNote 3. Prezi ELEMEN YANG DIPERLUKAN DALAM PITCH DECK Bersumber dari Forbes , terdapat tiga hal yang dapat menjadikannya potensial unt...
Read more »