Skip to main content

Pengertian Dan Fungsi Web Crawler

By

Bismillah...
Pengertian Web Crawler / Web Spider

Web Crawler atau biasa juga disebut web spider memiliki tugas untuk meng-crawl (merayapi) seluruh informasi dari suatu website. Spider akan menggali seluruh data dari suatu website termasuk didalamnya komponen website seperti : meta data, keywords dan lain sebagainya. Kemudian web spider akan mengumpulkan atau mengindeks seluruh website ke dalam data base search engine. Sampai pada akhirnya halaman website akan di tampilkan pada Search Engine Result Page (SERP). Sederhananya seperti ini : Ketika Anda mengetikkan query atau kata kunci pada search engine, mesin akan mencari database index dan memberikan daftar halaman web yang sesuai dengan kriteria yang Anda cari. Proses web crawler dalam mengunjungi setiap dokumen web disebut web crawling atau spidering.
Nah, jadi kalo blog Anda telah dipasang Meta Tag SEO Friendly, judul artikel yang mengandung sebagian dari keywords (kata kunci) dan memiliki konten yang berkualitas, maka tidak tertutup kemungkinan, artikel Anda akan mejeng di halaman pertama Search Engine Result Page (SERP).
Fungsi Web Crawler / Web Spider 
1. Web crawler biasa digunakan untuk membuat salinan sebahagian atau keseluruhan halaman web yang telah dikunjunginya agar dapat diproses lebih lanjut oleh system pengindeksan.
2. Web crawler dapat digunakan untuk proses pemeliharaan sebuah website, seperti memvalidasi kode html sebuah web.
3. Web crawler juga digunakan untuk memperoleh data yang khusus, seperti mengumpulkan alamat email.
Demikian artikel saya kali ini tentang pengertian dan fungsi web crawler / web spider. Semoga bermanfaat buat Anda semua.
Labels:

Comments

Post a Comment

Popular posts from this blog

Penjelasan tentang SPREAD SPECTRUM

By
Pada postingan kali ini saya mencoba membahas sedikit mengenai Spread Spectrum . yang jadi pertanyaan pertama adalah apa sich definisi dari Spread Spectrum ? bagaimana konsep dari sistem Spread Spectum ? dan apa keuntungan dari sistem Spread Spectum ? ok langsung aja jangan kebanyakan ngomong entar malah ngawur kesana kesini :) hehehehe    Definisi Spread Spectrum . Spread Spectrum adalah sebuah metode komunikasi dimana semua sinyal komunikasi disebar di seluruh spektrum frekuensi yang tersedia. Pada awalnya dikembangkan untuk kepentingan militer dan intelejen. Ide dasarnya adalah untuk menyebarkan sinyal informasi melalui bandwidth yang lebih luas untuk mencegah dilakukannya pencegatan informasi dan gangguan-gangguan lainnya. Istilah Spread Spectrum digunakan karena pada sistem ini sinyal yang ditransmisikan memiliki bandwidth yang jauh lebih lebar dari bandwidth sinyal informasi (mencapai ribuan kali). Proses penebaran bandwidth sinyal informasi ini disebut sprea...
2 comments
Read more

7 Perkerjaan Yang Menjanjikan Bagi Lulusan Multimedia

By
7 Perkerjaan Yang Menjanjikan Bagi Lulusan Multimedia  1. Illustrator Illustrator Illustrator adalah salah satu pekerjaan yang bergerak di bidang multimedia dan menyediakan data gambar ilustrasi pada media media contohnya  website, majalah,buku,koran Storyboard pada sebuah film dan lain-lain  para pekerja ilustrator dibagi menjadi beberapa peran ada yang berperan sebagai pembuat atau perancang gambar ada yang berperan di bagian pewarna dan di bagian tingkat berapa kerja di bidang Illustrator ini juga menggunakan teknologi komputer atau pelengkap untuk dapat menyempurnakan karya-karya mereka. 2. Komikus komikus  komikus adalah seorang pembuat komik. komik merupakan sebuah cerita yang digambar sedemikian rupa agar menarik minat para pembaca dan dibukukan, bisa juga Komik digital tanpa dibukukan. sampai saat ini Indonesia sudah semakin maju, hal ini bisa kita lihat dari terbitannya komik yang beredar semakin pesat, terutama di toko buku dan para komikus juga dapat mempr...
Post a Comment
Read more

Penjelasan Topologi Bus

By
 Topologi bus bisa di bilang topologi yang paling banyak digunakan pada masa penggunaan kabel sepaksi. Dengan menggunakan T-Connector (dengan terminator 50ohm pada ujung network), maka PC atau perangkat jaringan lainnya bisa dengan mudah dihubungkan satu sama lain. yang menjadi kesulitan utama dari penggunaan kabel sepaksi yaitu mengukur apakah kabel sepaksi yang digunakan benar-benar cocok atau tidak. Apabila tidak cocok dengan ukurannya maka akan merusak NIC (network interface card) yang digunakan dan kinerja jaringan menjadi terhambat, tidak mencapai kemampuan maksimalnya. Topologi ini juga sering digunakan pada jaringan dengan basis fiber optic (yang kemudian digabungkan dengan topologi star untuk menghubungkan dengan client atau node.). Pada topologi bus dua ujung jaringan harus diakhiri dengan sebuah terminator. Barel connector dapat digunakan untuk memperluasnya. Jaringan hanya terdiri dari satu saluran kabel yang menggunakan kabel BNC. Komputer yang ingin ...
1 comment
Read more