Apa itu Webcrawler? yang pasti bukan web crawler karena webcrawler adalah salah satu jenis search engine, aplikasi software yang berguna mengindex informasi World Wide Web (WWW).

Awalnya, Webcrawler dikembangkan mahasiswa universitas Washington, Brian Pinkerton, pada tahun 1994. Namun sekarang dimaintain America Online, inc, internet service provider (ISP) komersial.

Webcrawler menggunakan program yg disebut spider dalam penjelajahan internet mencari dokumen baru. Dokumen itu bisa berupa halaman web atau file file yg gratis, boleh didownload, dan mudah diakses. Nantinya setiap kata halaman web dokumen itu diindex.

Cara penggunaan webcrawler, sama seperti cara penggunaan search engine lainnya. Seseorang harus menginputkan keyword kata kunci yg nantinya diubah menjadi query search engine. Coba cek beberapa contoh query google search engine ini.

Kemudian webcrawler memproses permintaan query dan menampilkan hasil pencarian berupa daftar dokumen yg berisi kata kunci query. Setiap judul ngelink ke situs dokumen asli di WWW. Jadi user dapat langsung menuju situs dokumen bersangkutan

Survey Redaksi : Apakah posting ini terlalu berbau IT ? Sy sedang survey sekaligus belajar menulis topik IT yg disajikan ringan bersahaja. Apakah sy sudah berhasil ?

Blogku dari unggun-timbun sajak
Kaca jernih dari luar segala nampak
Blogku dari unggun-timbun sajak
Di sini aku berbini dan beranak

[Chairil Anwar, Rumahku]

1. Ranking Alexa, Toolbar sebesar dusta kah?
2. OneRiot, Search Engine Baru
3. Scraper Sites
4. Web Crawl, Proses Index Googlebot
5. What Googlebot Sees ?

1. Next : Tantangan Terbesar Web Designer
2. Previous : Be Accessibility King ?