Apa itu spider ? yang pasti bukan laba laba. Jadi apa itu spider ? Menurut referensi sy pernah sy baca. Spider adalah program komputer otomatis memonitor dokumen yg ada di World Wide Web (WWW). Spider juga bisa disebut robot, softbot, wanderer, crawler, penjelajah web, dan fish. Dokumen World Wide Web (WWW) ini berupa halaman web yg nantinya otomatis diindex.

Cara Kerja Spider

Kebanyakan halaman web setidaknya memiliki satu link merujuk ke halaman lain. Otomatis antar halaman web telah terjalin koneksi. Spider memanfaatkan struktur web ini dengan mengindex satu halaman web kemudian mengikuti link halaman web lain yg ada di halaman web tsb.

Fungsi Spider

Beberapa spider menyimpan URL (Uniform Resource Locator) atau alamat setiap halaman web situs yg pernah mereka kunjungi. Kegunaan spider ini bagi search engine adalah software pengindex halaman web sehingga pengguna search engine dapat mengakses informasi topik tertentu. indexing spider juga menyimpan judul dan ringkasan isi web atau keseluruhan halaman situs sehingga pengguna search engine bisa lebih detail melakukan pencarian.

Beberapa spider memiliki fungsi lebih dimana dia menyimpan URL halaman stus yg belum terdaftar dengan tujuan agar search engine bisa update daftar atau menyediakan daftar halaman situs baru. Beberapa spider mencatat URL yg tidak lagi valid demi menjaga validitas daftar index searce engine.

Btw, Untuk lebih memahami search engine, kamu bisa membaca Referensi Belajar Search Engine dan WebCrawler. Semoga kedua referensi tersebut bisa bermanfaat mempelajari teknologi search engine.

Survey Redaksi : Apakah posting ini terlalu berat dan berbau IT ? Sy sedang survey sekaligus belajar menulis topik semacam ini sambil berusaha membuatnya tetep informatif bagi semua orang. Cara menjawab paling sederhana adalah dgn memberitahu sy pd paragraph berapa kamu mulai bosan dan melompat ke bagian box komentar....plus penjelasan singkat kalau bisa.... :)

Blogku dari unggun-timbun sajak
Kaca jernih dari luar segala nampak
Blogku dari unggun-timbun sajak
Di sini aku berbini dan beranak


[hasil hacking puisi Chairil Anwar, Rumahku]