Apa itu spider ? yang pasti bukan laba laba. Jadi apa itu spider ? Menurut referensi sy pernah sy baca. Spider adalah program komputer otomatis memonitor dokumen yg ada di World Wide Web (WWW). Spider juga bisa disebut robot, softbot, wanderer, crawler, penjelajah web, dan fish. Dokumen World Wide Web (WWW) ini berupa halaman web yg nantinya otomatis diindex.
Kebanyakan halaman web setidaknya memiliki satu link merujuk ke halaman lain. Otomatis antar halaman web telah terjalin koneksi. Spider memanfaatkan struktur web ini dengan mengindex satu halaman web kemudian mengikuti link halaman web lain yg ada di halaman web tsb.
Beberapa spider menyimpan URL (Uniform Resource Locator) atau alamat setiap halaman web situs yg pernah mereka kunjungi. Kegunaan spider ini bagi search engine adalah software pengindex halaman web sehingga pengguna search engine dapat mengakses informasi topik tertentu. indexing spider juga menyimpan judul dan ringkasan isi web atau keseluruhan halaman situs sehingga pengguna search engine bisa lebih detail melakukan pencarian.
Beberapa spider memiliki fungsi lebih dimana dia menyimpan URL halaman stus yg belum terdaftar dengan tujuan agar search engine bisa update daftar atau menyediakan daftar halaman situs baru. Beberapa spider mencatat URL yg tidak lagi valid demi menjaga validitas daftar index searce engine. Btw, Untuk lebih memahami search engine, kamu bisa membaca Referensi Belajar Search Engine dan WebCrawler. Semoga kedua referensi tersebut bisa bermanfaat mempelajari teknologi search engine.
Tags: Glossary, Search Engine
Leave a Reply. Btw, i have right to delete your comment. Sometimes, i need to save my databse space.