Googlebot
Googlebot adalah robot yang di kirimkan oleh Google untuk mengambil informasi yang update dari website anda,
ya… tentunya jika web anda sudah terindex oleh google
Nah di sini saya akan coba menjelaskan tentang dua versi Googlebot yaitu Freshbot dan Deepbot
Freshbot
Freshbot meng-crawl website dan mencari fresh content. Freshbot mengunjungi website yang frekwensi berubahnya tinggi, tergantung seberapa frekwebsi berubahnya, jika frekwensi content website anda tinggi maka Fresh bot akan sering datang ke rumah anda, Googlebot hanya mengikuti Href link dan SRC link.
Deepbot
Deepbot mencoba untuk mengikuti setiap link dalam sebuah website dan men-download sebanyak mungkin halaman website anda. Proses ini akan selesai sekitar sebulan sekali
Nah sangat penting anda memasang script PHP yang saya bikin untuk memasang perangkap “jejak”
Dengan Membuat System LOG dengan FLAT FILE
Sehingga apabila googlebot datang ke website anda maka jejak nya akan tertangkap dan anda bisa melihat kapan mereka datang…
Penjelasan tentang Googlebot
Googlebot menjelajahi banyak halaman website dengan cara mengikuti link-link yang ada. Googlebot mengikuti link-link yang ada sehingga bisa sampai ke halaman yang lain. Halaman website baru untuk dapat terindex harus mendapatkan link dari halaman yang lain yang sudah terindex oleh google, semisal: halaman A sudah ter-index Google, anda mempunyai halaman B (yang baru anda buat tadi malam), yang anda lakukan supaya halaman B dapat ter-index oleh google adalah anda memasang link dari halaman A ke halaman B paling sedikit dua link (Tips. tapi letakkan 2 link yang menuju halaman B tadi agak berjauhan).