Jocker ID - Sudah lama saya tidak membagikan artikel yang berkaitan dengan blogger. Walaupun akhir-akhir ini saya sering membagikan hal-hal yang berkaitan dengan trik internet, tapi sama sekali saya tidak akan melupakan apa yang namanya optimasi blog.
Mungkin beberapa orang termasuk saya merasa tidak nyaman bila mendapati semacam error, salah satunya seperti apa yang terjadi pada status Kesalahan Perayapan di Google Webmaster Tools. Erorr yang seringkali saya jumpai adalah seperti kode 503 (server error), Not Found (404), dan yang paling membingungkan adalah Bloked URL (terblokirnya beberapa alamat url penting pada blog).
Saya terus mengevaluasi apa yang sebenarnya terjadi dan apa yang harus saya lakukan. Tapi sungguh ironis bahwa setiap upaya yang saya lakukan tidak membuah hasil bahkan sepucuk daupun tak muncul. Saya beranggapan bahwa Status Crawler Error untuk Smartphone yang ada pada Google Webmaster Tools hanyalah versi beta (percobaan). Mengapa begitu? Karena setelah saya coba menggunakan handphone jelek saya, url yang katanya terblokir di status kesalahan perayapan malah terindeks dan ada di SERP Google melalui perangkat mobile saya, itu sungguh ironis sekali dengan kenyataan yang ada Webmaster Tools. Bagaimana bila itu terjadi kepada anda? Itu sungguh membingungkan bukan?
 |
| Crawl Error for Smartphone |
Sebagai antisipasi bila memang anda merasa tidak nyaman dengan informasi error yang anda dapatkan, anda bisa mencoba pengaturan robots.txt seperti contoh di bawah.
User-agent: Googlebot Disallow: /search
User-agent: Googlebot-Mobile Disallow:
Pada setelah titik dua Disallow silakan anda isi dengan url yang ingin anda cekal seperti contoh di bawah.
Disallow: /p/about.html
Begitulah pengaturan sederhana robots.txt untuk mengantisipasi kesalahan perayapan khusus smartphone. Namun begitu, semuanya tak bisa menjadi jaminan untuk berhasil walau sumber ini berasal dari Google sendiri. Selamat mencoba dan semoga berhasil.
