Terkadang seorang webmaster perlu menghapus salah satu halaman yang diindeks dari mesin pencari. Paling sering, operasi ini terpaksa dilakukan setelah salah memasukkan alamat halaman ke dalam daftar umum peta situs. Pada suatu waktu, spesialis dari perusahaan Megafon mengalami kesalahan ini (pesan sms tersedia untuk setiap pengguna mesin pencari Yandex).
Itu perlu
Situs pribadi
instruksi
Langkah 1
Salah satu cara termudah untuk menghapus halaman web Anda sendiri dari arsip mesin pencari adalah dengan menghapusnya secara fisik, mengubah alamat lokasi dan menghapusnya secara salah (Anda perlu mengatur atribut halaman yang dihapus). Setelah mengubah halaman ini, robot pencari akan melihat baris berikut alih-alih konten: HTTP / 1.1 404 Tidak Ditemukan. Namun, jangan lupa bahwa robot pencari dapat mengunjungi situs tersebut setiap 3 jam, dan mungkin setiap 2-3 hari sekali. Karena itu, Anda perlu menunggu beberapa saat untuk mendapatkan hasilnya.
Langkah 2
Cara selanjutnya adalah mengedit file robots.txt, yang menentukan jalur crawler segera setelah datang ke situs Anda. Dokumen teks ini selalu memiliki satu lokasi - akar situs. Di paragraf pertama, parameter pengindeksan untuk robot Yandex biasanya ditunjukkan (sangat berbeda dari robot lain), di paragraf kedua untuk semua mesin pencari lainnya.
Langkah 3
Di awal paragraf, Anda harus menentukan judul agen "User-Agent: *" dan alamat halaman yang akan disembunyikan - "Disallow: /wp-content/foto/fotojaba.html". Dengan cara yang sama, Anda harus menentukan alamat halaman atau bagian yang ingin Anda tutup dari pengindeksan. Harap dicatat bahwa metode ini tidak memberikan hasil yang cepat. Jika situs Anda memiliki aktivitas rendah dan berita tidak disiarkan di jejaring sosial, pemrosesan data baru dapat mencapai periode beberapa hari. Selain itu, Anda harus menghapus versi halaman ini dari arsip layanan pencarian.
Langkah 4
Metode alternatif untuk menyetel tautan di file robots.txt adalah dengan menggunakan tag meta robots dengan nama yang sama. Sintaks untuk tag ini adalah sebagai berikut: tag harus ditempatkan di antara tag [head] dan [/head] yang berpasangan. Nilai robot harus ditempatkan di tag nama meta. Contoh akan terlihat seperti ini:.
