Tugas menghapus halaman individu atau seluruh situs dari mesin pencari dihadapi oleh seorang webmaster ketika mengubah informasi, mengubah domain, menggabungkan beberapa sumber daya, dan sejumlah alasan lainnya. Ada beberapa cara untuk memecahkan masalah, tergantung pada hasil yang diinginkan.
instruksi
Langkah 1
Hapus halaman yang akan diindeks ulang sehingga server mengembalikan pesan kesalahan saat mencoba menavigasi ke halaman web yang dipilih HTTP / 1.1 404 Tidak Ditemukan. Untuk menerapkan perubahan yang dipilih, Anda harus menunggu robot mengakses kembali halaman yang diperlukan.
Langkah 2
Gunakan file root robots.txt untuk mengecualikan bagian atau halaman yang dipilih dari pengindeksan mesin telusur. Untuk mencegah tampilan panel admin di mesin pencari, gunakan perintah: User-Agent: * Diaallow: / admin / Atau, untuk mengecualikan halaman yang dipilih dari pengindeksan, masukkan nilai: User-Agent: * Disallow: / selected_page.html # Untuk menerapkan perubahan, robot harus mengunjungi lagi halaman yang dipilih.
Langkah 3
Gunakan metode penandaan meta untuk menambahkan aturan yang ditentukan dalam kode HTML ke semua halaman yang diperlukan: Ini diperlukan untuk mengecualikan halaman yang tidak diinginkan dari mesin pencari.
Langkah 4
Pilih metode untuk membuat X-Robots-Tag untuk memasukkan perintah ke dalam http-header yang tidak ditampilkan dalam kode halaman: X-Robots-Tag: noindex, nofollow Metode ini paling berguna untuk mengecualikan halaman atau bagian yang dipilih dari pengindeksan mesin pencari asing.
Langkah 5
Gunakan halaman kontrol webmaster khusus di Yandex: https://webmaster.yandex.ru/deluri.xml atau di Google: https://www.google.com/webmasters/tools. Hal ini dilakukan untuk melarang tampilan yang diinginkan laman, bagian, atau seluruh situs di mesin telusur yang dipilih.
