Banyak pemilik situs web dihadapkan pada masalah pelarangan pengindeksan sumber daya dan penghapusannya dari mesin telusur. Hal ini biasanya terjadi karena situs menjadi usang dan tidak relevan, penerbit atau pengunjung kehilangan minat terhadap situs, atau situs berisi informasi pribadi dan bahkan rahasia.
instruksi
Langkah 1
Ada banyak cara untuk menghapus situs dari mesin pencari.
Cara pertama dan termudah untuk menghapus hasil kueri dari mesin pencari adalah dengan menghapus halaman dari situs itu sendiri atau menghapus sepenuhnya situs CMS melalui koneksi FTP. Dalam beberapa hari, mesin pencari akan memperbarui database dan menghapus tautan ke sumber daya Anda dari hasil pencarian.
Langkah 2
Cara paling populer di kalangan webmaster untuk melindungi situs, bagian atau halaman individualnya dari pengindeksan, dan dengan demikian menghapus tautan dari hasil penelusuran, adalah dengan mengedit file robots.txt.
Anda dapat menutup halaman terpisah dari pengindeksan menggunakan kode:
Agen pengguna: *
Larang: /page.html (menutup halaman page.html)
Ada banyak petunjuk penulis tentang cara menggunakan kode untuk file robots.txt di Internet.
Langkah 3
Cara ketiga untuk menghapus halaman situs dari mesin pencari adalah dengan menggunakan tag meta robot di halamannya. Tag ditulis dalam kode HTML dari halaman tersembunyi di antara tag.
Jadi, setelah mengindeks ulang situs PS, halaman dengan tag meta ini akan keluar dari pencarian. Kerugian dari metode ini adalah banyak situs modern menggunakan templat tpl, yang berarti Anda harus mengubah kode secara manual dalam ratusan, mungkin ribuan halaman.
Langkah 4
Cara keempat untuk menghapus situs dari mesin pencari adalah dengan menggunakan header X-Robots-Tag. Inti dari header ini mirip dengan penggunaan meta tag sebelumnya, namun entri harus berada di header
X-Robots-Tag: noindex, nofollow
Langkah 5
Cara paling efektif untuk menghapus situs web (seluruhnya) dari mesin telusur adalah dengan menghapusnya dari panel webmaster. Setelah pembaruan (3-7 hari), situs tidak akan dapat diakses oleh mesin pencari. Panel webmaster tersedia untuk mesin pencari Yandex (https://webmaster.yandex.ru/delurl.xml) dan Google (https://webmaster.yandex.ru/delurl.xml).
