Cara Menghentikan Mesin Riset dari Crawling Situs WordPress
Diterbitkan: 2022-11-02Belum lama ini, salah satu orang kami bertanya kepada kami bagaimana mereka dapat menghentikan mesin pencari dari merayapi dan mengindeks situs WordPress mereka.
Ada sejumlah situasi ketika Anda ingin mencegah mesin pencari merayapi halaman web Anda dan mencantumkannya di hasil akhir pencarian.
Pada artikel ini, kami akan menunjukkan cara menghentikan mesin telusur merayapi halaman web WordPress.
Mengapa Mengakhiri Mesin Pencari Dari Merayapi Situs WordPress?
Untuk sebagian besar situs internet WordPress, mesin pencari adalah sumber pengunjung terbesar. Anda dapat berbicara dengan, mengapa semua orang ingin memblokir mesin pencarian?
Di bawah ini adalah beberapa kondisi ketika Anda tidak ingin mesin pencari mengindeks halaman web Anda:
- Saat memulai, Anda mungkin tidak tahu cara membuat lingkungan perbaikan lingkungan atau halaman web pementasan, dan sebagai gantinya, dapatkan situs web Anda meskipun sedang aktif. Anda tidak ingin Google mengindeks situs web Anda saat sedang dibangun atau dalam mode pemeliharaan.
- Ada juga beberapa orang yang menggunakan WordPress untuk membuat blog pribadi. Mereka tidak ingin mereka diindeks oleh mesin pencari karena faktanya bersifat pribadi.
- Anda dapat menggunakan WordPress untuk manajemen pekerjaan atau intranet. Dalam keadaan ini, Anda tidak ingin dokumen batin Anda dapat diakses publik.
Kesalahpahaman yang umum adalah bahwa jika Anda tidak pernah memiliki tautan yang mengarah ke domain Anda, maka mesin pencari mungkin tidak akan pernah menemukan situs web Anda. Ini tidak sepenuhnya asli.
Misalnya, mungkin ada tautan yang mengarah ke situs web Anda karena nama domain tersebut sebelumnya dimiliki oleh orang lain. Juga, ada banyak sekali halaman web di world-wide-web yang pada dasarnya mencantumkan nama domain. Halaman web Anda mungkin muncul hanya di salah satu dari itu.
Dengan itu diklaim, mari kita lihat bagaimana menghentikan mesin pencari merayapi situs Anda. Kami akan melindungi 4 prosedur:
Pendekatan 1: Meminta Mesin Pencari untuk tidak Merayapi Situs WordPress Anda
Ini adalah strategi termudah tetapi tidak sepenuhnya melindungi situs web Anda agar tidak dirayapi.
WordPress hadir dengan fitur bawaan yang memungkinkan Anda memerintahkan mesin pencari untuk tidak mengindeks situs Anda. Yang ingin Anda lakukan hanyalah mampir Pilihan »Membaca dan melihat kotak di sebelah 'Search Engine Visibility'.
Saat kotak ini dicentang, WordPress menyediakan baris ini ke tajuk situs web Anda:
WordPress juga mengubah file robots.txt situs Anda dan menambahkan baris berikut ke dalamnya:
Person-agent: *
Disallow: /
Strain ini memeriksa dengan robot (perayap internet) untuk tidak mengindeks halaman web Anda. Namun demikian, terserah untuk mencari mesin untuk mengakui permintaan ini atau mengabaikannya. Meskipun sebagian besar mesin pencari menghargai hal ini, namun ada kemungkinan beberapa halaman internet atau visual dari situs web Anda dapat diindeks.
Jika Anda ingin membuat mesin riset tidak mungkin mengindeks atau merayapi situs Anda, maka Anda perlu menjaga kata sandi situs web WordPress Anda menggunakan Metode 3 atau 4.
Proses 2: Menanyakan Cari Mesin untuk tidak Merangkak halaman Web Pribadi
Anda mungkin ingin mesin pencari merayapi dan mengindeks situs web Anda, tetapi tidak memasukkan posting atau halaman tertentu di halaman hasil pencarian.
Cara paling sulit untuk melakukannya adalah menerapkan plugin All in A single Web optimization (AIOSEO). Ini adalah alat pemosisian situs web terbaik untuk WordPress dan dipercaya oleh lebih dari 3 juta organisasi.
Untuk tutorial ini, kami akan bekerja dengan edisi gratis AIOSEO karena terdiri dari perangkat lunak Analisis pengoptimalan Web. Ada juga AIOSEO edisi berkualitas tinggi yang menampilkan lebih banyak fitur seperti peralatan peta situs, manajer pengalihan, markup skema, editor robots.txt, dan banyak lagi.
Hal pertama yang harus Anda lakukan adalah menginstal dan mengaktifkan plugin AIOSEO di situs web Anda. Anda dapat menguasai cara menginstal dan mengonfigurasi plugin dengan mengikuti panduan langkah demi langkah kami tentang cara menginstal SEO All in 1 untuk WordPress.
Pada saat plugin disiapkan, Anda dapat menggunakannya untuk meminta mesin telusur agar tidak mengindeks posting dan halaman internet tertentu. Sekali lagi, terserah untuk mencari mesin untuk mengakui permintaan ini atau mengabaikannya.
Cukup edit saja submit atau halaman web yang tidak ingin diindeks. Anda ingin menggulir ke bawah ke Pengaturan AIOSEO di bagian bawah editor WordPress dan kemudian klik tab 'Lanjutan'.
Perhatikan bahwa pos menggunakan pengaturan robot default. Untuk menyesuaikan ini, Anda ingin mengalihkan sakelar 'Gunakan Setelan Default' ke posisi nonaktif.
Sekarang Anda dapat mengklik kotak centang 'Tanpa Indeks'. Ketika posting diposting atau diperbarui, mesin penelitian akan diminta untuk tidak mengindeksnya.
Metode 3: Melestarikan Kata Sandi Seluruh Situs Internet Memanfaatkan cPanel
Jika penyedia hosting WordPress Anda memberikan akses cPanel untuk mengelola akun hosting Anda, maka Anda dapat melindungi seluruh halaman Anda menggunakan cPanel. Yang harus Anda lakukan adalah masuk ke dasbor cPanel Anda dan kemudian klik ikon 'Privasi Direktori' di segmen 'File'.
Selanjutnya, Anda perlu menemukan folder tempat Anda menginstal WordPress. Biasanya, ini adalah folder public_html. Setelah itu, Anda perlu mengklik tombol 'Edit' di sebelah folder itu.
Catatan: Jika Anda memiliki beberapa situs web WordPress yang dipasang di bawah direktori public_html umum, maka Anda hanya perlu mengklik url public_html untuk melihat melalui situs-situs internet tersebut, dan kemudian edit folder untuk situs web yang ingin Anda pertahankan dengan kata sandi.
Ini memberi Anda tampilan layar di mana Anda dapat mengonversi keamanan kata sandi.
Cukup centang kotak yang menyarankan 'Kata sandi amankan direktori ini' dan cukup klik tombol 'Simpan'. Jika mau, Anda juga dapat menyesuaikan nama untuk daftar aman.
Anda akan melihat pesan penegasan yang menyatakan bahwa izin akses untuk cantuman telah diperbaiki.
Mendatang, Anda perlu mengklik tombol 'Kembali'.
Anda akan dibawa ke layar di mana Anda dapat membuat nama pengguna dan kata sandi yang perlu digunakan saat mengakses daftar ini.
Anda harus memasukkan nama pengguna dan kata sandi, lalu konfirmasi kata sandi. Pastikan untuk mencatat nama pengguna dan kata sandi Anda di tempat yang aman, seperti aplikasi pengelola kata sandi.
Pada saat Anda mengklik tombol 'Simpan', Anda berhasil menambahkan pertahanan kata sandi ke situs web WordPress Anda.
Nah, setiap kali konsumen atau pencari motor mengunjungi website Anda, mereka akan diminta untuk memasukkan username dan password yang Anda buat sebelumnya untuk melihat website tersebut.
Metode 4: Membela Kata Sandi WordPress Dengan Plugin
Jika Anda menggunakan alternatif hosting WordPress yang dikelola, Anda mungkin tidak memiliki akses ke cPanel. Dalam hal ini, Anda dapat menggunakan plugin WordPress untuk melindungi situs web Anda dengan kata sandi.
Dalam artikel ini adalah dua alternatif paling populer:
- SeedProd adalah #1 datang dengan cepat dan plugin metode pemeliharaan untuk WordPress, diterapkan di lebih dari 800.000 situs web. Ini hadir dengan fitur manajemen akses dan izin komprehensif yang dapat Anda gunakan untuk menyembunyikan situs web Anda dari semua orang termasuk mesin telusur. Kami memiliki panduan langkah demi langkah untuk SeedProd.
- Kata Sandi Terjamin adalah cara yang sangat tidak rumit untuk mengamankan kata sandi situs WordPress Anda dengan satu kata sandi (tidak diinginkan pembuatan pengguna). Lihat buku panduan langkah demi langkah kami tentang cara mengamankan halaman web WordPress dengan kata sandi.
Kami harap artikel singkat ini membantu Anda berhenti mencari mesin dari merayapi atau mengindeks situs WordPress Anda. Anda mungkin juga ingin mempelajari cara mempercepat kinerja keseluruhan situs web Anda, atau lihat panduan keamanan WordPress tindakan demi langkah terbaik kami untuk pendatang baru.
Jika Anda lebih suka artikel ini, ingatlah untuk berlangganan tutorial video Channel YouTube untuk WordPress kami. Anda juga bisa mendapatkan kami di Twitter dan Facebook.