• Skip to primary navigation
  • Skip to main content
  • Skip to primary sidebar

Jaranguda

  • Home
  • Sponsor/Jasa
  • Tentang
Home » Block Google Search Engine dengan Nginx

Block Google Search Engine dengan Nginx

Last Updated on 31 May 2020 By tommy Leave a Comment

Salah satu cara untuk memblokir search engine (Google, Yandex, MSN, Yahoo, dll) dengan memanfaatkan robots.txt. Bila biasanya anda membuat file robots.txt secara manual, dengan menambah konfigurasi di nginx bisa tanpa perlu menambah file apapun.

Konfigurasi Robots.txt

Konfigurasi standart untuk memblokir semua mesin pencari dengan robots.txt

User-agent: *
Disallow: /

Untuk memblokir hanya mesin pencari Bing

User-agent: BingBot
Disallow: /

Untuk memblokir hanya mesin pencari Google

User-agent: GoogleBot
Disallow: /

Setting Robots.txt di Nginx

Di konfigurasi nginx untuk domain anda, tambahkan

location = /robots.txt {                                                                                        
    add_header Content-Type text/plain;                                                                           
    return 200 "User-agent: *\nDisallow:  /\n";
}

cek konfigurasi anda

nginx -t

bila tidak ada error, reload nginx

systemctl reload nginx

Buka http://nama-domain/robots.txt
tampilan robots.txt

Penutup

Dengan memblokir search engine di robots.txt tidak serta merta langsung menghilangkan website anda dari index mesin pencari, karena itu tergantung dari mesin pencari apakah mereka mengikuti aturan main robots.txt atau tidak. Untuk Google sendiri, biasanya 1-2 minggu setelah setting robots.txt ini website anda akan hilang dari Google.

Solusi lain agar website anda tidak bisa diindex oleh mesin pencari adalah dengan menambahkan Basic Auth


Tulisan menarik lainnya

  • NGINX Rewrite URL dengan sub_filter

    Contoh untuk merubah URL di nginx dengan bantuan modul sub_filter, sebagai contoh saya menggunakan aplikasi…

  • Default VirtualHost Apache dan Server Block Nginx

    VirtualHost Apache Buat file tempat menyimpan virtualhost anda dengan nama 000-default, tambahkan konfigurasi dibawah ini…

  • Membuat Diagram Google Chart dengan PHP MySQL

    Ditutorial kali ini kita akan menggunakan data penduduk Indonesia pada tahun 2010 sebagai contoh. Yang…

  • Cara Mendaftar Google Play Developer Indonesia

    Untuk yang baru mulai menjadi pengembang aplikasi Android, tidak salahnya anda mendaftarkan diri menjadi publisher…

Filed Under: Teknologi

Reader Interactions

Leave a Reply Cancel reply

Your email address will not be published. Required fields are marked *

Primary Sidebar

Pencarian

Komentar

  • Jun on Kemana Menghilangnya Saldo BCA 50 ribu
  • bayu apriliansyah on Password Superadmin Huawei HG8245A
  • mrw on Kemana Menghilangnya Saldo BCA 50 ribu
  • Hani on Kemana Menghilangnya Saldo BCA 50 ribu
  • Hani on Kemana Menghilangnya Saldo BCA 50 ribu

Terbaru

  • Cara Nonaktif HTTP Session dan CSRF di Laravel 8
  • Cara Resmi Download ISO RHEL 8 dari CLI
  • Install VirtualBox 6.1.18 untuk Linux Kernel 5.10
  • Cara Testing IPv6
  • Cara Menggunakan Guzzle PHP untuk POST dan GET

Tulisan Populer

  • Password Terbaru ZTE F609 Indihome 761.6k views
  • Password Router Huawei HG8245H5 Indihome 548.4k views
  • Cara Setting Manual Modem GPON ZTE F609 Indihome 235.8k views
  • Cara Setting Wireless ZTE F609 Indihome 223.2k views
  • Password Superadmin Huawei HG8245A 216.7k views
  • Akses UseeTV Indihome via Wireless ZTE F609 143.7k views
  • Mengaktifkan Port LAN di Huawei HG8245 Indihome 143k views
  • Cara Reset Password ZTE F609 Indihome 137.2k views
  • Mengubah Modem Wireless Router Menjadi Access Point 97.1k views
  • Cara Setting DHCP Server Modem/Router ZTE F609 93k views

Kategori

  • Delphi
  • dll
  • Gambas
  • Internet
  • Java
  • Lazarus
  • Linux
  • PHP
  • Review
  • Teknologi

Sponsor

Unix Time
Untuk jadi sponsor, hubungi kita lewat halaman sponsor
© 2020. Jaranguda
  • Linux
  • PHP
  • Internet
  • Teknologi
  • Delphi
  • Gambas
  • Java