February 9, 2023

Mengatasi Masalah Pemblokiran Googlebot oleh Firewall & CDN Website

Mengatasi Pemblokiran Googlebot oleh Firewall & CDN

Seperti yang kita diketahui selama ini, untuk memastikan sebuah situs web dapat ditemukan oleh pengunjung, situs web tersebut tentunya harus terindeks terlebih dahulu oleh mesin pencari seperti Google.

Nah, proses indexing ini dilakukan oleh bot atau crawler dari mesin pencari seperti Googlebot. Googlebot sendiri memiliki tugas untuk memindai teks dan tautan pada situs web tersebut untuk menggolongkannya ke dalam beberapa kelompok atau kategori yang berguna untuk memudahkan pengunjung ketika mencari suatu hal secara relevan.

Namun, terkadang ada juga website yang sulit terindeks oleh Google ketika pengunjung melakukan pencarian pada mesin pencarian. Hal ini tentu saja akan menyulitkan pemilik website dalam menaikan trafik atau bahkan sulit untuk menaikan ranking SEO website.

Sebenarnya ada beberapa alasan yang mungkin terjadi jika suatu situs website sulit atau tidak dapat terindex oleh Google. Namun kali ini Google memberitahu dan menjelaskan alasan yang biasanya terjadi adalah pemblokiran Googlebot yang dilakukan oleh situs website itu sendiri.

Namun, beberapa situs web melaporkan bahwa Googlebot mengalami kesulitan dalam mengakses halaman web mereka, dan ada dugaan bahwa ini disebabkan oleh firewall atau Content Delivery Network (CDN) yang diterapkan pada situs tersebut.

 

Menurut salah satu webmaster dari Google yaitu Gary Illyes ia menjelaskan:

“Sejauh ini, masalah paling umum yang terjadi dari pemblokiran Googlebot berasalkan dari firewall atau CDN yang memblokir lalu lintas googlebot. Setelah saya menjangkau situs pemblokiran tersebut, dalam sebagian besar kasus melakukan pemblokiran Googlebot secara tidak sengaja."

Gary juga menjelaskan apa yang harus dilakukan jika hal ini terjadi:

“Pemilik website seharusnya sudah membiasakan diri dalam memeriksa aturan blokir. Kami telah menerbitkan rentang IP sehingga akan membantu Anda untuk menjalankan otomatisasi dalam memeriksa aturan blokir terhadap googlebot subnet."

Gary juga memberikan dokumen yang dapat membantu dalam menyelesaikan masalah ini

 

Dalam beberapa kasus, masalah blokir Googlebot oleh firewall atau CDN mungkin disebabkan oleh konfigurasi situs web yang salah atau bug pada perangkat lunak. Pemilik website dapat meminta bantuan dari tim teknis atau spesialis SEO untuk mengatasi masalah tersebut.

Secara keseluruhan, memastikan bahwa Googlebot tidak terblokir oleh firewall atau CDN adalah hal penting bagi para pemilik website. Hal ini dilakukan untuk memastikan visibilitas situs web di mesin pencari.

Dengan melakukan langkah-langkah yang tepat dan memantau kinerja situs web melalui Google Search Console, para webmaster dapat memastikan bahwa situs web mereka dapat diindeks dan ditemukan oleh pengguna di mesin pencari.

SUBSCRIBE

Dapatkan Informasi Teknologi terbaru langsung ke Email Anda. Subscribe Sekarang, GRATIS!
Subscribe

Baca Juga Artikel lainnya

November 16, 2023
Apa Itu SEO Offpage? & Bedanya Dengan Onpage

Tahukah Kamu, Apa Itu SEO Offpage? Ketika kita mencari sesuatu di mesin pencari seperti Google, […]

Read More
November 15, 2023
Apa Itu SEO Onpage? Dan Cara Mengoptimasinya

Mari bersama kita telusuri bersama konsep dasar "Apa itu SEO Onpage?" serta strategi praktis untuk […]

Read More
November 7, 2023
Apa Itu Backlink PBN, Ciri Web PBN Yang Bagus

Backlink PBN (Private Blog Network) adalah praktik yang umum digunakan dalam dunia SEO. Backlink PBN […]

Read More
1 2 3 23

We Are Ardata

PT. Ardata Digital Asia (Ardata Media) merupakan sebuah perusahaan yang bergerak di bidang IT dengan produknya berupa Jasa dan Produk Digital.
WA : 085741111568
SEMUA ARTIKEL
envelope
Chat Sekarang
Hi, Gunakan chat ini untuk menghubungi kami
linkedin facebook pinterest youtube rss twitter instagram facebook-blank rss-blank linkedin-blank pinterest youtube twitter instagram