Baiduspider: Baidu tarayıcısını yönetme

TL;DR — Baiduspider, Baidu’nun web tarayıcısıdır — sayfalarınızı ziyaret eden ve bunları Baidu Arama için indiren bottur. Anakara Çin önemli bir pazarsa, Baiduspider tarama izlemenizde yer almalıdır. Motor özel davranışlarına, özellikle JavaScript işleme ve tarayıcı kontrollerine güvenmeden önce Baidu’nun güncel webmaster belgelerini kontrol edin.

Baiduspider nedir

Google, anakara Çin’de çalışmaz. Baidu çalışır — oradaki çoğu insanın kullandığı arama motorudur ve Baiduspider onun tarayıcısıdır. Baiduspider sitenizi ziyaret ettiğinde bağlantıları takip eder, site haritanızı okur, sayfalarınızı indirir ve bunları Baidu’nun dizinini oluşturmak üzere aktarır — birisi arama yaptığında Baidu’nun yararlandığı veritabanı. Baiduspider bir sayfaya ulaşamaz veya okuyamazsa, o sayfa Baidu’da görünmez.

Baidu’nun kendi sözleriyle (resmî İngilizce SSS’sinden): “Baiduspider is Baidu search engine program which is used to visit pages on the internet and build information into Baidu index. This enables users to locate your site when they perform a search.” Bu, Googlebot’un Google, Bingbot’un ise Bing için yaptığı işle aynıdır.

Neden sizin için önemli olabilir

Baiduspider yalnızca anakara Çin’de bulunmak istiyorsanız gerçekten önem taşır. Baidu orada hâlâ liderken Google’ın payı yok denecek kadar azdır; dolayısıyla Çin’e yönelik bir site (veya Çin’de kitlesi bulunan küresel bir site), Batılı bir sitenin Googlebot’a ihtiyaç duyduğu gibi Baiduspider’a ihtiyaç duyar. Çin’deki kullanıcılara hiç hizmet vermiyorsanız Baiduspider, sunucunuza istek gönderen diğer botlardan ibarettir ve bazı siteler kaynak tasarrufu için onu engellemeyi tercih eder.

Sorun: Baiduspider’ın JavaScript performansı zayıf

Bu en büyük sorundur. Googlebot modern bir Chrome sürümü çalıştırır ve çoğu JavaScript ağırlıklı siteyi sorunsuz okur. Baiduspider bunu yapmaz — JavaScript çalıştırmada zayıf olduğu yaygın olarak bildirilir. Önemli içeriğiniz veya bağlantılarınız yalnızca JavaScript çalıştıktan sonra görünüyorsa, aynı sayfa Google’da iyi sıralansa bile Baidu bunları asla göremeyebilir. Çin’e yönelik bir site için güvenli hamle: gerçek içeriğinizin herhangi bir JavaScript çalışmadan önce gelen düz HTML’de olduğundan emin olun.

Baiduspider’a nasıl yardımcı olunur (veya engellenir)

• İçeri almak için: önemli sayfalarınıza bağlantı verin, Baidu Search Resource Platform’a (Baidu’nun Search Console sürümü) bir site haritası gönderin ve bu sayfaları robots.txt içinde yanlışlıkla engellemeyin.
• Sitenizin bazı bölümlerinden uzak tutmak için: robots.txt kullanın — Baidu orada standart kurallara uyduğunu söyler.
• Yavaşlatmak için: Baidu Search Resource Platform’da, Baiduspider’ın ne kadar taradığını görebileceğiniz ve sınırlayabileceğiniz bir tarama sıklığı alanı vardır.

Teknik sürümü mü istiyorsunuz — tam kullanıcı aracısı dizeleri, gerçek bir Baiduspider’ı nasıl doğrulayacağınız, robots.txt tuhaflıkları ve tarama sıklığı kontrolleri? Gelişmiş sekmesine geçin.

TL;DR — Baiduspider, Baidu’nun tarayıcısıdır; Çin pazarının Googlebot’u olarak düşünülebilir. Genel PC/mobil varyantların yanı sıra -image, -video, -news, -favo, -cpro ve -ads varyantlarının tümü Baiduspider belirteç ailesini paylaşır. Ayrıca Baidu’nun yalnızca Çince belgelediği bir Baiduspider-render JavaScript varyantı vardır. Gerçekliğini *.baidu.com/*.baidu.jp için çift yönlü DNS denetimiyle doğrulayın; Baidu’nun kendi SSS’si taklitçilere karşı uyarır. Baidu, “strictly complies with robots.txt protocol,” iddiasında bulunsa da açıkça adlandırılmış bir istisna vardır: Baiduspider-cpro ve Baiduspider-ads ticari anlaşmalar kapsamında çalışır ve farklı erişim kurallarına tabi olabilir. Baidu ayrıca standart dışı crawl-delay yönergesini güvenilir bir kontrol olarak belgelemez. İşleme davranışı değişebileceğinden kritik içerik için sunucu tarafında oluşturulan HTML en temkinli varsayılandır. Güncel kontrolleri Baidu Search Resource Platform’da (Ziyuan) doğrulayın. Evidence for this claim Baiduspider is Baidu Search's crawler and Baidu's Search Resource Platform is the authoritative place to verify current crawler guidance. Scope: Current official Baidu webmaster platform; user-agent text alone is not authentication. Confidence: medium · Verified: 2026-07-14 Baidu Search Resource Platform Evidence for this claim Crawler access directives use the standardized robots.txt protocol, but engine-specific support and verification should be checked against Baidu's current documentation. Scope: Robots Exclusion Protocol baseline, distinct from undocumented Baidu-specific behavior. Confidence: high · Verified: 2026-07-14 IETF RFC 9309: Robots Exclusion Protocol

Baiduspider aslında nedir

Baiduspider (百度蜘蛛), Baidu tarafından işletilen tarayıcıdır; bu arama motoru, Google’ın büyük ölçüde Büyük Güvenlik Duvarı’nın arkasında erişilemediği anakara Çin’de hakimdir. Görevi standart tarama → dizinleme → sunum hattıdır: URL’leri keşfetmek, sayfaları getirmek ve Baidu Search’ün yararlandığı dizini oluşturmak. Baidu’nun resmi İngilizce SSS’si, “FAQs of Baiduspider” help.baidu.com üzerinde, buradaki nadir birincil İngilizce belgelerden biridir ve aşağıdaki doğrudan alıntıların çoğunun kaynağıdır.

Her şeyi belirleyen temel asimetri şudur: Baidu küresel ölçekte değil, Çin iç pazarında önemlidir. StatCounter’ın Haziran 2026 Çin anlık görüntüsünde Baidu %47,44, Bing %23,24, Haosou %14,02, Sogou %2,62, Google ise yalnızca %2,28 paya sahipti (StatCounter, Search Engine Market Share China). Bunu değişmez bir oran değil, belirli bir ana ait görüntü olarak değerlendirin. StatCounter’ın Çin verileri cihaz dağılımı ve metodolojiye bağlı olarak aydan aya kayda değer biçimde değişir (Baidu’nun payı, 2025–2026 dönemindeki farklı anlık görüntülerde yaklaşık %40 ile %65 arasında bildirilmiştir). Bu nedenle tek bir ayın oranını sürekli aktarmak yerine güncel veriyi yeniden kontrol edin. Yine de temel sonuç değişmez: Baidu Çin’de, Google ise dünyanın geri kalanında liderdir. Bu nedenle Baiduspider optimizasyonu, Googlebot çalışmalarına sonradan eklenen bir ayrıntı değil, başlı başına bir uluslararası SEO uzmanlık alanıdır. Pazara özgü SEO merkezimiz, Baidu’nun Yandex, Naver ve diğer bölgesel arama motorları arasındaki yerini ele alır.

Kullanıcı aracısı dizeleri ve tarayıcı varyantları

Baidu’nun İngilizce SSS’si tarayıcı varyantlarını doğrudan adlandırır. Aynen alıntılanmıştır (ve evet, Baidu’nun kendi kopyası, farklı dizeler vermek yerine hem PC hem de mobil için “Baiduspider”ı tekrarlar):

Ürün Adları | Kullanıcı aracısı PC arama | Baiduspider Mobil arama | Baiduspider Görsel arama | Baiduspider-image Video arama | Baiduspider-video Haber arama | Baiduspider-news Baidu yer imi | Baiduspider-favo Union baidu | Baiduspider-cpro İş arama | Baiduspider-ads diğer arama | Baiduspider

Dolayısıyla İngilizce SSS’de resmen adlandırılan varyantlar Baiduspider-image, -video, -news, -favo (yer imi), -cpro (“union”/reklam ağı tarayıcısı) ve -ads (işletme araması) varyantlarıdır; tümü Baiduspider aile belirtecini paylaşır. Baidu’nun kendi sitesinde verilen genel PC kullanıcı aracısı dizesi şöyledir:

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

Mobil UA, bir Android WebKit dizesinin içinde Baiduspider/2.0 değerini barındırır. Beyan edilen her varyant aynı http://www.baidu.com/search/spider.html başvuru URL’sine yönelir; bu, Googlebot’un google.com/bot.html sayfasının Baidu’daki karşılığıdır.

Baiduspider-render — Baidu’nun yalnızca Çince belgelediği JS varyantı

Burada doğru anlaşılması gereken ince bir nokta var; çünkü birçok yazıda bu konu hatalı aktarılıyor. Yukarıdaki İngilizce SSS tablosunda bir “Baiduspider-render” varyantı yer almaz. Bu durum, bazı kılavuzların onu yalnızca üçüncü taraflarca aktarılan doğrulanmamış bir bilgi gibi göstermesine yol açmıştır. Ancak öyle değildir. Baidu, Baiduspider-render varyantını resmî olarak belgelemektedir; yalnızca bunu Çince Ziyuan Academy sayfasında yapar: “【官方说法】只需两步，正确识别百度蜘蛛（User-Agent）” (“[Resmî açıklama] Baiduspider’ı doğru biçimde tanımak için iki adım”). Bu sayfa UA’ları üç kanala ayırır: 移动 (mobil), PC ve 小程序 (mini program). Ayrıca normal UA’nın yanında alternatif bir render UA’sı listeler:

Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

eşleşen bir mobil dize ve bir mini program varyantıyla (Baiduspider-render/2.0;Smartapp). Yani Baiduspider-render resmi olarak belgelenmiştir — yalnızca Çince, İngilizce SSS’de yoktur. Baidu’nun yayınlamadığı şey, “-render”ın gerçekte neyi farklı yaptığına dair bir spesifikasyondur; Google’ın aksine Baidu, JavaScript işleme yeteneklerini belgelemez. Bu boşluk, aşağıdaki JS işleme uyarısının kaynağıdır.

Baiduspider’ın gerçekliğini doğrulama (sahte botları ayırt etme)

Kullanıcı aracısı dizesi kolayca taklit edilebilir; herkes Baiduspider olduğunu iddia eden bir istek gönderebilir. Baidu’nun kendi SSS’si tam da bu konuda uyarıda bulunarak “spammers or other trouble makers who pretend to be Baiduspider,” ifadesini kullanır ve dizeye güvenmek yerine DNS ile doğrulama yapılmasını önerir. SSS’deki ifade aynen şöyledir:

We recommend using reverse DNS lookup to verify Baiduspider. Verification methods are different under linux/windows/os environments.

İşletim sistemine göre farklı komutlar ve uygulamalı örnekler verir: Linux’ta host, Windows’ta nslookup, macOS’ta dig -x. Önemli kural ise şöyledir:

The hostname of Baiduspider is *.baidu.com or *.baidu.jp. Others are fake hostnames.

İki *.baidu.com ve *.baidu.jp alan adı hatırlanması gereken tuhaflıktır — Baidu hem .com hem de .jp ters DNS ad alanından tarar, bu nedenle meşru bir Baiduspider ana bilgisayar adı ikisiyle de bitebilir. (Baidu’nun kendi çalışılmış örneklerinden biri bile BaiduMobaider-119-63-195-254.crawl.baidu.jp adresine çözümlenir — bu ana bilgisayar adında “Baiduspider” değil “BaiduMobaider” yazdığına dikkat edin; bu, Baidu’nun belgelerindeki gerçek bir tuhaflıktır, sessizce düzeltilecek bir yazım hatası değildir.)

Baidu’nun İngilizce SSS’si düzyazısında yalnızca ters arama yarısını açıklar, ancak Çince Ziyuan Akademisi sayfası daha açıktır: tüm süreci “双向DNS解析认证” (çift yönlü DNS çözümleme kimlik doğrulaması) olarak adlandırır ve “第一步：DNS反查IP” (Adım 1: IP’yi ters arama) ve “第二步：对域名运行正向DNS查找” (Adım 2: ana bilgisayar adında ileri DNS araması çalıştırın) olarak ayırır. Bu, eksiksiz ve doğru yöntemdir — bir *.baidu.com/*.baidu.jp ana bilgisayar adını doğrulamak için IP’yi ters arayın, ardından bu ana bilgisayar adında ileri arama yapın ve aynı IP’ye geri çözümlendiğini doğrulayın. Googlebot veya Bingbot doğrulamak için kullanacağınız iki adımlı yaklaşımla aynıdır — komutlar Scripts sekmesindedir.

Baiduspider ve robots.txt

Baidu, kendi SSS’sinde alışılmadık derecede güçlü ve alıntılanabilir bir uyum iddiasında bulunur:

Baidu strictly complies with robots.txt protocol.

Ve beklediğiniz standart kontrolleri destekler. Baidu’nun Ziyuan Akademisi materyaline göre, Baiduspider robots.txt yollarında * ve $ ile joker karakter eşleştirmesini destekler (Google ve Bing ile eşitlik) ve tam, büyük/küçük harfe duyarlı yol eşleştirmesi yapar. Kullanıcı aracısı başına kurallar ayarlayabilirsiniz — Baidu’nun SSS’si çalışılmış örnekler verir, genel Baiduspider için her şeyi engelleyen ancak görüntü tarayıcısının /image/ dizinine girmesine izin veren şu örnek dahil:

User-agent: Baiduspider
Disallow: /
User-agent: Baiduspider-image
Allow: /image/

(Baidu ayrıca Baiduspider-video’nun şu anda bu kuralları desteklemediğini belirtir.)

”Kesin uyum” için adlandırılmış istisna

Burada dikkat çekici bir gerilim vardır: Baidu kesin uyum iddiasında bulunurken açıkça adlandırılmış, resmî bir istisna da belgeler. Baiduspider-cpro (reklam ağı tarayıcısı) ve Baiduspider-ads (işletme araması) ayrı ticari anlaşmalar kapsamında çalışır ve tasarım gereği robots.txt’yi yok sayar. SSS’deki ifade aynen şöyledir: “Baiduspider-cpro will not work on the records set by robots.txt”; aynı durum -ads için de belirtilir. Dolayısıyla doğru çerçeve, içerik toplayıcı sitelerde görülen muğlak “Baidu robots.txt’ye her zaman uymaz” iddiası değildir. Baidu’nun standart tarayıcıları kurallara uyar; sözleşme gereği muaf olan iki reklam tarayıcısı ise somut ve belgelenmiş istisnayı oluşturur.

Kolayca karıştırılabilen, daha dar kapsamlı ayrı bir nokta da şudur: Baiduspider, standart dışı crawl-delay yönergesine uymaz. Search Engine Journal yazarı Abby Hamilton bunu The Modern Guide To Robots.txt (Kasım 2024) içinde belgelemiştir. Tarayıcı karşılaştırma tablosunda crawl-delay desteği için “Baidu | Baiduspider | No” yer alırken Yandex’in YandexBot’u “Yes” olarak gösterilir. Bu, standart Allow/Disallow kurallarına uyulup uyulmamasından farklı bir iddiadır. Baidu’nun kendi robots.txt iddiasıyla yanlışlıkla çelişmemek için bu ayrımı korumak gerekir.

Gerçek bir örnek: baidu.com’un kendi robots.txt’si

Baidu, kendi alan adında robots.txt segmentasyonu uygular. Canlı robots.txt dosyası, kendi Baiduspider’ına Googlebot, MSNBot, Sogou ve Youdao’ya verdiğinden (bunlara ek olarak /shifen/, /homepage/ ve /cpro engellenir) daha kısa bir engelleme listesi verir ve varsayılan olarak adlandırılmamış herhangi bir kullanıcı aracısı için her şeyi (Disallow: /) engeller:

User-agent: Baiduspider
Disallow: /baidu
Disallow: /s?
Disallow: /ulink?
Disallow: /link?
Disallow: /home/news/data/
Disallow: /bh

Kuralları düzenlerken SSS’deki şu operasyonel ayrıntıyı bilmek yararlıdır: Baidu bir siteyi daha önce dizine eklediyse robots.txt kurallarını sıkılaştırdıktan sonra “it usually takes 48 hours for the updated robots.txt to take effect.”

Baiduspider JavaScript’i işler mi?

Bu, Baiduspider’ın Googlebot’a kıyasla en büyük pratik sınırlamasıdır ve hangi bilginin resmî, hangisinin sektör bulgusu olduğunu doğru ayırmak gerekir. Baidu’nun İngilizce SSS’si JavaScript işlemeyi hiç ele almaz; Google’ın Googlebot için yayımladığı türden bir yetenek belirtimi yoktur. Bunun yerine tutarlı sektör testleri bulunur. Dan Taylor, Search Engine Journal’daki Google vs Baidu comparison yazısında (Mart 2021) bunu açıkça şöyle ifade etmiştir: “Baidu is notoriously bad when it comes to crawling JavaScript, so make sure that all your important content and links are served in plain HTML on both the mobile and desktop versions of your website.”

Bu, sitenin hâlihazırda benimsediği görüşle uyumludur. contentful SEO içeriğimiz, Bing, Yandex ve Baidu’nun “may not index [client-side-rendered JS] at all,” olduğunu ve dinamik işlemenin genel bir Google tekniği olarak artık önerilmediğini belirtir. Üç büyük tarayıcıyı bir ölçeğe yerleştirirsek Googlebot tam, sürekli güncellenen Chromium işleme yeteneğine, Bingbot güçlü Chromium/Edge işleme yeteneğine sahiptir; Baiduspider ise JavaScript konusunda üçünün en zayıfıdır. Sade, sunucu tarafında oluşturulan HTML tümü için evrensel olarak güvenli seçenektir.

Çin’e yönelik bir site için pratik rehberlik: kritik içerik, bağlantılar ve meta verilerin herhangi bir JavaScript çalışmadan önce ilk yanıtta bulunması için varsayılan olarak sunucu tarafında işleme veya statik HTML kullanın. Yalnızca istemci tarafı içeriği, Google’da iyi sıralansa bile, özellikle Baidu için bir dizine ekleme riski olarak ele alın. SSR’yi burada endüstri konsensüsü en iyi uygulaması olarak çerçeveleyin — resmi bir Baidu önerisi olarak değil, çünkü alıntı yapılacak JS işleme hakkında birincil bir Baidu açıklaması yoktur.

Baiduspider’ın tarama sıklığını kontrol etme

Baidu, tarama sıklığını doğrudan ayarladığınız bir şey olarak değil, algoritmik olarak kendi kendini ayarlayan olarak sunar. SSS’den, kelimesi kelimesine:

In order to ensure the search results cover most of your pages, Baiduspider must keep the crawling at a certain level. We have been trying our best to avoid increasing the loading to your servers, and to adjust the frequency based on combined factors, such as your server’s capability, your site’s quality and the update frequency of your site.

Bu, Google ve Bing’in tarif ettiği sunucu kapasitesi ile talebi birlikte değerlendiren mantığa benzer. SSS, aşırı taramayı bildirmek için resmî kanal olarak bir geri bildirim formunu (webmaster.baidu.com/feedback/index) gösterir ve şu ifadeyi kullanır: “If you find any unreasonable access from Baiduspider, please inform us.”

Ürün düzeyinde, Baidu Search Resource Platform (百度搜索资源平台, ziyuan.baidu.com adresinde — tarihsel olarak “Baidu Webmaster Tools” olarak adlandırılan konsol), Baidu’nun Google Search Console ve Bing Webmaster Tools eşdeğeridir. Manuel dizini, site sahiplerinin Baiduspider’ın tarama hızını doğrudan görüntüleyip sınırlayabileceği bir “抓取频次” (Tarama Sıklığı) ürün alanını, robots ve tarama tanılama araçlarının yanında doğrular. Geri bildirim formunu Baidu’nun İngilizce belgelerinde resmi yükseltme yolu olarak ve Ziyuan Tarama Sıklığı panosunu pratik, UI düzeyinde kontrol olarak ele alın. (Ürün içi menü yolunun tamamı oturum açmış bir Ziyuan hesabının arkasındadır, bu nedenle belirli adımları alıntılamadan önce mevcut UI’yi orada doğrulayın.)

hreflang ve diğer Google standart sinyalleri

Google için standart olan sinyallerin tümü Baidu’da geçerli değildir. Bu, iki şirketten birinin belgelediği bir konu değil, sektör ve uygulayıcı bulgusudur. Google’ın localized-versions documentation belgesi tamamen Google Search kapsamındadır ve Baidu, Bing veya Yandex’in hreflang’i destekleyip desteklemediği hakkında herhangi bir iddiada bulunmaz. Sitemizdeki hreflang kılavuzu bunu açıkça belirtir: Baidu hreflang’i hiç desteklemez. Baidu’nun en azından sayfanın dilini okuyabilmesi için doğru content-language ve <html lang> değerleri kullanılmalıdır. Bu bilgi, yalnızca Google uygulamasını ele alan Ahrefs hreflang tags guide ve study of 374 756 domains çalışmalarımı tamamlar; onlarla çelişmez.

İngilizce temsilci kültürü yok — SSS neden alışılmadık derecede değerli

Baidu ekosistemini gerçekten farklılaştıran noktalardan biri şudur: Google (Gary Illyes, John Mueller), Bing (Fabrice Canel) veya Yandex’in aksine Baidu’nun görünür bir İngilizce kamu temsilcisi soru-cevap kültürü yoktur. SEO topluluğuyla karşılıklı iletişim kuran, adı bilinen bir sözcü bulunmaz. Baidu’nun en açık resmî İngilizce kaynağı, imzasız ve kurumsal help.baidu.com SSS’sidir. Bu nedenle söz konusu SSS ve onu destekleyen Çince Ziyuan Academy sayfaları son derece değerlidir. İngilizce konuşulan SEO dünyasındaki Baiduspider operasyon bilgilerinin çoğu, resmî temsilci açıklamalarından ziyade uygulayıcı testlerine (sunucu günlüğü analizi, DNS doğrulama çalışmaları ve robots.txt deneme yanılmaları) dayanır. Michael Bonfils, Search Engine Land’deki Baidu vs. Google yazısında daha genel dersi şöyle özetlemiştir: “SEO strategies that work for Google may not always translate directly to success on Baidu, China’s dominant search engine.”

Baiduspider’ın genel yapı içindeki yerini; tarayıcı ailesini, Googlebot ve Bingbot ile ilişkisini, kullanıcı aracısı kavramını ve robots.txt’yi birlikte görmek için tarama merkezine bakabilirsiniz. Uluslararası SEO bölümü ise Çin pazarı bağlamını ele alır.

AI özeti

Gelişmiş sürümün yoğunlaştırılmış bir özeti:

• Baiduspider = Baidu’nun web tarayıcısıdır — Çin pazarının Googlebot’u olarak düşünülebilir. Baidu anakara Çin’de liderdir (StatCounter Haziran 2026: Baidu ~%47, Google ~%2); dolayısıyla bu, Googlebot çalışmalarına sonradan eklenen bir ayrıntı değil, uluslararası SEO uzmanlık alanıdır. Pay aydan aya değişir; oranları anlık görüntü olarak değerlendirin.
• Varyantlar Baiduspider belirteç ailesini paylaşır: genel PC/mobil ile -image, -video, -news, -favo (yer imi), -cpro (reklam ağı) ve -ads (işletme) varyantları. Genel PC UA’sı: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html).
• Baiduspider-render resmî olarak belgelenmiştir, ancak yalnızca Baidu’nun Çince Ziyuan Academy sayfasında yer alır; İngilizce SSS’de bulunmaz. “-render” varyantının neyi farklı yaptığı belirtilmemiştir.
• *.baidu.com veya *.baidu.jp için çift yönlü DNS ile doğrulayın (Baidu her iki alandan da tarar): önce IP’yi tersine çözümleyin, ardından ana bilgisayar adını aynı IP’ye ileriye doğru çözümleyin. Kullanıcı aracısı taklit edilebilir; Baidu taklitçilere karşı uyarır.
• robots.txt: Baidu “strictly complies,” iddiasında bulunur; */$ joker karakterlerini ve büyük/küçük harfe duyarlı eşleştirmeyi destekler. Ancak adlandırılmış bir istisna vardır: Baiduspider-cpro ve Baiduspider-ads ticari anlaşmalar kapsamında çalışır ve robots.txt’yi yok sayar. Baiduspider ayrıca standart dışı crawl-delay yönergesine uymaz (SEJ yazarı Abby Hamilton’a göre). Kural değişikliklerinin yürürlüğe girmesi ~48 saat sürer.
• JavaScript, Googlebot’a kıyasla en büyük eksikliktir. Resmî bir yetenek belirtimi yoktur; sektör görüş birliğine göre (Dan Taylor: “notoriously bad… crawling JavaScript”) Çin’e yönelik sitelerde sunucu tarafında oluşturulan veya statik HTML güvenli varsayılandır.
• Tarama sıklığı algoritmiktir (sunucu kapasitesi + site kalitesi + güncelleme sıklığı). Aşırı taramayı Baidu’nun geri bildirim formuyla bildirin; oranı Baidu’nun Search Console eşdeğeri olan Baidu Search Resource Platform (Ziyuan) içinde görüntüleyip sınırlayın.
• Baidu hreflang’i desteklemez (sektör bulgusu; iki şirket de bunu doğrudan belgelemez). Bunun yerine content-language/<html lang> kullanın.
• İngilizce temsilci kültürü yoktur: Baidu’nun en açık resmî İngilizce kaynağı imzasız bir SSS olduğundan operasyonel bilginin çoğu uygulayıcı testlerine dayanır.

Resmi dokümantasyon

Birincil kaynak dokümantasyonu. Baidu’nunki bir İngilizce SSS ve Çince Ziyuan (Baidu Search Resource Platform) sayfaları arasında bölünmüştür; Google bağlantıları hreflang kesişim karşılaştırması içindir.

Baidu

• FAQs of Baiduspider (help.baidu.com) — Baidu’nun İngilizce resmi SSS’si: Baiduspider’ın ne olduğu, kullanıcı aracısı tablosu, tarama sıklığı politikası, çalışılmış örneklerle DNS doğrulaması ve robots.txt işleme. Birincil İngilizce kaynak.
• 【官方说法】只需两步，正确识别百度蜘蛛（User-Agent）(ziyuan.baidu.com) — Baidu’nun Baiduspider’ı tanımlama konusundaki Çince resmi makalesi: üç UA kanalı (mobil/PC/mini program), Baiduspider-render UA’ları ve tam olarak açıklanan “çift yönlü DNS kimlik doğrulama” yöntemi.
• Baidu Search Resource Platform manual index (ziyuan.baidu.com) — 抓取频次 (Tarama Sıklığı), robots ve 抓取诊断 (Tarama Tanılama) araç alanlarını doğrulayan Ziyuan ürün kılavuzu dizini.
• baidu.com/robots.txt — Baidu’nun kendi canlı robots.txt’si, tarayıcı başına bölümlendirmenin gerçek bir örneği.

Google (hreflang kesişimindeki karşılaştırma için)

• Tell Google about localized versions of your page — Google’ın tamamen Google Search kapsamındaki hreflang belgesidir; Baidu, Bing veya Yandex’in hreflang’e uyup uymadığı hakkında özellikle hiçbir şey söylemez.

Kaynaktan alıntılar

Baidu’nun adlandırılmış bir İngilizce sözcüsü yoktur, bu nedenle buradaki “kaynak”, Baidu’nun kendi imzasız SSS’si ve Google veya Bing’den alacağınız temsilci alıntılarının yerini tutan adlandırılmış sektör yorumlarıdır. Her bağlantı, alıntılanan pasaja atlayan derin bir bağlantıdır.

Baidu — “FAQs of Baiduspider” (help.baidu.com, İngilizce)

• “Baiduspider is Baidu search engine program which is used to visit pages on the internet and build information into Baidu index. This enables users to locate your site when they perform a search.” Alıntıya git
• “In order to ensure the search results cover most of your pages, Baiduspider must keep the crawling at a certain level… to adjust the frequency based on combined factors, such as your server’s capability, your site’s quality and the update frequency of your site.” Alıntıya git
• “We recommend using reverse DNS lookup to verify Baiduspider.” Alıntıya git
• *“The hostname of Baiduspider is *.baidu.com or .baidu.jp. Others are fake hostnames.” Alıntıya git
• “Baidu strictly complies with robots.txt protocol.” Alıntıya git

Baidu — Ziyuan Akademisi (ziyuan.baidu.com, Çince)

• Orijinal: “二、双向DNS解析认证” — İngilizce açıklama: “Step two: bidirectional DNS resolution authentication.” Bu, Baidu’nun Baiduspider’ı önce ters sorgu, ardından aynı IP’ye dönen ileri sorguyla doğrulama yöntemine verdiği addır. Sayfayı görüntüle

Dan Taylor, Search Engine Journal — JavaScript hakkında

• “Baidu is notoriously bad when it comes to crawling JavaScript, so make sure that all your important content and links are served in plain HTML on both the mobile and desktop versions of your website.” (Mart 2021.) Alıntıya git

Michael Bonfils, Search Engine Land — strateji aktarımı hakkında

• “SEO strategies that work for Google may not always translate directly to success on Baidu, China’s dominant search engine.” Alıntıya git

Abby Hamilton, Search Engine Journal — tarama gecikmesi hakkında

• Tarayıcı karşılaştırma tablosu, Baiduspider’ın standart olmayan crawl-delay yönergesini desteklemediğini listeler (“Baidu | Baiduspider | Hayır”). (Kas 2024.) Kapsamı okuyun

Baiduspider’ın sitemi taramasına izin vermeli miyim — ve bunu nasıl ele almalıyım?

Baiduspider, yalnızca Çin pazarında görünürlük elde etmek istiyorsanız harcayacağınız çabaya değer. Size uygun yolu görmek için seçenekleri izleyin.

Bir botun gerçekten Baiduspider olduğunu doğrulayın

Baidu’nun kendi SSS’si, Baiduspider’ı doğrulamak için ters DNS’i önerir, çünkü kullanıcı aracısı dizesi kolayca taklit edilebilir. Baidu’nun Çince Ziyuan sayfasında adlandırdığı tam çift yönlü kontrolü yapın: IP’yi ters çözümleyin (ana bilgisayar adı *.baidu.com veya *.baidu.jp ile bitmelidir), ardından bu ana bilgisayar adını aynı IP’ye ileri çözümleyin.

macOS / Linux

# 1) Reverse-DNS the IP from your logs — it must end in baidu.com or baidu.jp
host 123.125.66.120
# → 120.66.125.123.in-addr.arpa domain name pointer Baiduspider-123-125-66-120.crawl.baidu.com

# 2) Forward-DNS that hostname back — it must resolve to the same IP
host Baiduspider-123-125-66-120.crawl.baidu.com
# → Baiduspider-123-125-66-120.crawl.baidu.com has address 123.125.66.120

macOS dig biçimi (Baidu’nun SSS’sinde verildiği gibi):

dig -x 123.125.66.120

Windows

nslookup 123.125.66.120
nslookup Baiduspider-123-125-66-120.crawl.baidu.com

Ters çözümleme baidu.com veya baidu.jp ile bitmiyorsa veya ileri çözümleme orijinal IP’yi döndürmüyorsa, bu Baiduspider değildir — bırakın veya hız sınırı uygulayın. (Googlebot ve Bingbot’u doğrulamayla aynı iki adımlı yaklaşım; Google/Bing sürümleri için bu makalelerin Scripts sekmelerine bakın.)

Sunucu günlüklerinizden yalnızca Baiduspider isabetlerini çekin

Erişim günlüğünden aday Baiduspider satırlarını alın, ardından her IP’yi yukarıdaki DNS kontrolüyle doğrulayın — dizeye tek başına güvenmeyin.

# Extract lines whose user-agent claims to be Baiduspider, print unique IPs
grep -i 'baiduspider' /var/log/nginx/access.log \
  | awk '{print $1}' | sort -u

Bir ana bilgisayar adını Baidu’nun izin verilen alan adlarıyla eşleştirin (regex)

Bir ana bilgisayar adını ters çözümledikten sonra, bu regex onun Baidu’nun iki meşru tarayıcı ad alanından (.baidu.com veya .baidu.jp) birinde olduğunu, benzer bir ad olmadığını doğrular:

# Passes only for hostnames ending in .baidu.com or .baidu.jp
echo "Baiduspider-123-125-66-120.crawl.baidu.com" \
  | grep -Eiq '\.baidu\.(com|jp)$' && echo "legit namespace" || echo "FAKE"

baidu.com.evil.example gibi benzer adlara dikkat edin — deseni dizenin sonuna ($) sabitlemek bunların geçmesini engelleyen şeydir.

Baiduspider için bir robots.txt başlangıç noktası

# Let Baiduspider crawl everything except low-value spaces
User-agent: Baiduspider
Disallow: /search
Disallow: /*?*sort=

# Block Baiduspider entirely (China not a target market)
# User-agent: Baiduspider
# Disallow: /

Unutmayın: Disallow taramayı kontrol eder, dizine eklemeyi değil ve kural değişikliklerinin etkili olması ~48 saat sürer. Reklam tarayıcıları Baiduspider-cpro ve Baiduspider-ads tasarım gereği robots.txt’yi yok sayar.

Baiduspider — hızlı başvuru

Kullanıcı aracısı dizeleri ve tarayıcı varyantları

Bildirilen her varyantın UA’sı aynı referans URL’sine işaret eder, http://www.baidu.com/search/spider.html — Googlebot’un google.com/bot.html sayfasının Baiduspider karşılığı.

robots.txt uyumluluğuna bir bakış

Hızlı bilgiler

• Çift yönlü DNS ile doğrulayın: tarama IP’sini tersine sorgulayarak *.baidu.com veya *.baidu.jp ile biten bir ana bilgisayar adı doğrulayın, ardından bu ana bilgisayar adını aynı IP’ye ileriye dönük sorgulayın. Kullanıcı aracısı dizesi tek başına hiçbir şey kanıtlamaz.
• robots.txt değişikliklerinin zaten dizine eklenmiş bir sitede etkili olması yaklaşık 48 saat sürer.
• Baidu, robots.txt yollarında * ve $ joker karakter eşleştirmesini destekler ve tam, büyük/küçük harfe duyarlı yol eşleştirmesi yapar.
• Tarama sıklığı algoritmik olarak kendi kendini ayarlar (sunucu kapasitesi, site kalitesi, güncelleme sıklığı) — Baidu Arama Kaynak Platformu’nda (Ziyuan) görüntüleyin ve sınırlayın.
• Baiduspider’ın Googlebot’a kıyasla en büyük pratik açığı zayıf JavaScript işlemedir — Çin’e yönelik içerik için sunucu tarafında işlenmiş veya statik HTML güvenli varsayılandır.
• Baidu hreflang’i desteklemez — geri dönüş sinyali doğru bir content-language ve <html lang> öğesidir.

Baiduspider hazırlık kontrol listesi

Baiduspider ile çalıştığınızı, yanlışlıkla ona karşı değil, doğrulamak için hızlı bir geçiş — Gelişmiş sekmesinde ele alınan aynı konular, kontrol listesi biçiminde.

• robots.txt, Baidu arama sonuçlarında bulunmasını istediğiniz hiçbir şeyi Baiduspider (veya önemsediğiniz varyantı) için engellemiyor.
• Baidu Arama Kaynak Platformu’nda (Ziyuan) bir site haritası gönderildi.
• Bot doğrulaması çift yönlü DNS kullanır — *.baidu.com/*.baidu.jp için tersine sorgulama, ardından aynı IP’yi doğrulayan ileriye dönük sorgulama — asla yalnızca kullanıcı aracısı dizesi değil.
• Baiduspider-cpro ve Baiduspider-ads’nin tasarım gereği robots.txt’yi yok saydığının farkındasınız, bu yüzden bu ikisini orada engellemek onları gerçekten durdurmaz.
• Son robots.txt sıkılaştırmalarının, dizinleme durumunu yeniden kontrol etmeden önce yayılması için kabaca 48 saati oldu.
• Kritik içerik, dahili bağlantılar ve meta verilerin tümü sunucu tarafında işlenmiş HTML yanıtında mevcut — yalnızca istemci tarafı JavaScript ile enjekte edilmiyor.
• content-language ve <html lang> doğru ayarlandı, çünkü Baidu hreflang’i desteklemiyor.
• Baiduspider trafiği sunucuyu zorluyorsa, Ziyuan’ın Tarama Sıklığı (抓取频次) alanında tarama yükü gözden geçirildi.
• Makul olmayan veya aşırı tarama, tahmin edilerek veya tamamen engellenerek değil, Baidu’nun geri bildirim formu (webmaster.baidu.com/feedback/index) aracılığıyla bildirildi.
• Baidu MIP’ye kalıcı bir bağımlılık yok — çerçeve kullanımdan kaldırıldı (Cache Haziran 2020’de aşamalı olarak kaldırıldı, tam hizmet Eylül 2022’nin sonlarına doğru durduruldu).

Baiduspider ile çalışmak için araçlar

• DNS Denetleyicisi — Baidu’nun kendi SSS’sinin önerdiği çift yönlü DNS kontrolü için kendi aracım. Tarama IP’sini PTR kayıt türüyle girin ve tersine sorgulamayı çalıştırın (gerçek bir Baiduspider ana bilgisayar adı .baidu.com veya .baidu.jp ile biter), ardından bu ana bilgisayar adını A kayıt türüyle girin ve ileriye dönük sorgulamanın aynı IP’ye çözümlendiğini doğrulayın. Cloudflare, Google ve Quad9’u yan yana sorgular, böylece anlaşmazlık içinde olan bir çözümleyiciyi fark edebilirsiniz.
• robots.txt Test Aracı — robots.txt kurallarınızın Baiduspider’ı gerçekten engelleyip engellemediğini veya izin verip vermediğini kontrol etmek için kendi aracım. Dosyanızı yapıştırın, özel kullanıcı aracısı alanına Baiduspider (veya Baiduspider-image, Baiduspider-news vb.) girin ve gerçek yollara karşı test edin — URL başına kazanan tam kuralı gösterir. Baiduspider-cpro ve Baiduspider-ads’nin, ayrı ticari anlaşmalar altında çalıştıkları için, test aracının gösterdiğinden bağımsız olarak robots.txt’yi yok saydığını unutmayın.

Kaçınılması gereken Baiduspider mitleri ve hataları

Mit: “Any user-agent containing ‘Baiduspider’ is really Baidu.” Neden yanlış: Kullanıcı aracısı dizesi kolayca taklit edilebilir ve Baidu’nun kendi SSS’si “spammers or other trouble makers who pretend to be Baiduspider.” ifadesiyle bu konuda uyarır. Bunun yerine: Herhangi bir “Baiduspider” isteğine güvenmeden veya onu bu bilgiye dayanarak engellemeden önce çift yönlü DNS denetimi yapın: *.baidu.com ya da *.baidu.jp ana bilgisayar adına ters sorgu uygulayın, ardından adı aynı IP’ye ileri sorguyla doğrulayın.

Mit: “Baidu never follows robots.txt, or is generally unreliable about it.” Neden yanlış: Baidu’nun SSS’sinde standart tarayıcılar için “Baidu strictly complies with robots.txt protocol” ifadesi yer alır. Gerçek istisna dar kapsamlıdır ve açıkça adlandırılmıştır: Baiduspider-cpro ve Baiduspider-ads ticari anlaşmalar kapsamında çalışır ve robots.txt’yi yok sayar. Bu, muğlak bir “Baidu robots’u yok sayar” iddiasıyla aynı şey değildir. Bunun yerine: Belirli cpro/ads istisnasını aktarın ve bunu Baiduspider’ın standart dışı crawl-delay yönergesine uymadığı yönündeki ayrı bilgiyle karıştırmayın.

Mit: “Baiduspider renders JavaScript about as well as modern Googlebot.” Neden yanlış: Sektör görüş birliğine göre Baiduspider, Googlebot’un sürekli güncellenen Chromium işleme yeteneğinin oldukça gerisindedir. Dan Taylor bunu “notoriously bad… crawling JavaScript” sözleriyle ifade etmiştir. Yalnızca istemci tarafında bulunan içerik, sayfa Google’da iyi sıralansa bile Baidu açısından gerçek bir dizine ekleme riski taşır. Bunun yerine: Çin’e yönelik sitelerde önemli içerik, bağlantı ve meta verileri sunucu tarafında oluşturulan veya statik HTML içinde sunun. Bu, Googlebot, Bingbot ve Baiduspider için güvenli varsayılandır.

Efsane: “hreflang, Baidu için Google’daki gibi çalışır.” Neden yanlış: Baidu hreflang’i hiç desteklemez (sektör bulgusu — Google’ın kendi belgeleri diğer motorlar hakkında yorum yapmaz). Bunun yerine: Baidu’nun sayfanın dilini en azından okuyabilmesi için doğru content-language ve <html lang> kullanın; Baidu’yu yönlendirmek için hreflang’e güvenmeyin.

Efsane: “‘Baiduspider-render’ resmi olarak belgelenmiş bir varyant değildir.” Neden yanlış: Baidu’nun İngilizce SSS tablosu bunu listelemez, ancak Baidu’nun Çince Ziyuan Akademi sayfası Baiduspider-render/2.0’ı alternatif bir PC/mobil UA ve mini program varyantı olarak belgeler. Resmidir — yalnızca Çince. Bunun yerine: resmi olarak belgelenmiş (yalnızca Çince) olarak tanımlayın ve Baidu’nun “-render”ın gerçekte neyi farklı yaptığına dair bir spesifikasyon yayınlamadığını not edin.

Efsane: “Baidu MIP hâlâ canlı, önerilen bir sıralama kaldıracıdır.” Neden yanlış: Baidu’nun AMP benzeri MIP (Mobile Instant Pages) çerçevesi eski. Jademond’un MIP sözlüğüne göre, MIP Önbelleği Haziran 2020’de aşamalı olarak kaldırıldı ve tam MIP hizmeti Eylül 2022’nin sonlarına doğru durduruldu — ancak bazı güncel tarihli ajans içerikleri hâlâ bunu canlı olarak tanıtıyor, bu da başlı başına bir kafa karışıklığı kaynağıdır. Bunun yerine: MIP’i emekli olarak ele alın ve onu aktif bir hız/sıralama kaldıracı olarak sunan herhangi bir güncel rehbere şüpheyle yaklaşın.

Kendinizi test edin: Baiduspider

Baidu’nun tarayıcısı hakkında beş hızlı soru. Her biri için bir cevap seçin, ardından kontrol edin.

Zamanınıza değer kaynaklar

İlgili yazılarım

• Hreflang Tags: A Simple (But Complete) Guide — Joshua Hardwick ile hazırladığım, hreflang hakkındaki Ahrefs kılavuzu. Yalnızca Google kapsamındadır ve Baidu’nun hreflang desteğinin bulunmamasının neden ayrı bir konu olduğunu anlamaya yardımcı olur.
• Over 67% of Domains Using Hreflang Have Issues — ekibimin 374 756 alan adı üzerinde yaptığı çalışma. Google uygulamasına odaklanır ve Baidu’nun hreflang desteğinin bulunmamasıyla yararlı bir karşılaştırma sunar.
• The Beginner’s Guide to Technical SEO — tarayıcıların ve uluslararası sinyallerin genel yapıdaki yerini açıklar.

Konuşmalarım

• International SEO: The Weird Technical Parts (Pubcon Vegas 2019, SlideShare) — Baidu pazarına yönelik çalışmaların da içinde bulunduğu uluslararası SEO’nun teknik uç durumları hakkındaki konuşmam.

Sektörden

• FAQs of Baiduspider (Baidu, help.baidu.com) — Baidu’nun kendi İngilizce SSS’si: UA tablosu, DNS doğrulaması, robots.txt işleyişi ve tarama sıklığı politikası. Birincil İngilizce kaynak.
• Google vs Baidu: Key Differences in SEO Strategy (Dan Taylor, Search Engine Journal) — “notoriously bad at crawling JavaScript” değerlendirmesi ve düz HTML önerisi.
• Baidu vs. Google: Navigating the SEO landscape in 2024 (Michael Bonfils, Search Engine Land) — Google taktiklerinin neden doğrudan Baidu’ya aktarılamayacağına ilişkin bir ajans kurucusunun görüşü.
• The Modern Guide To Robots.txt (Abby Hamilton, Search Engine Journal) — Baiduspider’ın crawl-delay yönergesine uymadığını gösteren tarayıcı karşılaştırma tablosu.
• A guide to web crawlers: What you need to know (James Allen, Search Engine Land) — Baiduspider’ın daha geniş tarayıcı ekosistemindeki yeri.
• Understanding Baidu Spiders, User Agents & robots.txt (Jademond Digital) — Baidu tarayıcı varyantları ve robots.txt işleyişi üzerine ayrıntılı uygulayıcı incelemesi.
• Baidu MIP (glossary) (Jademond Digital) — MIP’in kullanımdan kaldırılma tarihlerinin kaynağı (Cache Haziran 2020’de aşamalı olarak kaldırıldı; tam hizmet Eylül 2022’nin sonlarında durduruldu).

Değişiklik günlüğü