Re: 2008 YOUTUBE HALLOWEEN KOSTÜM YARIŞMASI !!!

Google tarafından dizine eklenen benzer bir URL’im var

https://example.com/companies/company?utm_source=xxx

Ve bu çıktı:

A description for this result is not available because of this site's robots.txt.

İşte robots.txt

User-agent: * Disallow: / Disallow: /static/* Disallow: /templates/* Disallow: /translations/* Sitemap: https://example.com/sitemap.xml 

İki sorum var. Bu tür bir URL dizine eklenmeli mi? Öyleyse, açıklamayla ilgili bu mesajı nasıl kaldırabilirim?

  • 1 Bu sizin sorununuz değil, ancak * her şeyin sonundan Disallow kurallar. İzin verme kurallarının tümü "şununla başlar" kurallarıdır, bu nedenle yıldıza gerek yoktur. Yalnızca birkaç tarayıcı (Googlebot gibi) joker karakterleri anlar. Diğer tarayıcılar, içinde gerçek bir yıldız olan "/ static / * / foo" gibi şeyleri arayacaktır.
  • "Bu tür bir URL dizine eklenmeli mi?" - Bu sana sormamız gereken bir soru değil mi ?! Kim yarattı senin robots.txt dosya olmaması gerektiğini düşünüyor gibiydi.

Bu satırı kaldır

Disallow: / 

Ve gitmekte iyisin.

User-agent: * Disallow: / 

Burada *, Googlebot, BingBot, YandexBot dahil olmak üzere tüm kibar botların robots.txt kurallarınıza uyacağı ve / anlam tüm dizin taranmakla sınırlıdır.

Sadece bu kuralı kullanmalısınız.

User-agent: * Disallow: /static/* Disallow: /templates/* Disallow: /translations/* Sitemap: https://example.com/sitemap.xml 

Bu robots.txt, tüm kibar botlara statik, şablonlar ve çeviriler klasöründeki tüm dosyaları taramamasını söyler. Yine, site haritanız bu URL'leri içeriyorsa

https://example.com/static/some-javscript.js https://example.com/static/some-photos.png https://example.com/templates/some/index.html https://example.com/templates/translations/de/index.html 

Ardından, taranmasını engellediğiniz için Google bu satırı arama sonuçlarında göstermeye devam edecektir, bu nedenle robots.txt kavramını anlayın, anlaşılması hiç de zor değil.

  • Teşekkürler. Doğru anlarsam, utm_source'tan bağlantıları indekslemek iyi bir uygulamadır?
  • Evet, tamamıyla sorun değil, Google yakında bu parametreleri otomatik olarak keşfedebilir ve sizi arama konsolu mülkünüzde rapor edebilir. UTM parametresi yaygındır ve Google bunu otomatik olarak halleder.

Sizin için çalışmış: Charles Robertson | bize ister?