Back to Question Center
0

Robots.txt kullanarak web sitemi arama motorlarından nasıl gizleyebilirim? [çoğalt] - Semalt

1 answers:

Olası çoğaltma:
Alanlar tarafından reddedilen robotlar halen arama sonuçlarında listeleniyor

Web sitemizi tüm arama motorlarından gizlemek istiyorum, çünkü robotlar yazıyorum. o robotlarda txt Source - venta de pulseras de hilo rojo. txt kod yazıyorum

     Kullanıcı acentesi: *
İzin Verme: /    

Yine de web sitemin neden çalıştırılacağını biliyor muydunuz?

February 8, 2018

Her ne kadar robotlar. txt dosyası standart sitenizin dizine eklenmesini istediğiniz hangi alanlarda arama motorlarına işaret etmenizin yolu takip edilmeniz olmaz.

Büyük oyuncular durumunda, Google, Yahoo, Bing, vs., kuralları takip ediyorlar. ancak küçük oyuncuların bazıları olmayabilir ve böylece dizinlerinde görünebilirler.

Ayrıca, eğer senin robotlar. txt değişikliği yeni Bir arama motorunun sitenizi dizinden temizlemesi zaman alabilir.