robots.txt generatoru

robots.txt axtarış botlarına saytın hansı bölmələrini taramamağı bildirir. Bu generator hazır şablonlar və bot qrupları ilə faylı qurur, ümumi səhvlər barədə xəbərdarlıq edir. Hazır faylı yükləyib saytın kök qovluğuna yerləşdirin.

Necə istifadə etməli

  1. Hazır şablonu seçin: hamısına icazə, WordPress, e-ticarət və s.
  2. Lazım olsa, yeni bot qrupu əlavə edin və yolları redaktə edin.
  3. Sitemap linkini yazın.
  4. Faylı yükləyin və saytın kökünə /robots.txt kimi yerləşdirin.

Suallar

robots.txt səhifəni Google-dan gizlədirmi?
Tam yox. O, yalnız taramanı məhdudlaşdırır; bağlanmış səhifə linklər vasitəsilə yenə indeksə düşə bilər. Gizlətmək üçün noindex istifadə edin.
AI botlarını bloklamaq nəyə təsir edir?
Qaydaya əməl edən AI botları məzmununuzu taramır. Bu, Google axtarışında görünməyə təsir etmir, çünki Googlebot ayrı botdur.
Crawl-delay lazımdırmı?
Əksər saytlar üçün yox. Google bu direktivi nəzərə almır; Bing kimi bəzi sistemlər isə nəzərə alır.

Digər alətlər

Pulsuz alət

UTM link qurucusu

Kampaniya linklərinə UTM parametrləri əlavə edin.

Aç
Pulsuz alət

ROAS kalkulyatoru

ROAS, ROI, CPA və mənfəəti bir anda hesablayın.

Aç