robots.txt
Në shqip përdoret i njëjti emër.
ShpjegimiSQ
robots.txt është një skedar i vogël në rrënjën e sajtit që u tregon robotëve të motorëve të kërkimit (si ai i Google-it) cilat faqe mund t'i vizitojnë dhe ku ndodhet sitemap-i.
EnglishEN
robots.txt is a small file at the root of a site that tells search-engine robots (like Google's) which pages they may visit and where the sitemap is.
Si ta mendosh
Si tabela në derën e klasës: „Hyrja e lirë“ ose „Mos hyni — provim“.
Lexoje në anglisht
Like a sign on a classroom door: “Come in” or “Do not enter — exam in progress”.
Shembull koditext
User-agent: *
Allow: /
Sitemap: https://fjalori.dev/sitemap.xml