Robots.txt Generator

SEO tools from Lucky Brand

Robots.txt Generator


Default - All Robots are:  
    
Crawl-Delay:
    
Sitemap: (leave blank if you don't have) 
     
Search Robots: Google
  Google Image
  Google Mobile
  MSN Search
  Yahoo
  Yahoo MM
  Yahoo Blogs
  Ask/Teoma
  GigaBlast
  DMOZ Checker
  Nutch
  Alexa/Wayback
  Baidu
  Naver
  MSN PicSearch
   
Restricted Directories: The path is relative to root and must contain a trailing slash "/"
 
 
 
 
 
 
   



Now, Create 'robots.txt' file at your root directory. Copy above text and paste into the text file.


About Robots.txt Generator

Vytvořte svůj vlastní soubor robots.txt s naším Robots.txt Generator!

Náš Robots.txt Generator je nezbytným nástrojem pro webové správce a majitele stránek, kteří chtějí plně ovládat, jakým způsobem vyhledávací roboti a crawleři procházejí jejich webové stránky. S naším generátorem můžete jednoduše vytvořit robots.txt soubor, který definuje, které části vašich stránek mají být pro vyhledávací roboty přístupné a které ne.

Hlavní funkce našeho Robots.txt Generatoru zahrnují:

  • Možnost povolit nebo zakázat vyhledávací roboty od různých poskytovatelů, včetně Google, MSN Search, Yahoo a dalších.
  • Nastavení zpoždění procházení, abyste mohli ovládat rychlost, s jakou roboti procházejí vaše stránky.
  • Možnost definovat odkaz na soubor sitemap.xml, což pomáhá vyhledávacím robotům lépe indexovat vaše stránky.
  • Možnost omezit určité adresáře, jako je například defaultně nastavený /cgi-bin/.

S naším Robots.txt Generatorem máte plnou kontrolu nad tím, jak vyhledávací roboti procházejí vaše stránky, což může pomoci zlepšit indexaci a viditelnost vašeho obsahu na internetu. Začněte používat náš nástroj ještě dnes a optimalizujte své SEO strategie!