Помощ за robots.txt

[Пеньо Иванов]

Здравейте,някой може ли да ми помогне с правилното писане на файла robots.txt

Сайта ми е teenproblems.eu , и ако може да се посещава целия сайт от ботовете ще бъде добре.

Ако някой може да даде готов код,ще му бъда много благодарен !!!

 

[mobilio]

От: Помощ за robots.txt

# For domain: http://blog.mysite.com

# All robots will spider the domain
User-agent: *
Disallow:


Ето ти правилния код за целта

 

[Пеньо Иванов]

От: Помощ за robots.txt

mobilio,така ще стане ли ?

# robots.txt generated at mcanerin.com
User-agent: Googlebot
Disallow:
User-agent: googlebot-image
Disallow:
User-agent: googlebot-mobile
Disallow:
User-agent: MSNBot
Disallow:
User-agent: Slurp
Disallow:
User-agent: Teoma
Disallow:
User-agent: twiceler
Disallow:
User-agent: Gigabot
Disallow:
User-agent: Scrubby
Disallow:
User-agent: Robozilla
Disallow:
User-agent: Nutch
Disallow:
User-agent: ia_archiver
Disallow:
User-agent: baiduspider
Disallow:
User-agent: naverbot
Disallow:
User-agent: yeti
Disallow:
User-agent: yahoo-mmcrawler
Disallow:
User-agent: psbot
Disallow:
User-agent: asterias
Disallow:
User-agent: yahoo-blogs/v3.9
Disallow:
User-agent: *
Disallow:
Disallow: /cgi-bin/
Sitemap: teenproblems.eu/index.php?action=kitsitemap

 

[Sky]

От: Помощ за robots.txt

Раздалечи малко рекламите да изядеш бана

 

[Пеньо Иванов]

От: Помощ за robots.txt

нищо не се опитвам да рекламирам,просто искам помощ

 

[kamentk]

От: Помощ за robots.txt

Това което ти е дал мобилио е най-удачно. Ползвай си него. Ако искаш да се рекламираш си ползвай подписа...

 

[Sky]

От: Помощ за robots.txt

нищо не се опитвам да рекламирам,просто искам помощ

Имах предвид рекламите в сайта ти, банера на адсенс е залепен за друг банер