Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат сайта

[galinstefanov]

Искам да забраня на всички останали да виждат линковете ми като аз ще си ги гледам в WMT. Освен посочените в заглавието ме вълнуват и други такива сайтове за беклинкс. Как може да стане това. Рових доста и попаднах на кодове с които се забранява през htaccess, но тъй като това е деликатна работа, искам някой ако има готов код да ми пусне в темата, че да не взема да блокирам ботовете на гугъл, че ще стане една...

Благодаря предварително!

 

[snux]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

В robot.txt

To allow a single robot

User-agent: Google
Disallow:

User-agent: *
Disallow: /

 

[galinstefanov]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Това забранява всички останали освен на Гугълския бот да си обхожда нали?

 

[snux]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Така е описано Виж тук има даже онлайн генератор, може да ти свърши работа

Това забранява всички останали освен на Гугълския бот да си обхожда нали?

 

[galinstefanov]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Благодаря ти много

 

[coolice]

Re: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

хъм не така че забраняваш бинг бота, и яхо бота, и яндекс, лесно може да губиш един 700 - 1000 или повече потребители (истинска история за бг сайт) на месец ако си ги купуваш тези потребители през ппц да наваксаш ще ти струва поне 50 долара

може да забраниш ahrefs с htaccess но това е да не те обхожда твоя сайт някой може да плати да види къде ahrefs e срещал твой линк по други сайтове

majestic seo работи на принципа че ти сам си споделяш данните от уебмастъртулса и си виждаш само твойте ако си с безплатен акаунт а тези с платените могат да ти ги гледат, трябва да не го ползваш този инструмент и да споделиш всичко закачено (незнам дали няма да си останат и някакви данни след това)

опрен сайт експлоръра не съм прочувал от къде взима линковете

 

[galinstefanov]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Да така е, няма как да успея да огранича всичко. Най-вероятно ще забраня на ahrefs i majestic + opensiteexplorer а останалите каквото такова.

 

[Даниел Маринов]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Предполагам, както си видял зор от ahrefs, с времето ще се появяват главните вредители. Не пробвай генерално със забраните, да не да стане беля..не мисля, че си струва. (y)

 

[galinstefanov]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Мхм обмислям все още, пред дилема съм, от няколко часа гледам в интернет какво пишат хората... Иначе благодаря, че се включвате. Ще се радвам ако има още колеги, които ще изкажат мнение

 

[agatha65]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Виж това
http://www.projecthoneypot.org/
Аз четох доста по въпроса заради един проблем с PicScout и май това е най-комплексното решение.

 

[galinstefanov]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

Благодаря, ще го погледна! +1

 

[s1yf0x]

От: Как да забраня на ботовете на Ahrefs, MajesticSEO, OpenSiteExplorer да обхождат с

RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot/3\.1 [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot/3\.0 [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot/2\.0 [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot/1\.0 [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^AhrefsBot [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla/5\.0\ \(compatible;\ AhrefsBot/3\.[1];\ \+http://ahrefs\.com/robot/) [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla/5\.0\ \(compatible;\ AhrefsBot/3\.[0];\ \+http://ahrefs\.com/robot/) [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla/5\.0\ \(compatible;\ AhrefsBot/2\.[0];\ \+http://ahrefs\.com/robot/) [NC,OR]
RewriteCond %{HTTP_USER_AGENT} ^Mozilla/5\.0\ \(compatible;\ AhrefsBot/1\.[0];\ \+http://ahrefs\.com/robot/) [NC]
RewriteRule ^(.*)$ - [F]