Защо Google игнорира robots.txt ?
Matt Cutts от Google Webspam Team отговаря на въпроса защо Google игнорира robots.txt и индексира съдържание в URL, който Google Bot би трябвало да не може да посети
и препоръчва да внимаваме и винаги да слагаme noindex meta tag за да предотвратим нежеланата поява в търсачката на службни или други страници, които не искаме да бъдат достъпни за външни потребители. Ако това вече се е случило можем да използваме URL removal tool
Надявам се в следващо видео да обясни и защо Google Bot игнорира noindex meta tag :-)
Още по темата- Защо SEO-тата стават рано ?
- Отговор : Защото трябва да прочетат какво е казал Matt Cutts през нощта :-) Лафове по случай ранното ставане на...
- Platinum SEO plugin за wordpress
- Малко случайно снощи се натъкнах на Platinum SEO plugin за wordpress. Както повечето блогъри, досега използвах All in One SEO...
- Защо обичам Matt Cutts
- Обичам Matt Cutts. Готин е! Свежарка е! И като каже нещо ВИНАГИ става обратното :-) Наред с продължаващите дзверски експерименти...
If you enjoyed this post, please consider to leave a comment or subscribe to the feed and get future articles delivered to your feed reader.
Огнян Младенов 
Или с други думи Мат отново говори глупости, опитвайки се да замаже защо Google прави каквото си иска без да се съобразява с каквото и да било :)
Нещо не ми звучи това обяснение… То хубаво да ползвам URL removal tool – излиза че ще работи до следващия път когато обиколи сайтовете с линкове към мен. Съмнява ме removal да е нещо вечно макар че не съм го тествала… А за noindex – нека чуем разяснението на майстора :-)
И от кога е това игнориране :)
Озадачих се, защото тук http://www.facebook.com/l/ced0e;www.google.com/intl/bg/webmasters/docs/faq.html дават по-други обяснения.
Много внимавайте с тоя роботс. Да ти кажа – имам големи проблеми с оня сайт за велосипедите дето тествахме последния път. Появи се, после замина на позиция 100+ (от трета преди това). Сега е на 7-8 място – цял месец след това. Доволен съм че това поне оправи проблема с нашия сайт.
Matt Cutts срещу Google :-)
Google яко започват да вършат глупости и да се опитват да мислят вместо всички… мислят вместо юзерите си им дават резултати, каквито те са си решили, че юзерите искат. Сега виждам, че си решават и някакви неща, пренебрегвайки собствениците на сайтове…