Live.com игнорирует robots.txt Google — Миллионы Adwords ссылок в индексе.

Одним из самых важных принципов работы поисковиков, является соблюдение правил прописанных в robots.txt. К примеру, если индексация папок или страниц запрещена, то они не должны учитываться. В принципе поисковик от Microsoft Live умеет читать robots.txt, однако как назло забыл учесть этот самый robots.txt у конкурента Google. И миллионы платных Adwords ссылок оказались в индексе у Microsoft.