Для анализа индексируемости (не то что в выдаче, а то что скушалось) сваял скриптец, с помощью которого можно чуть глубже поанализировать ситуацию с экспериментальными доменами – а точнее меня интересует количество съеденных уникальных страниц с каждого домена каждым поисковым роботом. Собственно – скриншотик в студию