Раньше такого гемора с индексацией не было — поставил пару простых страниц, и гугл сам находил. Сейчас же надо и robots.txt, и sitemap по пять раз проверять, а иногда помогает только полная перезаливка сайта. Видимо, движки и алгоритмы забугорные сильно всё усложнили.