Что индексирует MegaIndex? Видео с создателем

Чего-то я не понимаю? Страницы всех сайтов (в Москве) проиндексировать можно, далее можно получить таблицы с координатой каждого слова.
Потом нужно убрать из таблицы все "лишние слова" и оставить только семантическое ядро. Потом из этого ядра можно наплодить огромное количество поисковых запросов.
А после этого замучить Яндекс этими вариантами (запросов) и сохранить и проанализировать каждую выдачу.
Дороговато однако. Но, если учесть, что количество запросов к созданной базе ничтожно (по сранению с индексированием), то решаемо.
Так чего я не понисаю? Я полагаю, что должен быть алгоритм сокращения числа возможных ключевых фраз, но не понимаю, как он должен работать.
Куда проще не индексировать самим, а накапливать данные с wordstat... но тогда это не Mega и даже не Index