Сервисы анализа конкурентов и автоматизации контекстной рекламы

Поскольку рекламой приходится заниматься эпизодически, то многие из них я давно посмотрел... Но пока продолжаю придерживаться принципа "Сначала разберись с первоисточником". И наступает тот самый момент, когда кажется, что с первоисточниками все ясно... Потому здесь продолжаем собирать ссылки на сервисы. Как люди научились испоьзовать API Гуглов-Янлексов? Здесь есть часть статьис обзором функционала Elama, K50, Aori, SeoPult, Garpun, ApiShops, R-брокер, Alytics, AdScore

Что индексирует MegaIndex? Видео с создателем

Чего-то я не понимаю? Страницы всех сайтов (в Москве) проиндексировать можно, далее можно получить таблицы с координатой каждого слова.
Потом нужно убрать из таблицы все "лишние слова" и оставить только семантическое ядро. Потом из этого ядра можно наплодить огромное количество поисковых запросов.
А после этого замучить Яндекс этими вариантами (запросов) и сохранить и проанализировать каждую выдачу.
Дороговато однако. Но, если учесть, что количество запросов к созданной базе ничтожно (по сранению с индексированием), то решаемо.
Так чего я не понисаю? Я полагаю, что должен быть алгоритм сокращения числа возможных ключевых фраз, но не понимаю, как он должен работать.
Куда проще не индексировать самим, а накапливать данные с wordstat... но тогда это не Mega и даже не Index

Смотрим видео "Повышение эффективности ранжирования в Веб-поиске"

Это вторая лекция курса Лекция и тесты в НОУ "ИНТУИТ Веб-поиск с использованием информации о поведении пользователя: выявление намерений пользователя, использование данных о кликах и переходах в схеме ранжирования. Звучит красиво, но здесь автор рассмотривает модель формирования векторного пространства для отбора страниц "похожих" на образцовые... Математики больше, чем эвристики (лекцию не досмотрел). Здесь видео и подстрочный тарабарский перевод с YouTube.

Ищем Модели поведения пользователей интернет в видео от Emory University

Смотрю первую обзорную лекцию Emory University "Неявная обратная связь и моделирование пользователя в Веб-поиске" В аннотации к видео написано Лекция и тесты в НОУ "ИНТУИТ Обзор основных моделей, традиционные модели пользователя, оценка релевантности и предпочтений на основе данных о кликах пользователей. Казалось бы, именно то, что нужно... Да, но сами модели поведения пользователей (далее - "эвристику") я нашел только в этой лекции. По мере прослушивания я пытался найти именно эвристику, потому здесь ссылки на статьи об исследованиях (Google) Query classification, Eye Tracking in 2014: How Users View and Interact with Today's Google SERPs? потом идея о Mouse tracking, и, наконец попытки создания эвристики на основе Теории деятельности (Лурия) и когнитивных карт...