Как собрать частотность в кей коллектор

Оглавление:

Новые возможности версии 2.7: сбор статистики Yandex.Wordstat через Yandex.Direct

На текущий момент Key Collector предлагает 4 возможности сбора статистики Yandex.Wordstat:

  1. напрямую из wordstat.yandex.ru (классический режим; поддерживаются регионы; пакетный сбор фраз и частотностей);
  2. режим был деактивирован по техническим причинам;
  3. режим был деактивирован по техническим причинам;
  4. через Yandex.Direct (поддерживаются регионы; только сбор частотностей)

Напомним кратко о каждом режиме.

Первый классический режим является режимом по умолчанию. Он позволяет производить как пакетный сбор фраз из левой и правой колонок, так и уточнять все виды частотностей для имеющихся в таблице фраз. При этом можно задать настройки региональности, если потребуется.

Минусом данного режима являются технические ограничение, которые накладывает сам сервис Yandex.Wordstat:

  • При проверке частотностей необходимо формировать отдельные запросы для каждой проверяемой фразы. За счет этого увеличивается время сбора информации.
  • При большом количестве запросов могут понадобиться дополнительные прокси-серверы, т.к. сервис может наложить санкции в виде вечной капчи или бана (также можно попробовать сменить IP-адрес, сбросив подключение к Интернету, если IP-адрес выдается провайдером динамически).

Внимание: на сегодняшний день для съема частотностей рекомендуется использовать скоростной съем частотностей через Yandex.Direct (4-й режим). Данные будут полностью совпадать с данными Yandex.Wordstat, но процесс съема происходит в десятки раз быстрее и безопаснее.

Что касается съема фраз из левой и правой колонок, то это можно сделать несколькими способами:

  • напрямую или через прокси-серверы, используя 1-й режим (рекомендуется);
  • напрямую или через дорогие выделенные прокси-серверы, используя 2-й режим (если в обычном Yandex.Wordstat Ваш IP и Ваши дорогие выделенные прокси-серверы уже забанили).

Ранее мы публиковали 2 статьи по настройке работы с большим количеством публичных прокси-серверов низкого качества (первая статья, вторая статья). В настоящий момент данные настройки могут не принести ожидаемого эффекта, поэтому следуйте указанным выше рекомендациям.

Режим был деактивирован по техническим причинам.

Режим был деактивирован по техническим причинам.

Четвертый режим был введен в последней версии программы. Он позволяет быстро определять частотность для имеющихся в таблице фраз. В отличие от третьего режима сбора через API данный режим поддерживает настройки региональности и абсолютно бесплатен. В этом случае программа использует интерфейс Yandex.Direct для получения необходимых данных, за счет чего достигается огромная скорость съема данных (до 1000 фраз в минуту для 1 потока).

Для того, чтобы получить частотности Yandex.Wordstat в этом режиме, сперва необходимо задать рабочие аккаунты Yandex.Direct в «Настройках — Парсинг — Yandex.Direct».

При желании Вы можете указать несколько аккаунтов. Количество потоков сбора будет ограничено количеством добавленных аккаунтов (но Вы можете задать несколько аккаунтов в пересчете на 1 поток, например, 3 аккаунта и 2 потока). Не стоит указыть больше 10-20 потоков сбора Yandex.Direct, т.к. это может негативно отразиться на производительности. Также не указывайте слишком много аккаунтов без явной на то необходимости, т.к. процесс авторизации в них займет время.

При работе с Yandex.Direct программа выполняет сложную процедуру авторизации в аккаунтах. Именно поэтому не рекомендуется работать с Yandex.Direct через плохие прокси-серверы (рекомендуется работать либо через хорошие прокси-серверы, либо без них вообще). Учитывая эту особенность, мы снабдили окно настроек двумя опциями:

  • не использовать прокси-серверы при авторизации в аккаунтах;
  • не использовать прокси-серверы при выполнении запросов к Yandex.Direct.

На этом этапе основная настройка закончена. Теперь можно перейти к исследуемому проекту и нажать кнопку сбора статистики Yandex.Direct.

Перед Вами откроется окно запуска процесса cъема статистики. Задайте регион, если это требуется, выберите интересующий Вас режим сбора статистики Yandex.Direct (от него будет зависеть цена клика, CTR, но не будет зависеть частотность), выберите формат запроса.

Внимание: регионы Yandex.Direct и регионы Yandex.Wordstat — независимые. Т.к. в данном случае программа будет обращаться непосредственно к Yandex.Direct, то и учитываться будут те регионы, которые установлены именно в этом окне, а не в регионах Yandex.Wordstat.

Т.к. целью нашей задачи является съем частотностей Yandex.Wordstat, то необходимо активировать соответствующую опцию в окне запуска — «Целью запуска сбора статистики является заполение колонок частотности Yandex.Wordstat». В этом случае программа будет выполнять следующие действия:

  • Частотности для фраз будут записываться в колонки частотностей Yandex.Wordstat. В зависимости от выбранного Вами формата запроса (слово, «слово» или «!слово») информация будет сохраняться в колонки базовой, » » или «!» частотности Yandex.Wordstat соответственно.
  • Т.к. Вы дали программе понять, что сейчас Вас интересует именно сбор частотностей Yandex.Wordstat, а не остальной статистики Yandex.Direct, то программа будет ставить в очередь на обработку фразы, анализируя наличие данных статистики именно в колонках частотности Yandex.Wordstat. Т.е. если Вы используете режим сбора «Строки с неполученными данными», то при запуске процесса на обработку поступят фразы, у которых отсутствует статистика в колонках частотности Yandex.Wordstat, а не в колонках статистики Yandex.Direct.

После окончания настройки параметров съема статистики и нажатия на кнопку «Получить данные» программа приступит к сбору статистики.

Особенности работы четвертого режима

Огромная производительность данного режима достигается за счет того, что на анализ фразы отправляются в пачках, а не поштучно.

К сожалению, с этим связано несколько неприятных особенностей.

  • Yandex.Direct может «склеивать» синтаксически похожие фразы в одну. Например, фразы «пластиковые окна» и «окна пластиковые» будут склеены. В результате программа не сможет записать статистику для этих фраз, потому что в отчете сервиса присутсвует только статистика для их сгруппированного варианта, а не для каждой фразы в отдельности.
  • Yandex.Direct принимает фразы, состоящие не более чем из 7 слов, поэтому длинные НЧ фразы проанализировать не получится.
  • Yandex.Direct крайне придирчив к любым символам, отличным от букв русского и английского алфавита и цифр, поэтому фразы, содержащие знаки препинания и другие спец. символы, будут проигнорированы.
  • Если в пачке фраз содержится хотя бы одна фраза, которая не удовлетворяет условиям Yandex.Direct, то вся пачка фраз отвергается с ошибкой. К сожалению, программа не всегда сможет на 100% верно выполнять предварительную фильтрацию, т.к. Yandex.Direct при проверке фраз может использовать множество внутренних условий, о существовании которых нам пока не известно, включая полный синтаксический анализ фразы (Яндекс отлично знает русский язык, и может это делать крайне эффективно).

Во всех перечисленных случаях непрошедшие проверку или склееные фразы будут оставаться без статистики. Если такие имеются, то Вы можете просто повторно запустить сбор статистики в режиме сбора «Строки с неполученными данными».

В этом случае программа отправит на анализ лишь те фразы, для которых отсутствует статистика. Если после одного или нескольких повторных запусков у Вас остались непроверенные фразы (например, фразы со спец. символами или длинные НЧ фразы, состоящие более чем из 7 слов), то Вы можете дособирать для них частотность в классическом режиме.

www.key-collector.ru

Инструкция по настройке Key Collector для эффективного парсинга

Key Collector — незаменимый инструмент при сборе семантического ядра для сайта или контекстной рекламы. Но прежде чем запускать парсинг, программу необходимо грамотно настроить. Это позволит провести сбор фраз максимально быстро и с наименьшими затратами на антикапчу.

В этой статье мы пройдемся по основным настройкам программы, подготовим инструмент, а уже саму методику сбора, чистки и расширения семантики будем рассматривать в других статьях. Эта статья открывает цикл материалов, посвященных работе с Key Collector.

Весь цикл статей:

  1. Настройка Key Collector для сбора (эта статья)
  2. Методика сбора (парсинга) фраз в Key Collector.
  3. Эффективная чистка в Key Collector.
  4. Принципы группировки (кластеризации) фраз в Key Collector (в работе, ссылка появится позже)
  5. Учет, фильтры и лайфхаки при работе в Key Collector (в работе, ссылка появится позже)

Установка программы

Если вы еще не знакомы с программой Key Collector, то ее необходимо скачать здесь. Там даны указания по тому, каким образом осуществляется покупка и установка программы. После того, как программа установлена и активирована можно переходить к следующему шагу.

Важно! Key Collector — программа, которая работает под Windows и на компьютеры Mac (Macbook, Macbook Air) с OSx не установится. Обойти это ограничение можно установкой виртуальной машины Windows, к примеру посредством утилиты Parallels Desktop.

Прокси и аккаунты Яндекс.Директ

Для работы с Key Collector мы настоятельно рекомендуем приобрести (взять в аренду на неделю или на месяц) как минимум 1 прокси-сервер. Это необходимо для того, чтобы обезопасить свой основной IP адрес от возможных блокировок, которые могут возникнуть в ходе работы Key Collector со статистическими источниками типа Яндекс.Вордстат и Яндекс.Директ.

Одного прокси будет вполне достаточно, чтобы потренироваться и понять принцип работы программы. Хорошие, индивидуальные прокси предоставляет сайт proxy-sale.com. Берем те, что для работы в Key Collector.

После покупки сервис высылает вам на почту учетные данные прокси и свежий аккаунт Яндекс.Директа, который также нам потребуется. В дальнейшем, при необходимости количество прокси можно будет увеличить, просто докупив (арендовав) столько сколько нужно.

Сейчас нам нужно просто понять принцип настройки Key Collector, а дальнейшую докрутку можно будет сделать потом.

Переходим в настройки программы — нажимаем на иконку «шестеренки» в панели управления.

Фото 1: Меню настроек Key Collector.

Учетки для Yandex.Direct

Переходим в раздел настроек “Yandex.Direct” (Парсинг -> Yandex.Direct).

Вводим необходимые данные: логин и пароль от аккаунта Яндекс.Директ, IP прокси, порт, логин и пароль. Эти данные должны быть в письме, которое вы получили от proxy-sale. Вы можете добавить прокси вручную построчно или добавить из буфера обмена списком. Обратите внимание на формат, который требует Key Collector при вводе данных списком. Будьте внимательны и не перепутайте логин и пароль от учетки Яндекс.Директ с логином и паролем прокси сервера.

Фото 2: На первом шаге мы только вносим данные учетки и прокси, настройки будем делать потом. Это уменьшит количество ошибок и возможных проблем.

Сейчас, мы внесли данные и, тем самым, привязали учетку Яндекс.Директ к прокси серверу. Теперь все запросы в Yandex.Wordstat, Yandex.Direct или поисковую выдачу будут идти с одного и того же IP адреса (IP адрес прокси сервера) и с одной и той же учетки.

Такая привязка значительно повышает стабильность парсинга, уменьшает количество показов капчи (проверки на робота), что в итоге приводит к более быстрому сбору данных и уменьшению общего времени, затрачиваемого на сбор.

После того, как данные внесены, нам необходимо установить количество потоков в блоке 2 равным количеству прокси, которые мы приобрели. В нашем случае устанавливаем это значение равным 1 и переходим к следующему этапу.

Вкладка «Сеть»

Сюда мы должны добавить наш(и) прокси и установить ряд дополнительных настроек.

Фото 3: Основные зоны интереса во вкладке «Сеть».

Первым делом добавляем прокси в таблицу №1, отмеченную на скриншоте . Можно внести построчно, вручную или нажать кнопку «Добавить из буфера» и внести списком. Указываем IP сервера, порт, логин и пароль прокси сервера (не учетки Яндекс.Директа!). Берем эти данные из письма, которое прислал нам сервис, в котором мы приобрели прокси.

Обратите внимание на формат, который требует Key Collector, при внесении прокси списком! Если вы часто меняете прокси и работаете с большим объемом данных, то мы рекомендуем сделать формулу в Google Spreadsheets, которая бы приводила данные в нужный для Key Collector формат.

Основные настройки (2)

  1. Использовать прокси серверы. Включаем данную опцию поставив галочку, HTTP остается без изменений. Для простоты, мы будем использовать HTTP прокси. SOCKS протокол требует большей сноровки и опыта и в некоторых случаях работает с ошибками, что может привести к невозможности продолжения работы.
  2. Деактивация прокси, не прошедших проверку. Включаем, это мера предосторожности в случае, если возникли какие-то проблемы с прокси. После 360 секунд системой будет проведена повторная попытка подключения.

Проверка прокси (3)

Выставляем количество количество потоков равным количеству прокси. Т.е. если у нас 1 прокси, то ставим 1.

После этого мы отмечаем наши прокси галочкой (активируем их), чтобы каждая строка в блоке 1 была выделена зеленым цветом и запускаем проверки (одну за другой, по очереди):

  1. Проверить в ПС Yandex
  2. Проверить в Yandex.Wordstat

Проверки нужны для того, чтобы понять все ли в порядке с настройками, учеткой Яндекс.Директ и прокси сервером(ами). Если Key Collector заблокировал прокси (пометил строку красным цветом) в блоке 1 после проверки через ПС Яндекс, то проблема в настройке самого прокси сервера. Возможно, неверно введен логин, пароль или порт прокси сервера. Если же прокси не прошел проверку через Yandex.Wordstat, то проблема уже в настройках учетки Яндекс.Директ.

Последовательная проверка позволяет быстро локализовать ошибку и оперативно исправить причину.

Для автономной работы программы нам необходимо будет зарегистрироваться в сервисах, которые предоставляют услуги “Антикапчи”. Бюджет на данные сервисы нужен небольшой, однако это позволит использовать КК в автономной режиме. Ниже представлен перечень поддерживаемых Кей Коллектором сервисов:

Фото 4: Перечень сервисов, которые поддерживаются программой и предоставляют услуги по разгадыванию капчи.

Выбираем понравившийся сервис и регистрируемся в нем. Вносим 100-500р на баланс, получаем API ключ, который нужно будет внести в настройки ниже.

Фото 5: Настройки антикапчи (автоматическое распознавание captcha).

В ходе парсинга, статистические источники показывают пользователю капчу (проверка на робота), чтобы убедиться, что их использует человек и чтобы ограничить автоматический парсинг.

Во вкладке Настройки -> Антикапча -> Автораспознавание необходимо выбрать сервис, который вы решили использовать и ввести предоставленный вам ключ. После ввода ключа следует перезагрузить программу, чтобы Key Collector активировал ключ.

Также, вы можете ввести ограничение капч на один сеанс, то есть если в ходе сбора данных количество капч будет превышать указанный параметр — антикапча перестает работать. После перезапуска Кей Коллектора счетчик сбрасывается. Мы рекомендуем указать значение параметра равным 5000.

Настройки парсинга

Первым в списке настроек программы находится большой раздел «Парсинг», который отвечает за настройку сбора данных из разных источников.

Общие настройки

Настраиваем раздел “Общие” следующим образом:

Фото 6: Основные настройки парсинга.

Основные комментарии к настройке:

  1. Добавлять в таблицу фразы, содержащие не более N слов. Как показывает практика, оптимальным количеством слов является 10. Именно с этим числом мы можем получить как высокочастотные, так и среднечастотные и низкочастотные запросы. Хвост запроса мы терять не хотим, однако и сбор пустых по частотности запросов нас тоже не интересует. 10 слов в запросе вполне отвечает данным требованиям.
  2. Количество повторных попыток загрузки страниц. В случае сбоя именно это количество повторных попыток сделает программа. Стандартное значение 30. Не меняем его, т.к. этого вполне достаточно для корректной работы программы.
  3. Таймаут ожидания ответа от сервиса. Время ожидания загрузки страниц из сервисов. Стандартная настройка в 30000 мс подойдет для проектов любого размера.
  4. Режим сбора. В данном пункте должно быть отмечено “Строки с неполученными данными” — для строк с отсутствующей информацией будут собираться данные в программе, это сократит время сбора, так как не будет повторных проверок уже заполненных данных.
  5. Фильтрация символов. В примере указан довольно большой перечень символов, который будет удаляться при парсинге. Нас не интересует экспрессивность выражения потребностей пользователя в поиске, а интересует сам смысл его запроса. В то же время, такие символы как “-” и “.” могут употребляться разными пользователями по-разному, например со знанием правил написания того или иного запроса и без. Чтобы привести все к единому виду, заменяем данные символы на пробел. Замена буквы ё на е так же является корректировкой различия между запросами пользователя. Нет разницы, поступил запрос в формате ёжик или ежик, так как они несут один семантический смысл. Поэтому для удобства приводим все фразы к единому виду по данному параметру.
  6. Приводить слова в нижний регистр. Также является удобной настройкой для приведения всех фраз к единому формату.

Наша конечная цель — получить список ключевых фраз в едином, понятном формате. Это упростит дальнейшую работу и облегчит процесс чистки и поиска дублей.

Yandex.Wordstat

Для сбора с Вордстата программа использует аккаунты, прописанные в настройках Яндекс.Директа (Настройки -> Парсинг -> Yandex.Direct), которые мы заполнили ранее.

Фото 7: Настройки парсинга Yandex.Wordstat.

Комментарии к настройке:

  1. “Глубина парсинга” и “Парсить страниц”. Глубина парсинга работает только для сбора ключевых фраз. Для глубины парсинга рекомендуемое значение 0. Если мы ставим значение отличное от 0, то Key Collector будет делать парсинг вложенных фраз (фраз, которые «приехали» в результате прошлой попытки сбора). Потенциально, такой подход может вылиться в непредсказуемое время на парсинг ключей, т.к. мы никогда не знаем какое количество фраз мы получим при сборе той или иной фразы. Стратегию парсинга мы будем более подробно рассматривать в других статьях. Пока, для оптимального результата ставим 0 для глубины парсинга и 40 для количества страниц.
  2. Добавлять в таблицу фразы с частотами от X до Y. Мы можем задать минимальную частоту фразы для сбора сразу на этапе парсинга. Однако диапазон лучше оставить максимальным, чтобы не упустить интересные формулировки и запросы. В последующем мы сможем избавиться от низкочастотных запросов в пару кликов.
  3. Не снимать частоты для фраз с базовой частотой равной или ниже чем N. Данная настройка позволяет нам экономить время сбора данных при настройке на 0, так как базовая частота 0 нас в общем то не интересует, это пустые фразы, по которым нет спроса.
  4. Автоматически записывать 0 в колонки частот “ “ и “!”, если базовая частота 0. Опять же экономия времени на проверку частотности, так как данные автоматически будут заполнены, мы не будем собирать для них указанные частоты.
  5. Маска запросов пользовательского формата. Выставляем значение “[!QUERY]”, таким образом мы автоматически проставим нужные операторы для запросов и получим максимально точные цифры.
  6. Задержки между запросами от X до Y. Как показывает практика, значение от 25000 до 30000 вполне уместно и является близким к естественному. При возникновении блокировок мы всегда сможем изменить данный параметр в большую сторону.
  7. Деактивация потоков. Количество потоков ставим равному количеству прокси серверов, которые мы настроили на прошлом этапе. Деактивацию потоков выставляем так, как указано на скриншоте. Система будет уменьшать кол-во потоков если по какой то причине прокси сервер выходит из строя, что нам и нужно.
  8. При использовании группировки по месяцам. В данном случае оптимально будет установить “последний год” для учета актуальных данных.
  9. Настройки режима “Собрать все виды частот”. Здесь вы можете настроить какие частоты надо собрать при использовании данного инструмента. Можно ничего не менять, т.к. в дальнейшем, при сборе мы всегда будем собирать частотности последовательно.

Фото 8: Можно задать какие именно частоты будут собираться при выборе опции «Собрать все виды частот».

Yandex.Direct

Google Adwords

Настройки источников Google Adwords как правило остаются стандартными, так как имеют ограничения, о которых нас предупреждает Кей Коллектор.

Фото 10: Настройки Google Adwords.

В целом, менять их нет необходимости. Использование точной частоты из Google Adwords когда-то использовалось для инструмента “Анализ неявных дублей”, так как точная частотность из Adwords учитывает порядок слов. На данный момент эту задачу решает сбор точной частотности по маске QUERY через Яндекс (так называемый оператор скобки [], учитывающий последовательность слов в фразе).

Rambler Adstat

Настройки для Rambler Adstat также оставить в стандартном режиме, так как данная система не используется в сборе данных. Подсказки из Rambler можно получить без регистрации и настройки аккаунтов. В целом, Rambler Adstat — устаревший инструмент и не содержит нужного объема семантики для того, чтобы было уместным тратить время на сбор данных из него. Об актуальных на сегодняшний день источниках можно прочитать в этой статье.

Фото 11: Настройки Rambler Adstat.

Поисковая выдача

Во вкладке “Поисковая выдача” меняем количество потоков в зависимости от количества прокси, отключаем использование основного IP адреса и переключаем режим деактивации потоков.

Блок настроек Yandex.XML игнорируем и не меняем там ничего. В нашей работе мы не будем пользоваться XML сервисом Яндекса, поэтому активировать его нет необходимости.

Фото 12: Настройки работы с поисковой выдачей Yandex.

Устанавливаем кол-во потоков и настройки деактивации одинаково для всех источников, с которыми мы собираемся работать: Yandex, Google, YouTube, Mail.ru.

Фото 13: Настройки работы с поисковой выдачей Google, YouTube, Mail.ru.

В разделе “Подсказки» проводим аналогичные настройки: выставляем количество потоков в зависимости от количества прокси, отключаем использование основного IP адреса и меняем режим деактивации потоков.

Фото 14: Настройки работы с поисковыми подсказками.

Mail.ru не используется напрямую в ходе парсинга как источник, однако проводим настройку аналогичную подсказкам и выдаче: количество потоков, их деактивация и ограничение использования основного IP адреса.

Фото 15: Настройки работы со статистикой Mail.ru.

Раздел “Прочее” включает в себя две настройки, которые можно оставить в стандартном положении. Мы будем использовать антикапчу, поэтому нам выгодно оставить все как есть и имитировать разгадывание капчи (разумеется через сервис антикапчи) с того же самого IP адреса, которому она была показана поисковой системой. Это благоприятно влияет на стабильность парсинга и уменьшает количество капч, которые показывают сервисы.

Фото 16: Прочие настройки Key Collector.

Итак, мы прошлись по основным настройкам Key Collector, подготовили инструмент для парсинга в автономном режиме. Первоначальная настройка инструмента действительно может занять немало времени, но сэкономит вам много времени в дальнейшем, т.к. настроенная подобным образом программа работает на автопилоте и не требует внимания и контроля. Ее можно установить на виртуальную машину и оставить на ночь, не переживая о том, что парсинг остановится по той или иной причине.

В следующих статьях мы рассмотрим стратегию парсинга ключей, которая дает полную семантику. Эта стратегия одинаково хорошо подходит как для сбора семантического ядра для сайта, так и для семантики под контекстную рекламу, например для Яндекс.Директ.

semyadro.pro

Как собрать частотность в кей коллектор

Если вы не знаете, с чего начать процесс настройки программы, то советуем вам обратить внимание на данный раздел. Здесь мы рассмотрим общие принципы настроек и покажем как их правильно применять в тех или иных ситуациях.

Первое, с чего следует начать настройку программы, это заглянуть на вкладку «Настройки — Парсинг — Общие». Здесь вы увидите настройки, касающиеся загрузки данных с собираемых систем, настройки режима сбора данных и фильтрации спец. символов и некоторые другие. По умолчанию опции выставлены в универсальные значения, и их можно в принципе и не менять, только если у вас нет каких-то необычных предпочтений или задач. Если же есть, то теперь вы знаете, где можно отключить автоматическое удаление нужных вам спец. символов или где увеличить таймаут (время) ожидания ответа от сервиса, если вы часто получаете в журнале событий ошибку «Время ожидания операции истекло» или «The operation has timed out».

Далее рассмотрим важный блок опций, который выставляется практически для каждой системы в отдельности, который касается скорости съема статистики. Этот блок состоит из следующих опций:

  • Задержки между запросами от . до . мс
  • Кол-во потоков
  • Использовать основной IP-адрес
  • При ошибках получения ответа от сервиса (таймаут ответа и т.п.) исключать прокси-сервер
  • Блок «Настройки деактивации потоков»

Практически все системы, которые вы будете снимать заинтересованы в том, чтобы вы своими действиями не создавали для них слишком большую нагрузку. В качестве защитного механизма они могут применять капчу или временную блокировку IP-адреса или аккаунта. Чтобы этого не происходило, нужно стараться не превышать условно выданный вам «лимит доверия». К сожалению, этот лимит для каждого выдается индивидуально, поэтому нельзя дать 100% безопасные настройки, которые подойдут всем, но соблюдение нескольких простых рекомендаций все же поможет вам снизить вероятность получения санкций со стороны систем.

Не ставьте слишком неестественно маленькие задержки между запросами для тех систем, которые особо тщательно следят за уровнем нагрузки: Yandex.Wordstat, поисковая выдача Яндекс, Google, Mail, поисковые подсказки Google, Yandex.Direct и Rambler.Adstat. Если вы планируете выполнить большое количество запросов, то делайте задержки естественными. Например, для Yandex.Wordstat это от 20 до 25 секунд, для Yandex.Direct — от 5 до 10 секунд, для поисковой выдачи — от 8 до 10 секунд и т.д.

Не запускайте больше потоков, чем у вас в работе используется IP-адресов (ваш IP-адрес + прокси-серверы, если они есть), т.к. использование большего количества потоков приведет к уменьшению выставленных задержек между запросами. Обратим ваше внимание на то, что в рамках исключения потоки для съема составляющих KEI выставляются в «Настройках — KEI», а не в «Настройках — Парсинг — Поисковая выдача».

Используйте опцию «Использовать основной IP-адрес» с умом. Если вы работаете без использования прокси-серверов, то без нее никуда не деться, а вот если работаете с прокси-серверами, то стоит подумать, хотите ли вы рисковать основным IP-адресом для незначительного увеличения скорости съема статистики (если прокси хотя бы несколько).

Пожалуй, единственным случаем, когда данную опцию следует включать при работе через прокси, это когда вы используете совсем небольшое (до 10) количество хороших стабильных прокси-серверов. В этом случае обычно ставят щадящие задержки и прочие настройки, поэтому вероятность блокировки довольно мала, а прирост скорости может быть до 10%.

Когда вы работаете через прокси-серверы, качество которых заведомо не самое лучшее, т.е. когда вы допускаете, что некоторые из них в любой момент могут стать недоступными, можно существенно сократить время сбора статистики, если вычеркивать их очереди на использование в рамкам запущенного процесса сбора. Сделать это позволяет опция «При ошибках получения ответа от сервиса (таймаут ответа и т.п.) исключать прокси-сервер». Исключенный после запуска процесса съема статистики прокси-сервер уже не будет отнимать у вас время на повторные попытки использования.

Если вы не хотите давать таким ненадежным прокси-серверам второй шанс, то включите данную опцию. При этом также можно включить опцию «Отключать в настройках отброшенные при парсинге прокси-серверы» в «Настройках — Сеть», которая позволит также и глобально на уровне настроек выключать такие прокси-серверы.

В том случае, когда вы работаете через прокси-серверы или через аккаунты (Yandex.Wordstat и Yandex.Direct), важно сохранять одинаковым уровень нагрузки на каждом из них от начала процесса съема статистики и до его конца. Для этих целей служит блок «Настройки деактивации потоков».

Например, если вы работаете с дорогими качественными прокси-серверами, и один из них по тем или иным причинам становится заблокированным или исключенным из-за большого количества ошибок, то не следует делить его ношу на остальные прокси-серверы, т.к. это может сделать их более уязвивыми к блокировке. В этом случае рекомендуется выбирать либо режим «Уменьшать кол-во потоков на 1 впроть до 0 каждый раз при исключении прокси-сервера», либо режим «Уменьшать кол-во потоков на 1 при исключении прокси-сервера только когда кол-во оставшихся прокси-серверов меньше установленного при запуске кол-ва потоков».

Если же вы работаете с большим количеством публичных прокси-серверов низкого качества, которые живут недолго, то можно подумать и об использовании режима «Не уменьшать кол-во потоков при исключении прокси-серверов», т.к. через такие прокси обычно работают десятки или даже сотни людей одновременно. И тут уже речь идет о том, кто из пользователей сможет извлечь из них больше пользы.

Следующим важным моментом является использование прокси-серверов в целом. В общем случае они задаются в «Настройках — Сеть». Прокси-серверы бывают хорошими (стабильными и быстрыми) и плохими (мертвыми, медленными или заблокированными).

По причинам высокого спроса на хорошие прокси-серверы они всегда идут с защитой доступа по паролю или по IP-адресу клиента. Не бывает хороших публичных прокси-серверов! Такие прокси-серверы могут быть как полностью выделенными (предоставляются только вам и больше никому), так и кооперативными (доступ разделяется между группой пользователей). Для некоторых задач могут вполне подойти и прокси-серверы с кооперативным доступом, и на этом можно сэкономить.

К сожалению, часто люди приобретают плохие публичные бесплатные прокси-серверы. Т.е. они платят некоторому сервису деньги за то, чтобы тот предоставил им список адресов найденных этим сервисом публичных бесплатных прокси-серверов (т.е. теоритически вы бы могли найти эти прокси самостоятельно и совершенно бесплатно). Из-за их публичности практически все эти прокси-серверы либо перегружены и работают очень медленно, либо заблокированы и закапчеваны из-за большого количества проходящих через них запросов, либо вообще уже недоступны, т.к. список, который вы скачали уже потерял свою актуальность (устарел). Нет ничего удивительно, когда из 1000 таких прокси-серверов проверку проходит лишь 3-4 штуки, да и те через 5 минут умирают.

Мы рекомендуем по возможности не пользоваться такими большими подборками прокси-серверов как минимум без защиты доступа. К сожалению, мы не можем посоветовать 100% хороший сервис, где можно достать хорошие прокси-серверы, т.к. такой универсальный вариант, который мы будем предлагать пользователям, в скором времени будет заблокирован (по примеру ранее рекомендуемых серверов). Вы можете найти прокси-серверы через поисковую систему или на форуме, опираясь на свежие отзывы реальных пользователей. Это будет надежней, чем любые варианты, которые мы бы рекомендовали всем нашим пользователям.

Заметим, что вовсе не обязательно всегда использовать прокси-серверы. Иногда даже наоборот проще и быстрей снять статистику без них. Часто это происходит в ситуациях, когда объемы парсинга небольшие, либо когда снимаемая статистика отдается быстро и без жестких санкций. Например, это статистика Google.Adwords, Yandex.Direct (в том числе и частотности Yandex.Wordstat через Yandex.Direct) и др. Также вы можете попробовать обойти блокировки и капчу сменой IP-адреса, если провайдер вам выдает его динамически.

Теперь перейдем в вопросу распознавания капчи. Вы можете делать это вручную или воспользоваться сервисами автоматического распознавания, которые обычно берут за это совсем небольшую плату (около 1-3$ за 1000 капчей). Настроить работе через один из таких сервисов вы можете в «Настройках — Антикапча».

Наконец, уточним небольшие детали, касающиеся производительности работы программы. Вы можете значительно увеличить скорость работы программы, если включите опцию «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Что касается всех остальных настроек, то они более индивидуальны. Все они в интерфейсе программы снабжены подсказками с описанием. В случае возникновения вопросов вы можете задавать их в техническую поддержку программы. Также советуем ознакомиться с рекомендациями по настройке процесса сбора статистики в мануале в разделах с описанием тех или иных систем статистики.

Yandex.Wordstat

Программа поддерживает сбор статистики с системы Yandex.Wordstat.

При помощи Key Collector вы можете собрать слова по заданному запросу или группе запросов с их базовыми частотностями, узнать базовую, » « и «!» частотности для имеющихся ключевых фраз, а также снять данные сезонности.

Рекомендуемые настройки сбора

Если вы не знаете, какие настройки лучше выставлять для сбора статистики Yandex.Wordstat, то можете воспользоваться общими советами из этого раздела.

С конца 2013 года сервис Yandex.Wordstat перестал выдавать статистику неавторизованным пользователям (тем, кто не зашел под какой-либо учетной записью Яндекса). По этой причине для того, чтобы Key Collector смог получать статистику из Yandex.Wordstat, необходимо задать в настройках данные об аккаунтах Яндекса.

Внимание: не используйте настоящие аккаунты, т.к. их могут забанить. Создайте для парсинга специально созданные чистые аккаунты, которые в случае блокировки будет не жалко потерять.

При работе с Yandex.Wordstat программа использует прописанные в «Настройках — Парсинг — Yandex.Direct» аккаунты. Вы можете указать сразу несколько штук (каждый с новой строки), однако мы бы не рекомендовали без необходимости указывать сразу слишком много аккаунтов (больше 2-3 на 1 поток), т.к. перед их использованием 1 раз за сеанс программа будет в них авторизовываться, на что затрачивается время.

Формат ввода аккаунтов имеет следующий вид:
Логин:Пароль
ДругойЛогин:Пароль

Т.е. нужно указывать логин аккаунт и пароль к нему через двоеточие. В качестве логина нужно использовать краткий формат (без @yandex.ru).

Далее вернемся к настройке сбора с самого Yandex.Wordstat, перейдя на вкладку «Настройки — Парсинг — Yandex.Wordstat». Здесь вы можете настроить множество параметров по своему усмотрению, но глубину парсинга рекомендуем оставить в значении 0. Все опции на данной вкладке снабжены подсказками, которые вы можете изучить самостоятельно при возникновении вопросов.

Чтобы снизить вероятность получения капчи и бана (блокировки IP-адреса) рекомендуем не ставить больше 1 потока на 1 IP-адрес, а задержки между запросами установить в диапазоне от 20 000 до 25 000 мс.

Внимание: не включайте режим «Получать статистику через Yandex.Direct» без явной необходимости. Обязательно изучите описание этой функции перед использованием!

Если вы хотите работать через прокси-серверы, то следует знать об особенностях работы с ними при работе с Yandex.Wordstat.

Существует 2 способа задать прокси-серверы.

Задать их совместно с аккаунтами Yandex.Direct в «Настройках — Парсинг — Yandex.Direct». В этом случае нужно использовать расширенный формат ввода:
#IPадресПрокси:Порт:ЛогинПрокси:ПарольПрокси:ЛогинЯндекс:ПарольЯндекс

Обращаем ваше внимание на необходимость использования ведущего символа # в начале каждой строки. При использовании такого метода при работе с Yandex.Wordstat и Yandex.Direct вне зависимости от того, включено ли использование прокси-серверов в «Настройках — Сеть» или нет, а также вне зависимости от выбранного в «Настройках — Парсинг — Yandex.Direct» режима использования прокси, все запросы и авторизация в аккаунтах будут выполняться через указанные вместе с аккаунтами прокси-серверы. При использовании этого метода важно быть уверенным в качестве используемых прокси, т.к. никакой ротации (смены прокси) происходить не будет.

Если вы работаете с приватными выделенными хорошими прокси-серверами, то данный способ может вам пригодиться.

Задать прокси-серверы в «Настройках — Сеть». При этом при выполнении авторизации в указанных аккаунтах (1 раз за сеанс работы с программой для каждого аккаунта) будет выбран какой-то 1 прокси-сервер из всех указанных, а потом он будет связан с этим аккаунтов до завершения работы с программой или до нажатия на кнопку «Принудительно очистить данные об авторизации». Это означает, что если в «Настройках — Сеть» вы добавите 10 прокси-серверов, а аккаунтов будет всего 2, то по умолчанию в работе будет использовано всего 2 прокси-сервера.

Важной особенностью данного способа задания прокси является возможность выполнения ротации (переключения) прокси-серверов при работе с Yandex.Wordstat или Yandex.Direct. Также становится возможной деактивация «плохих» прокси, которые, например, перестали отвечать. За это отвечает опция «Режим использования прокси».

Если вы работаете с не всегда стабильными прокси и не уверены в их качестве, то можете попробовать поставить режим ротации и включить опцию «Не использовать прокси при авторизации в аккаунтах». В этом случае авторизация пойдет напрямую без прокси, а сами запросы пойдут через прокси или напрямую в зависимости от того, включены ли опции «Использовать основной IP-адрес» в «Настройках — Парсинг — Yandex.Wordstat» при работе напрямую с Yandex.Wordstat и «Не использовать прокси-серверы при выполнении запросов к Yandex.Direct» и «Использовать основной IP-адрес» в «Настройках — Парсинг — Yandex.Direct» при работе с Yandex.Direct.

Таким образом, если вы планируете использовать прокси-серверы, и если они имеют невысокое качество, то используйте вкладку «Настройки — Сеть», а также на ваше усмотрение включайте ротацию прокси-серверов в «Настройках — Парсинг — Yandex.Direct».

Если вы включили ротацию и предполагаете, что заданные прокси будут постепенно умирать, то включите в «Настройках — Парсинг — Yandex.Wordstat» для Yandex.Wordstat и в «Настройках — Парсинг — Yandex.Direct» для Yandex.Direct опции «При ошибках получения ответа от сервиса исключать прокси-сервер» и выберите отличный от «Каждый раз уменьшать кол-во потоков при исключении прокси-серверов» режим работы с потоками, чтобы при исключении одного из сотни плохих прокси-серверов не завершался 1 из всего нескольких запущенных потоков.

Также советуем увеличить параметр «Кол-во повторных попыток» в «Настройках — Парсинг — Общие» до 30-90. Кроме того, если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Задание региона

Для того, чтобы более точно оценить ключевые фразы, необходимо установить интересующий вас регион. Сделать это можно при помощи кнопки в панели состояния.

Перед вами откроется окно задания регионов:

Внимание: настройки региональности общие для всех пользовательских вкладок и сохраняются в файле проекта, поэтому будьте внимательны с заданием региона перед началом съема статистики.

Задание стоп-слов

Вы можете уменьшить время парсинга, добавив в список стоп-слов нежелательные и включив опцию «Применять при составлении запроса».

Внимание: при использовании опции «Применять при составлении запроса» нельзя использовать слишком большое кол-во стоп-слов, т.к. Yandex.Wordstat имеет ограничение на длину запроса. Если у вас возникает необходимость работы с большим кол-вом стоп-слов, то не используйте данную опцию, а используйте кнопку «Отметить в таблице» в окне стоп-слов уже после завершения парсинга, предварительно выбрав необходимый тип поиска соответствия.

Сбор ключевых фраз

Программа позволяет собирать ключевые фразы и соответствующие им базовые частотности из левой и правой колонок сервиса Yandex.Wordstat.

Для съема данных из левой колонки воспользуйтесь кнопкой с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне пакетного ввода слов вы можете ввести вручную или загрузить из файла интересующие Вас слова. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам. После нажатия кнопки запуска процесса программа приступит к сбору данных по заданным ключевым фразам.

Другим способом сбора информации из левой колонки является строка быстрого запроса, которая по умолчанию выключена, но вы можете активировать ее в «Настройках — Интерфейс — Прочее» при помощи опции «Включить поле быстрого запроса к Yandex.Wordstat».

Внимание: по умолчанию при использовании строки быстрого запроса таблица данных очищается. Чтобы отключить эту особенность, нужно воспользоваться опцией «Не удалять фразы из таблицы при использовании строки быстрого запроса» в «Настройках — Парсинг — Yandex.Wordstat».

Для сбора данных из правой колонки воспользуйтесь кнопкой с иконкой сервиса Yandex.Wordstat, окрашенной в синий цвет, располагающейся в группе кнопок «Сбор ключевых слов и статистики».

Вы можете собрать только правую колонку или обе колонки сразу. Выбрать подходящий режим можно в раскрывающемся меню кнопки, отметив или сняв отметку с флажка «Собирать данные из левой колонки».

Сбор данных из правой колонки доступен как для заданного списка слов, так и слов, уже добавленных в текущую просматриваемую таблицу.

Для сбора фраз из левой и правой колонок Yandex.Wordsat предусмотрено 2 режима: классический (1-й режим) и альтернативный (2-й режим). Подробнее о данных режимах можно прочитать в специальной статье. Не используйте альтернативный режим без необходимости.

Сбор частотностей

Программа позволяет собирать базовые частотности, а также частотности вида » » и «!» для имеющихся в таблице ключевых фраз из сервиса Yandex.Wordstat.

Для съема частотностей воспользуйтесь раскрывающейся кнопкой с иконкой лупы в группе кнопок «Сбор ключевых слов и статистики».

Частотности вида » » формируется по принципу: мой запрос -> «мой запрос».

Частотности вида «!» формируются по принципу: мой запрос -> «!мой !запрос».

Вы можете настроить работу кнопки «Собрать все виды частотностей» в «Настройках — Парсинг — Yandex.Wordstat».

Внимание: на данный момент съем частотностей напрямую из Yandex.Wordstat является небезопасным, т.к. можно быстро получить блокировку IP-адреса. На сегодняшний день для съема частотностей рекомендуется использовать скоростной съем частотностей через Yandex.Direct (4-й режим). Данные будут полностью совпадать с данными Yandex.Wordstat, но процесс съема происходит в десятки раз быстрее и безопаснее.

Сбор сезонности

Программа позволяет собирать информацию о популярности запроса за прошедший период, строить график по этим данным и высказывать предположение о сезонности заданного запроса на основании полученных данных.

Для съема информации о сезонности запроса нажмите кнопку с иконкой графика в группе кнопок «Сбор ключевых слов и статистики».

При съеме информации о сезонности запроса также вычисляются значения средней арифметической частотности и ее медианы. Изменить период, в течение которого рассматривается статистика для вычисления этих значений, можно в настройках сбора Yandex.Wordstat.

При необходимости можно получить статистику с группировкой по неделям, а не по месяцам. В этом случае запуск следует производить через соответствующий пункт в раскрывающемся меню кнопки сбора данных сезонности Yandex.Wordstat.

Просмотреть расширенную информацию о сезонности можно, кликнув на ячейку, соответствующую данной фразе. При необходимости вы можете выгрузить расширенные данные о частотностях для всех фраз в файл CSV. Для этого необходимо воспользоваться соответствующей кнопкой в раскрывающемся меню кнопки запуска сбора сезонности.

Rambler.Adstat

Программа поддерживает сбор статистики с системы Rambler.Adstat.

При помощи Key Collector вы можете собрать слова по заданному запросу или группе запросов с их частотностями, а также узнать частотности для имеющихся ключевых фраз.

Для того, чтобы программа смогла получать данные этого сервиса, необходимо ввести данные авторизации в настройках сбора Rambler.Adstat в «Настройках — Парсинг — Rambler.Adstat».

Выбор месяца для отчета

Перед началом сбора информации вы можете выбрать конкретный месяц, за который вы бы хотели получить статистику.

Для этого необходимо открыть меню раскрывающихся кнопок сбора статистики Rambler.Adstat и выбрать необходимый элемент.

Отметим, что процедура эта необязательная: если пользователь не выберет месяц, то программа возьмет статистику со значением по умолчанию, т.е. за последний доступный период.

Сбор ключевых фраз

Программа позволяет собирать ключевые фразы и соответствующие им частотности из сервиса Rambler.Adstat.

Для съема данных воспользуйтесь кнопкой с иконкой в виде буквы R на белом фоне в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне пакетного ввода слов вы можете ввести вручную или загрузить из файла интересующие вас слова. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам. После нажатия кнопки запуска процесса программа приступит к сбору данных по заданным ключевым фразам.

Если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Сбор частотностей

Программа позволяет собирать частотности для имеющихся в таблице ключевых фраз из сервиса Rambler.Adstat.

Для съема частотностей воспользуйтесь раскрывающейся кнопкой с иконкой в виде буквы R на черном фоне в группе кнопок «Сбор ключевых слов и статистики».

LiveInternet

Программа поддерживает сбор статистики со счетчиков системы статистики LiveInternet. При помощи Key Collector вы можете собрать слова и трафик с указанного счетчика.

Сбор статистики со счетчика

Для вызова окна сбора статистики нажмите кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

Программа поддерживает как сбора статистики с одного сайта, так и пакетную обработку нескольких счетчиков. При этом в пакетном режиме вы можете на свое усмотрение выбрать режим добавления фраз из статистики на одну вкладку или распределить запросы на разные вкладки. В обоих случаях адрес сайта (имя счетчика) нужно указывать без http:// и www, т.е. просто site.ru.

Программа поддерживает съем статистики из трех видов отчетов LiveInternet: по поисковым фразам, позиции в Яндексе, позиции в Google.

Кроме того, вы можете выбрать, каким образом считать кол-во переходов по той или иной фразе: максимальное значение за указанный период, сумма значений переходов за указанный период или первое встретившееся значение переходов за период. Во всех режимах кроме последнего значение переходов вычисляется программой при полном завершении процесса сбора статистики, поэтому если прервать его раньше, то в таблицу запишутся только фразы (без информации о переходах). Рассмотрим пример.

Пусть, в отчете фраза «кефир» в марте имела 35 переходов, а в феврале — 40 переходов. Если вы выбрали режим сбора максимального кол-ва переходов, то программа запишет напротив фразы «кефир» значение 40 переходов (т.к. 40 > 35). Если же был выбран режим сбора суммы значений переходов, то программа запишет 75 (35 + 40 = 75). Наконец, если был выбран режим сбора первого встретившегося значения, то в ответ запишется 35 переходов, т.к. программа просматривает отчет от поздней даты периода к ранней (в прошлое).

Перед началом сбора статистики также нужно установить период сбора, за который программа будет пытаться получить статистику. При этом также можно выбрать тип группировки статистики: по месяцам или по дням.

Если вы хотите получить только содержащие или не содержащие какое-либо слово фразы, то вы можете воспользоваться функцией фильтрации результатов отчета на уровне LiveInternet.

Опция «Обновлять статистику для существующих в таблице фраз» позволяет обновлять статистику переходов для существующих ранее в таблице фраз. Например, ранее в таблице была добавлена фраза «кефир». Если опция выключена, и хоть в отчете и встретится эта фраза, но программа не запишет для нее значение переходов. Если же опция была включена, то программа обновит это значение.

Опция «Не добавлять в таблицу новые фразы» является дополнением к предыдущей опции. Включив ее, вы запретите программе добавлять в таблицу фразы, которых там ранее не было. Это может оказаться полезным, если вы хотите просто обновить или собрать данные о переходах к ранее собранной статистике, не разбавляя список фраз в таблице новыми фразами, для которых потом может понадобиться дополнительная обработка.

Опция «Не добавлять фразу, если она уже есть на любых других вкладках» может пригодиться, если вы не хотите, что в таблицу не поступали фразы, которые вы уже обработали на других вкладках.

Рекомендуемые настройки сбора

Т.к. сбор статистики связан с поочередным просмотром статистики за указанный период, то если вы работаете с огромными проектами (десятки или сотни тысяч фраз) или же снимаете статистику с «больших» счетчиков, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Если вы работаете с использованием прокси не очень хорошего качества, то вам также может помочь опция «При ошибках получения ответа от сервиса исключать прокси-сервер» в «Настройках — Парсинг — LiveInternet».

Yandex.Metrika

Программа поддерживает сбор статистики со счетчиков системы статистики Yandex.Metrika. При помощи Key Collector вы можете собрать слова и трафик с указанного счетчика.

Сбор статистики со счетчика

Нажмите кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики» и введите данные авторизации в системе статистики.

Для сбора статистики Yandex.Metrika необходимо авторизоваться в аккаунту, имеющего доступ к счетчикам, статистику с которых вы бы хотели собрать.

Программа поддерживает как обычный так и пакетный сбор статистики Yandex.Metrika. При использовании обычного сбора вы можете либо выбрать необходимый сайт в раскрывающемся списке, либо ввести его идентификатор вручную.

Следующим шагом будет выбор периода, за который вы хотите получить статистику. Вы можете ввести период самостоятельно или воспользоваться шаблоном (квартал, год и т.д.).

Опция «Обновлять статистику для существующих в таблице фраз» позволяет обновлять статистику переходов для существующих ранее в таблице фраз. Например, ранее в таблице была добавлена фраза «кефир». Если опция выключена, и хоть в отчете и встретится эта фраза, но программа не запишет для нее значение переходов. Если же опция была включена, то программа обновит это значение.

Опция «Не добавлять в таблицу новые фразы» является дополнением к предыдущей опции. Включив ее, вы запретите программе добавлять в таблицу фразы, которых там ранее не было. Это может оказаться полезным, если вы хотите просто обновить или собрать данные о переходах к ранее собранной статистике, не разбавляя список фраз в таблице новыми фразами, для которых потом может понадобиться дополнительная обработка.

Далее вы можете выбрать способ получения статистики: напрямую средствами API или посуточно средствами программы.

В первом случае программа просто формирует запрос к API Yandex.Metrika, передав в параметрах границы периода сбора. В ответ она получает список фраз сразу со статистикой о переходах, которую сразу можно записывать в таблицу данных. Данный режим является более быстрым, но в результате некоторые НЧ фразы могут быть не получены из-за особенностей работы самого API.

Во втором случае программа просматривает статистику за указанный период вручную посуточно, а затем при полном завершении сбора вычисляет значения переходов. Посуточный просмотр частями иногда позволяет получить больше фраз, которые API в обычном режиме не выдает (НЧ фразы), однако это занимает существенно больше времени. Также следует учитывать, что если процесс сбора был прерван, то статистика переходов и отказов вычислена не будет. Поэтому при работе с данным режимом следует дожидаться полного завершения процесса сбора.

Опция «Не добавлять фразу, если она уже есть на любых других вкладках» может пригодиться, если вы не хотите, что в таблицу не поступали фразы, которые вы уже обработали на других вкладках.

Рекомендуемые настройки сбора

Т.к. сбор статистики связан с поочередным просмотром статистики за указанный период, то если вы работаете с огромными проектами (десятки или сотни тысяч фраз) или же снимаете статистику с «больших» счетчиков, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Google.Analytics

Программа поддерживает сбор статистики со счетчиков системы статистики Google.Analytics. При помощи Key Collector вы можете собрать слова, количество визитов, процентное отношение отказов и целевые страницы с указанного счетчика.

Сбор статистики со счетчика

Нажмите кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики» и перед вами откроекта окно сбора статистики Google Analytics.

Для сбора статистики Google Analytics необходимо указать логин и пароль от аккаунта, имеющего доступ к счетчикам, статистику с которых вы бы хотели собрать. При желании вы можете включить опцию «Сохранять данные авторизации в настройках программы». Если вы будете пользоваться этой опцией, то т.к. настройки программы хранятся на вашем ПК в открытом (незашифрованном) виде, рекомендуется не вписывать данные от настоящего аккаунта Google, а использовать для этих целей специально созданный чистый аккаунт, которому доверен просмотр необходимых вам счетчиков (предоставлен гостевой доступ).

После ввода логина и пароля нажмите на раскрывающийся список с площадками и выберите счетчик, статистика с которого вас интересует. Затем выберите период, за который вы хотите получить статистику. Вы можете ввести период самостоятельно или воспользоваться шаблоном (квартал, год и т.д.).

Опция «Обновлять статистику для существующих в таблице фраз» позволяет обновлять статистику переходов для существующих ранее в таблице фраз. Например, ранее в таблице была добавлена фраза «кефир». Если опция выключена, и хоть в отчете и встретится эта фраза, но программа не запишет для нее значение переходов. Если же опция была включена, то программа обновит это значение.

Опция «Не добавлять в таблицу новые фразы» является дополнением к предыдущей опции. Включив ее, вы запретите программе добавлять в таблицу фразы, которых там ранее не было. Это может оказаться полезным, если вы хотите просто обновить или собрать данные о переходах к ранее собранной статистике, не разбавляя список фраз в таблице новыми фразами, для которых потом может понадобиться дополнительная обработка.

Далее вы можете выбрать способ получения статистики: напрямую средствами API или посуточно средствами программы.

В первом случае программа просто формирует запрос к API Google.Analytics, передав в параметрах границы периода сбора. В ответ она получает список фраз сразу со статистикой о переходах, % отказов и целевых страницах, которую сразу можно записывать в таблицу данных. Данный режим является более быстрым, но в результате некоторые НЧ фразы могут быть не получены из-за особенностей работы самого API.

Во втором случае программа просматривает статистику за указанный период вручную посуточно, а затем при полном завершении сбора вычисляет значения переходов и % отказов. Посуточный просмотр частями иногда позволяет получить больше фраз, которые API в обычном режиме не выдает (НЧ фразы), однако это занимает существенно больше времени. Также следует учитывать, что если процесс сбора был прерван, то статистика переходов и отказов вычислена не будет. Поэтому при работе с данным режимом следует дожидаться полного завершения процесса сбора.

Опция «Не добавлять фразу, если она уже есть на любых других вкладках» может пригодиться, если вы не хотите, что в таблицу не поступали фразы, которые вы уже обработали на других вкладках.

Рекомендуемые настройки сбора

Т.к. сбор статистики связан с поочередным просмотром статистики за указанный период, то если вы работаете с огромными проектами (десятки или сотни тысяч фраз) или же снимаете статистику с «больших» счетчиков, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Поисковые подсказки

Программа поддерживает сбор поисковых подсказок с шести популярных поисковых систем: Яндекс, Google, Mail, Rambler, Nigma, Yahoo, Яндекс.Директ.

Сбор поисковых подсказок

Для того, чтобы собрать поисковые подсказки с интересующих вас поисковых систем, нажмите кнопку с иконкой трех разноцветных сот в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне пакетного ввода слов вы можете ввести вручную или загрузить из файла интересующие вас фразы. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам. После этого необходимо отметить флажками поисковый системы, в которых следует выполнить поиск, и нажать на кнопку начала сбора информации (для того, чтобы флажок «Yandex.Direct» стал доступным, необходимо предварительно прописать один или несколько аккаунтов в «Настройках — Парсинг — Яндекс.Директ»).

Внимание: сбор подсказок с Yandex.Direct имеет очень маленький лимит количества запросов. Рекомендуется использовать сбор поисковых подсказок из Yandex.Direct только для ограниченного числа фраз при существующей необходимости. Также, если вы работаете с переборами, рекомендуется по возможности выключать переборы и собирать подсказки Yandex.Direct без них в отдельности (или с ними, но с большими задержками между запросами).

Опция «С подбором окончаний» позволяет собирать еще больше подсказок за счет того, что программа будет подбирать окончания слов автоматически. Например, введя слово «колбас» и отметив в настройках перебор кириллицы для окончаний, вы даете программе команду исследовать слова: «колбаса», «колбасы», «колбасные» и др. (выполняется перебор последней буквы без подстановки пробела). Перебор окончаний бесполезен, если в качестве исходных слов задаются полные слова. Например, если задать «колбаса» и включить перебор окончаний, то программа будет делать запросы «колбасаы», «кобасау», которые не принесут результата.

Внимание: не включайте опцию подбора окончаний без явной необходимости, т.к. ее использование очень сильно влияет на кол-во совершаемых запросов и на общее время выполнение задачи.

Если вы хотите быстро собрать только ТОП поисковых подсказок, воспользуйтесь опцией «Собирать только ТОП подсказок без перебора и пробела после фразы» в настройках: данная функция скрывает или деактивирует лишние настройки (опцию подбора окончаний и настройки перебора), упрощая процесс сбора.

Похожие поисковые запросы

Программа поддерживает сбор похожие поисковых запросов из поисковой выдачи ПС Яндекс, Google, Mail.

Похожие поисковые запросы

Для того, чтобы собрать поисковые подсказки с интересующих вас поисковых систем, нажмите кнопку в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне пакетного ввода слов вы можете ввести вручную или загрузить из файла интересующие вас фразы. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам. После этого необходимо отметить флажками поисковый системы, в которых следует выполнить поиск, и нажать на кнопку начала сбора информации.

WebEffector

Программа поддерживает сбор статистики из сервиса WebEffector: бюджет продвижения (количество переходов и стоимость клика — CPC (Cost Per Click) временно не снимаются).

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите данные авторизации, выберите регион и укажите адрес реально существующего сайта.

Программа поддерживает сбор статистики из сервиса SeoPult: бюджет продвижения, количество переходов, стоимость клика — CPC (Cost Per Click), геозависимость и количество анкоров у конкурентов.

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите данные авторизации, имя проекта, выберите регион, предпочтительную поисковую систему и укажите адрес реально существующего сайта.

Если вы отметите флажок «Получать кол-во анкоров», то программа будет также получать количество анкоров у конкурентов в указанной зоне видимости (за это отвечает параметр «Считать результат для . «).

Внимание: подсчет количества анкоров значительно увеличивает время выполнения задачи. Не включайте эту опцию без явной необходимости.

Программа поддерживает сбор нескольких видов статистики из сервиса Rookee (RooStat):

  • сбор статистики (бюджет продвижения, количество переходов, стоимость клика — CPC (Cost Per Click), геозависимость и принадлежность запроса к коммерческим тематикам) для имеющихся в таблице фраз;
  • вычисление лучшей словоформы для имеющихся в таблице фраз;
  • пакетный сбор расширений для заданных ключевых фраз (сбор новых фраз);
  • автоматическое составление семантического ядра по URL сайта (сбор новых фраз).

Сбор статистики

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне выберите регион, область видимости и предпочтительную поисковую систему.

Вычисление лучшей словоформы

Для того, чтобы собрать лучшие словоформы для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики» и выберите соответствующий пункт в раскрывающемся меню кнопки.

Сбор расширений для ключевых фраз

Для того, чтобы запустить сбор расширений (новых ключевых фраз) по имеющемуся списку фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики» и выберите соответствующий пункт в раскрывающемся меню кнопки.

В открывшемся окне пакетного ввода слов вы можете ввести вручную или загрузить из файла интересующие вас слова. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам. После нажатия кнопки запуска процесса программа приступит к сбору данных по заданным ключевым фразам.

Если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Автоматическое составления семантического ядра по URL

Для того, чтобы запустить автоматический сбор семантического ядра (новых ключевых фраз) по URL сайта, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики» и выберите соответствующий пункт в раскрывающемся меню кнопки.

В открывшемся окне выберите желаемые регион, область видимости, целевую поисковую систему и введите URL сайта. При необходимости вы можете задать сразу несколько адресов (каждый с новой строки).

Если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Программа поддерживает следующие виды сбора статистики из сервиса MegaIndex:

  • сбор статистики (бюджет продвижения, количество переходов по данным LiveInternet, количество запросов в месяц, стоимость) для имеющихся в таблице фраз;
  • пакетный анализ видимости сайтов (сбор новых фраз и позиций, которые занимают указанные сайты).

Сбор статистики

Для того, чтобы запустить сбор статистики для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите данные авторизации и укажите адрес реально существующего сайта.

Анализ видимости сайтов

Для того, чтобы запустить анализ видимости сайтов в поисковых системах (получить фразы, по которым указанные сайты присутствуют в ТОПе поисковой выдачи), нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите данные авторизации и выберите регион поиска в раскрывающемся списке. Далее если вы хотите снять только фразы, по которым указанные сайты были в ТОПе поисковой выдачи, лишь за определенный период, то включить опцию «Снимать конкретный период» и выберите его в раскрывающемся списке. Если же опция будет выключена, то программа последовательно просканируется все доступные периоды (можно получить существенно больше фраз, но на это уйдет больше времени).

Если вы включите опцию «Записывать позиции в ПС Яндекс, Google по данным MegaIndex», то программа обновит эти значения в таблице для фраз, где до этого позиций не было снято вообще или было значение «Нет данных» (фразы, для которых ранее уже были сняты положительные позиции, обновлены в этих колонках не будут).

Опция «Обновлять статистику для существующих в таблице фраз» позволяет обновлять статистику для существующих ранее в таблице фраз. Например, ранее в таблице была добавлена фраза «кефир». Если опция выключена, и хоть в отчете и встретится эта фраза, но программа не запишет для нее статистику (бюджет, позиции и пр.). Если же опция была включена, то программа обновит эти значения.

Опция «Не добавлять в таблицу новые фразы» является дополнением к предыдущей опции. Включив ее, вы запретите программе добавлять в таблицу фразы, которых там ранее не было. Это может оказаться полезным, если вы хотите просто обновить или собрать статистику для ранее собранных фраз, не разбавляя список фраз в таблице новыми фразами, для которых потом может понадобиться дополнительная обработка.

Далее следует ввести вручную или загрузить из файла интересующие вас адреса сайтов (в формате без http:// и www, т.е. просто site.ru). При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждому из входных сайтов: на текущую вкладку или распределить по нескольким вкладкам. После нажатия кнопки запуска процесса программа приступит к сбору данных по заданным адресам сайтов.

Если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Yandex.Direct

Программа поддерживает сбор статистики из сервиса Yandex.Direct: бюджет, количество переходов, количество показов, цену клика, коэффициент эффективности CTR и данные о конкуренции — сбор информации о размещаемых объявлениях по заданным ключевым фразам.

Рекомендуемые настройки сбора

Если вы не знаете, какие настройки лучше выставлять для сбора статистики Yandex.Direct, то можете воспользоваться общими советами из этого раздела.

Чтобы Key Collector смог получать статистику из Yandex.Direct, необходимо задать в настройках данные об аккаунтах Яндекса.

Внимание: не используйте настоящие аккаунты, т.к. их могут забанить. Создайте для парсинга специально созданные чистые аккаунты, которые в случае блокировки будет не жалко потерять.

При работе с Yandex.Direct программа использует прописанные в «Настройках — Парсинг — Yandex.Direct» аккаунты. Вы можете указать сразу несколько штук (каждый с новой строки), однако мы бы не рекомендовали без необходимости указывать сразу слишком много аккаунтов (больше 2-3 на 1 поток), т.к. перед их использованием 1 раз за сеанс программа будет в них авторизовываться, на что затрачивается время.

Формат ввода аккаунтов имеет следующий вид:
Логин:Пароль
ДругойЛогин:Пароль

Т.е. нужно указывать логин аккаунт и пароль к нему через двоеточие. В качестве логина нужно использовать краткий формат (без @yandex.ru).

Основные настройки, касающиеся этой системы располагаются в «Настройках — Парсинг — Yandex.Direct». Все опции на данной вкладке снабжены подсказками, которые вы можете изучить самостоятельно при возникновении вопросов.

Чтобы снизить вероятность получения капчи и бана (блокировки IP-адреса) рекомендуем не ставить больше 1 потока на 1 IP-адрес, а задержки между запросами установить в значение не менее 5 000 мс.

Если вы хотите работать через прокси-серверы, то следует знать об особенностях работы с ними при работе с Yandex.Direct.

Существует 2 способа задать прокси-серверы.

Задать их совместно с аккаунтами Yandex.Direct в «Настройках — Парсинг — Yandex.Direct». В этом случае нужно использовать расширенный формат ввода:
#IPадресПрокси:Порт:ЛогинПрокси:ПарольПрокси:ЛогинЯндекс:ПарольЯндекс

Обращаем ваше внимание на необходимость использования ведущего символа # в начале каждой строки. При использовании такого метода при работе с Yandex.Direct и Yandex.Wordstat вне зависимости от того, включено ли использование прокси-серверов в «Настройках — Сеть» или нет, а также вне зависимости от выбранного в «Настройках — Парсинг — Yandex.Direct» режима использования прокси, все запросы и авторизация в аккаунтах будут выполняться через указанные вместе с аккаунтами прокси-серверы. При использовании этого метода важно быть уверенным в качестве используемых прокси, т.к. никакой ротации (смены прокси) происходить не будет.

Если вы работаете с приватными выделенными хорошими прокси-серверами, то данный способ может вам пригодиться.

Задать прокси-серверы в «Настройках — Сеть». При этом при выполнении авторизации в указанных аккаунтах (1 раз за сеанс работы с программой для каждого аккаунта) будет выбран какой-то 1 прокси-сервер из всех указанных, а потом он будет связан с этим аккаунтов до завершения работы с программой или до нажатия на кнопку «Принудительно очистить данные об авторизации». Это означает, что если в «Настройках — Сеть» вы добавите 10 прокси-серверов, а аккаунтов будет всего 2, то по умолчанию в работе будет использовано всего 2 прокси-сервера.

Важной особенностью данного способа задания прокси является возможность выполнения ротации (переключения) прокси-серверов при работе с Yandex.Direct или Yandex.Wordstat. Также становится возможной деактивация «плохих» прокси, которые, например, перестали отвечать. За это отвечает опция «Режим использования прокси».

Если вы работаете с не всегда стабильными прокси и не уверены в их качестве, то можете попробовать поставить режим ротации и включить опцию «Не использовать прокси при авторизации в аккаунтах». В этом случае авторизация пойдет напрямую без прокси, а сами запросы пойдут через прокси или напрямую в зависимости от того, включены ли опции «Не использовать прокси-серверы при выполнении запросов к Yandex.Direct» и «Использовать основной IP-адрес» в «Настройках — Парсинг — Yandex.Direct» при работе с Yandex.Direct и «Использовать основной IP-адрес» в «Настройках — Парсинг — Yandex.Wordstat» при работе напрямую с Yandex.Wordstat.

Таким образом, если вы планируете использовать прокси-серверы, и если они имеют невысокое качество, то используйте вкладку «Настройки — Сеть», а также на ваше усмотрение включайте ротацию прокси-серверов в «Настройках — Парсинг — Yandex.Direct».

Если вы включили ротацию и предполагаете, что заданные прокси будут постепенно умирать, то включите в «Настройках — Парсинг — Yandex.Direct» для Yandex.Direct и в «Настройках — Парсинг — Yandex.Wordstat» для Yandex.Wordstat опции «При ошибках получения ответа от сервиса исключать прокси-сервер» и выберите отличный от «Каждый раз уменьшать кол-во потоков при исключении прокси-серверов» режим работы с потоками, чтобы при исключении одного из сотни плохих прокси-серверов не завершался 1 из всего нескольких запущенных потоков.

Также советуем увеличить параметр «Кол-во повторных попыток» в «Настройках — Парсинг — Общие» до 30-90.

Задание региона

Для того, чтобы более точно оценить ключевые фразы, необходимо установить интересующий вас регион. Для этого нажимите кнопку «Задать регион» в окне запуска сбора статистики Yandex.Direct или на кнопку в панели состояния.

Перед вами откроется окно задания регионов:

Внимание: настройки региональности для Yandex.Direct и Yandex.Wordstat независимые!

Внимание: настройки региональности общие для всех пользовательских вкладок из группы «Ключевые слова» и сохраняются в файле проекта, поэтому будьте внимательны с заданием региона перед началом съема статистики.

Сбор статистики

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне при необходимости задайте регион (при необходимости), выберите желаемый формат запроса (слово, «слово» или «!слово») и укажите режим сбора информации: спец. размещение, первое место или гарантированные показы. Данные берутся из панели по адресу: https://direct.yandex.ru/registered/main.pl?cmd=ForecastByWords.

Программа может отправлять в Yandex.Direct на обработку фразы в трех различных режимах:

  • слово — в этом режиме программа отправляет на анализ фразы «как есть» (аналогично базовой частотности в Yandex.Wordstat);
  • «слово» — в этом режиме программа заключает фразу в кавычки (аналогично частотности вида » » в Yandex.Wordstat);
  • «!слово» — в этом режиме программа заключает фразу в кавычки, а также ставит перед каждым словом знак !. Т.е. из фразы красивые сапоги получится «!красивые !сапоги» (аналогично частотности вида «!» в Yandex.Wordstat).

При этом, если вы включили опцию «Целью запуска сбора статистики является заполнение колонок частотности Yandex.Wordstat», то будет заполняться колонка базовой, » « или «!» частотности Yandex.Wordstat в зависимости от выбранного режима сбора.

Собирать информацию о конкурентах

Программа может сканировать размещаемые в Yandex.Direct объявления конкурентов для каждой из переданных на анализ фразы. Данная операция значительно увеличивает время, необходимое для выполнения задачи, поэтому рекомендуется не включать опцию без необходимости. Сканирование ведется с использованием сервиса http://direct.yandex.ru/search?text=.

Внимание: при сборе информации о конкурентах (объявления) учитывается регион, заданный для поисковой выдачи ПС Яндекс, а не регион, заданный для сбора статистики Yandex.Direct.

Для просмотра заголовков, содержания и ссылок объявлений нажмите на ячейку с данными конкуренции Yandex.Direct — откроется дополнительное окно.

Внимание: сбор данных о конкуренции значительно увеличивает время сбора информации, поэтому не включайте эту опцию без необходимости.

Целью запуска сбора статистики является заполнение колонок частотности Yandex.Wordstat

Если вы включите данную опцию, то программа будет определять список фраз с неснятыми данными на основании соответствующих колонок Yandex.Wordstat, а не по колонкам Yandex.Direct.

Для ясности рассмотрим пример. Пусть в таблице данных содержится 150 фраз, и в «Настройках — Парсинг — Общие» выбран режим сбора для несобранных (т.е. для тех фраз, для которых пока что отсутствует статистика). Предположим, что для каких-то 100 фраз уже собрана статистика Yandex.Direct (бюджет, стоимость клика и др.), а статистика в колонках Yandex.Wordstat не заполнена.

Если данная опция будет выключена, то программа определит список фраз, которые нуждаются в обработке, по заполненности ячейки бюджета Yandex.Direct, т.е. на обработку поступят оставшиеся 50 фраз (150 — 100 = 50).

Если же данная опция будет включена, и, скажем, выбран режим поиска «!слово», то программа просмотрит и добавит в очередь на анализ все фразы, у которых отсутствует статистика в колонке частотности «!» по Yandex.Wordstat.

Таким образом, данную опцию следует включать, если первочередной интересующей вас информацией в Yandex.Direct является количество показов, которые вы бы хотели записать в колонки частотностей Yandex.Wordstat.

Внимание: по причине того, что Yandex.Direct принимается на вход пачки фраз и при необходимости «склеивает» фразы в них, то для некоторых фраз программа может не собрать статистику Yandex.Direct (соответственно, не соберется и статистика Yandex.Wordstat). Также Yandex.Direct не может принимать на обработку фразы, содержащие в себе спец. символы, и длинные фразы, состоящие более чем из 7 слов.

Внимание: т.к. до момента отправки запросов на обработку программа не может знать, какие из фраз Yandex.Direct «склеит», а какие нет, то непосредственно перед формированием запроса программа стирает данные статистики для фраз, которые содержатся в текущем запросе на обработку, чтобы не допустить того, чтобы в таблице часть данных имела свежие актуальные результаты, а часть — результаты из прошлого съема (если, например, 5 из 100 отправленных фраз будут «склеены», то программа не сможет узнать статистику для каждой из 5 в отдельности).

Записывать статистику Yandex.Direct для запросов вида

Данная опция имеет значение, когда вы включаете опцию «Целью запуска сбора статистики является заполнение колонок частотности Yandex.Wordstat» и выбираете сразу несколько видов запросов в поле «Искать». Т.к. в этом случае программа поочередно получает статистику для указанных видов запросов, то становится неочевидным, для какого из выбранных типов запросов будут записаны данные статистики Yandex.Direct (бюджет, CPC и т.п.).

При помощи данной опции вы можете в явном виде указать, какой запрос ляжет в основу при заполнении колонок статистики Yandex.Direct.

Google.Adwords

Программа поддерживает сбор статистики из сервиса Google.Adwords: бюджет, частотность и коэффициент конкуренции.

Подготовка аккаунта к использованию в программе

Для съема статистики Google.Adwords необходимо зарегистрировать отдельный аккаунт. Использование настоящего аккаунта крайне не рекомендуется по той причине, что сервис может заблокировать его за большое количество автоматизированных запросов.

После регистрации аккаунта необходимо зайти через браузер в Google.Adwords и авторизоваться под созданной учетной записью. Далее вам будет предложено выбрать язык интерфейса (обязательно указывайте русский), установить часовой пояс и желаемый тип валюты, в котором будет отображаться стоимость клика.

Подготовленный аккаунт следует прописать в «Настройках — Парсинг — Google.Adwords» в формате ВашЛогин:Пароль (логин и пароль через двоеточие).

Внимание: не прописывайте более 1 аккаунта без явной необходимости (огромное кол-во запросов, при котором вы однажды уже получали бан). Использование нескольких аккаунтов может замедлить работу программы.

Задание региона

В текущих версиях программы выбор региона и языка запросов осуществляется непосредственно через окно запуска сбора статистики.

  • Если Вы хотите, чтобы программа не меняла заданный в аккаунте регион или язык запросов, то включите опцию «не менять настройки аккаунта».
  • Если Вы хотите изменить или задать определенный регион и язык, то введите или выберите из списка нужный регион или язык запросов. При задании региона допускается вводить и другие города, отсутствующие в списке доступных вариантов (вводить следует официальной название без ошибок).
  • Если Вы хотите собирать статистику без ограничений по региону, то сотрите введенный регион и оставьте поле пустым.

Сбор ключевых фраз

Для того, чтобы собрать похожие ключевые фразы, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне при необходимости задайте страну и язык, выберите желаемый тип соответствия, установите фильтры, если они требуются. Также здесь вам необходимо ввести вручную или загрузить из файла интересующие вас фразы. При этом вы можете выбрать, куда вы хотите поместить результаты парсинга по каждой из входных фраз: на текущую вкладку или распределить по нескольким вкладкам.

Внимание: процесс сбора информации происходит без использования прокси-серверов, указанных в настройках программы. Если вы хотите получать статистику Google.Adwords через прокси-сервер, укажите его в настройках браузера Internet Explorer.

Если вы работаете с огромными проектами (десятки или сотни тысяч фраз) и собираете фразы в пакетном режиме, то вам может оказаться полезной опция «Не обновлять содержимое таблицы после групповых операций вставки и обновления при парсинге» в «Настройках — Интерфейс — Прочее».

Сбор статистики

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите при необходимости задайте страну, выберите желаемый тип соответствия.

Внимание: процесс сбора информации происходит без использования прокси-серверов, указанных в настройках программы. Если вы хотите получать статистику Google.Adwords через прокси-сервер, укажите его в настройках браузера Internet Explorer.

Программа поддерживает сбор статистики из сервиса Begun (среднюю стоимость клика).

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

В открывшемся окне введите данные авторизации и идентификатор созданной вами вручную площадки.

Для того, чтобы узнать идентификатор площадки, необходимо вручную авторизоваться в системе через браузер и создать новую текстовую рекламную кампанию с одним любым объявленияем внутри. Затем нажмите на имя новой площадки — в строке адреса страницы Вы увидите идентификатор:

Внимание: убедитесь, что площадка, идентификатор которой вы вписываете, находится в активном состоянии. Для этого найдите площадку с списке кампаний в панели управления аккаунтом и нажмите «Активировать», если эта ссылка доступна.

В Контакте

Программа поддерживает сбор статистики из социальной сети В Контакте: количество результатов поиска по людям и группам по указанным ключевым фразам.

Перед началом сбора информации вы должны заполнить данные авторизации в настройках программы.

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на раскрывающуюся кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

LinkPad (Solomono)

Программа поддерживает сбор статистики из системы LinkPad (Solomono) (http://www.linkpad.ru/tools/default.aspx?t=ps&i=): сбор информации о видимости сайтов конкурентов в указанной области видимости поисковой выдачи.

Перед началом сбора информации рекомендуем установить область видимости поисковой выдачи, которую будет сканировать программа, в настройках.

Для того, чтобы собрать статистику для имеющихся ключевых фраз, нажмите на кнопку с логотипом сервиса в группе кнопок «Сбор ключевых слов и статистики».

Для того, чтобы просмотреть расширенную статистику (анкоры конкурентов), кликните на непустую ячейку в колонке статистики Solomono.

Определение корректности словоформ

Программа поддерживает определение корректности словоформ на основе поисковых подсказок.

Для того, чтобы определить корректность словоформ для имеющихся ключевых фраз, нажмите на кнопку с иконкой руки в группе кнопок «Сбор ключевых слов и статистики».

Внимание: информация, предоставляемая данной функцией, является лишь ориентировочной и не гарантирует правильности определения. Данная функция может быть полезной при очистке от «мусора» большого массива фраз высокой и средней популярности в качестве первичного «фильтра качества».

Программа позволяет собрать данные из группы KEI с трех популярных поисковых систем: Яндекс, Google, Mail. Под составляющими группы KEI понимаются конкуренция (количество документов в поисковой выдаче по запросу), количество главных страниц в поисковой выдаче и количество точных вхождений заданной ключевой фразы в заголовки страниц, располагающихся в поисковой выдаче.

Сбор составляющих группы KEI осуществляется через раскрывающуюся кнопку с надписью KEI в группе кнопок «Сбор ключевых слов и статистики».

Вы можете настроить область видимости поисковой выдачи, которую будет рассматривать программа при сборе составляющих группы KEI, формат запроса (слово или «слово»), а также формулы для расчета значений KEI и некоторые другие настройки в «Настройках — KEI».

Для задания настроек региональности воспользуйтесь кнопками в панели состояния.

Для того, чтобы просмотреть расширенную статистику по вхождениям в заголовки страниц, кликните на непустую ячейку в данной колонке.

По умолчанию сбор и запись сниппетов отключены в настройках, т.к. информация о них может занимать много места. Если вы хотите получать эту статистику, то включите опцию «Записывать сниппеты для ПС Яндекс, Google» в «Настройках — KEI».

Вы можете выгрузить информацию о заголовках и сниппетах во внешний файл (CSV или XLSX) через пункт «Экспортировать данные о поисковой выдаче» в раскрывающемся меню кнопки KEI.

Определение релевантных страниц

Программа позволяет определять релевантные страницы сайта по заданным ключевым фразам в поисковых системах Яндекс и Google.

Вы можете добавить слова в таблицу данных вручную через кнопку «Добавить» в группе кнопок «Операции с таблицей» или скопировать из других вкладок.

Для задания настроек региональности воспользуйтесь кнопками в панели состояния.

Для начала анализа релевантных страниц воспользуйтесь кнопкой «Yandex» или «Google» в группе кнопок «Релевантные страницы, позиции и анализ сайта».

По умолчанию в качестве релевантной страницы выбирается наиболее релевантная, т.е. страница на первой позиции поисковой выдачи по запросу. Вы можете сменить страницу вручную. Для этого нужно нажать на ячейку, значение которой хотите изменить, и выбрать другую страницу из предложенных или же вписать URL вручную.

При необходимости вы можете одним кликом прописать какой-либо адрес в нескольких ячейках сразу. Для этого нужно вызвать контекстное меню в ячейке с адресом и выбрать пункт «Применить ко всем выделенным строкам» или «Применить ко всем отфильтрованным строкам».

Напоминаем, что текст, окрашенный в темно-синий цвет позволяет совершить переход в браузер с зажатой клавишей CTRL.

Съем позиций

Программа позволяет определять позиции сайта по заданным ключевым фразам в поисковых системах Яндекс и Google.

Вы можете добавить слова в таблицу данных вручную через кнопку «Добавить» в группе кнопок «Операции с таблицей» или скопировать из других вкладок.

Для задания настроек региональности воспользуйтесь кнопками в панели состояния.

Для начала сбора позиций воспользуйтесь кнопкой «Yandex» или «Google» в группе кнопок «Релевантные страницы, позиции и анализ сайта».

Настроить область видимости, в пределах которой программа будет осуществлять поиск заданного сайта, можно в «Настройках — Парсинг — Поисковая выдача». Так как съем позиций связан с поочередным просмотром поисковой выдачи от начала вглубь, то вам может оказаться полезной опция «Кол-во запрашиваемых результатов в поисковой выдаче», где можно выставить значение 50, чтобы уменьшить кол-во совершаемых к поисковой системе запросов.

Программа поддерживает просмотр истории позиций. Вы можете видеть относительное изменение позиций с последнего съема. Для этого нужно в «Настройках — Парсинг — Общие» выбрать режим сбора «Отмеченные строки» или «Пустые или отмеченные строки», а затем отметить фразы, для которых вы бы хотели обновить позиции, и запустить сбор.

Относительное изменение появится в правой части ячейки. Если динамика положительная (сайт поднялся в выдаче), то число будет окрашено в зеленый цвет (например, 10 ). Если же динамика будет отрицательной (сайт упал в выдаче), то число будет окрашено в красный цвет (например, -4 ).

Кроме того, можно наблюдать общую динамику как в виде графика, так и в табличном виде.

При необходимости вы можете выгрузить отчет по позициям в формат Microsoft Excel. Кнопка выгрузки располагается рядом с кнопкой сбора позиций.

Сбор рекомендаций

Программа позволяет собирать рекомендации по перелинковке на основе выдачи ПС Яндекс.

Вы можете добавить слова в таблицу данных вручную через кнопку «Добавить» в группе кнопок «Операции с таблицей» или скопировать из других вкладок.

Для начала сбора позиций воспользуйтесь кнопкой «Сбор рекомендаций из ПС Yandex» в группе кнопок «Релевантные страницы, позиции и анализ сайта». Вам будет предложено указать части URL страниц (разделы сайта), которые вы бы не хотели видеть в рекомендациях. Например, если на сайте адреса каталога товаров имеют вид http://site.ru/shop/items/22, и вы не собираетесь делать перелинковку на страницы товаров данного раздела, то можно записать исключение как: shop/items/.

Указать максимальное количество рекомендаций, которые будет собирать программа можно в «Настройках — Рекомендации», указав параметр «Собирать до . рекомендаций на запрос«.

Результат работы будет заполняться в полях «Акцептор» и на втором уровне строк.

Для выгрузки собранных рекомендаций вы можете воспользоваться кнопкой, расположенной непосредственно рядом с кнопкой запуска сбора рекомендаций.

www.key-collector.ru

Смотрите так же:

  • Жилищная субсидия сотрудникам полиции Жилищные субсидии для сотрудников полиции Получение жилищной субсидии для сотрудников полиции регламентируются согласно Федеральному закону № 247-ФЗ, где обозначен механизм обеспечения жильем сотрудников полиции путем получения […]
  • Федеральная служба исполнения наказания волгоградская область Федеральная служба исполнения наказания волгоградская область Заказчик: УФСИН РОССИИ ПО ВОЛГОГРАДСКОЙ ОБЛАСТИ Регистрационные данные организации Скачать таблицу: в формате .xls в формате .xlsx в формате .csv в […]
  • Форма заявление о п Форма Р11001 (новая): образцы, требования к оформлению, порядок заполнения и примеры Торопитесь? Наш умный сервис заполнит за Вас форму 11001 бесплатно и прямо сейчас! Форма Р11001 Новая форма Р11001 заявления о государственной […]
  • Ошибка разрешении dns Windows Настройка параметров DNS-сервера Откройте диспетчер сервера. Чтобы открыть диспетчер сервера, щелкните Пуск, затем выберите Диспетчер сервера. В области результатов, в разделе Сводка по ролям щелкните элемент Добавить роли. В […]
  • Основные полномочия основных органов Основные полномочия органов местного самоуправления Основными полномочиями органовместного самоуправления являются: принятие устава муниципального образования и внесение в него изменений и дополнений, издание муниципальных правовых […]
  • Административные наказания для физических лиц Административное наказание 18.1. Понятие и цели административного наказания Административное наказание – установленная государством мера ответственности за совершение административного правонарушения, которая применяется в целях […]

Обсуждение закрыто.