Парсинг Сервис

Парсер дубльгис.

Самый актуальный справочник организаций в настоящее время — безусловно, 2GIS. Сотрудники этой компании регулярно обзванивают все организации, выявляют изменения контактных данных и актуализируют базу данных. Актуальность данных крайне важна, поскольку неактуальные данные увеличивают ваши затраты.

Вы можете делать так: зайти на сайт ДубльГИС, открыть справочник организаций, и последовательно открывать одну компанию за другой, выбирать подходящие, копировать их название и контактные данные в Excel, а затем уже делать свои пометки: «не дозвонился», «отправил предложение на email» и т.д. Это копирование с сайта в таблицу Excel занимает огромное количество времени!

Мы предлагаем вам другой подход: использовать программу выгрузки — парсер 2гис, которая самостоятельно скопирует информацию об интересующих вас компаниях с сайта ДубльГИС в Excel, и сэкономит ваши силы и время. Вы получите готовый к обработке список компаний, в котором можно делать примечания, отфильтровывать неинтересные компании и т.д.

Мы развиваем этот парсер с 2012 года! Доказательство (снимок страницы за 01.11.2012)

Программа-парсер ДубльГис по сбору данных об организациях будет полезна:
— менеджерам по продажам для поиска покупателей
— менеджерам по закупкам для поиска поставщиков
— маркетологам для изучения рынка
— руководителям компаний для поиска партнеров и клиентов

Предлагаемая нами программа-парсер 2GIS позволяет собирать следующую информацию:

Уникальный ID организации
Уникальный ID группы филиалов (у всех филиалов одной компании он одинаковый)
Количество филиалов
Тип организации (розница/опт/производство/интернет-магазин)
Название организации
Описание организации
Юридическое название организации
ОГРН/ОГРНИП для рекламирующихся компаний
Рубрики/Отрасли/Категории организации
Регион
Город
Адрес
Сайт
Email с сайта 2ГИС(например отсюда будет взят ящик bronirriverpark)
Email с сайта компании(парсер 2gis многопоточно просканирует сайт компании на заданную пользователем глубину)
ИНН с сайта компании
Телефоны мобильные — для sms/Viber/WhatsApp-рассылки
Телефоны остальные — для холодных звонков
Факс
Почтовый индекс
Ссылки на социальные сети (Facebook/Twitter/Instagram/Vkontakte/Youtube/Google+/Одноклассники)
Геоданные (координаты): широта и долгота
Варианты оплаты, используемые организацией
График работы
Услуги(атрибуты) организации
Логотип организации
Метро — для легкой фильтрации по районам
Дата создания организации
Дата обновления организации
Дополнительные данные — сделаем индивидуальную настройку выгрузки по запросу!

Парсер 2гис позволяет отметить один или несколько городов, одну или несколько категорий, и собрать все соответствующие данные нажатием одной кнопки. Например, можно отметить рубрику «парикмахерские», отметить несколько или все города (используя Shift или Ctrl), и собрать все парикмахерские из выбранных городов одной кнопкой!

После завершения работы программы файл с результатами автоматически открывается в Excel (если установлен MS Office) или Calc (если установлен OpenOffice). Файл имеет имя вида data***.csv.

Если у вас включена выгрузка в формат SQL, после завершения работы парсера 2гис будет создан файл с командами CREATE TABLE, INSERT и т.п., предназначенный для загрузки базы на SQL-север. Файл имеет имя вида data***.sql.

Данные, собираемые парсером 2gis, становятся доступны еще до завершения работы программы: каждые несколько секунд она записывает собранные данные в специальный файл с именем current.csv в папке программы.

От запуска сбора по нужным городам и рубрикам до получения первых десятков контактов организаций — считанные секунды!

Парсер умеет синхронизировать список городов и рубрик с сайтом ДубльГис. Это означает, что парсер ДубльГиса не только умеет работать со всеми существующими городами в 2ГИС (более 327), но и при появлении новых городов или рубрик программа будет способна работать с новыми городами и рубриками без необходимости обновления!

Парсер 2 гис умеет работать через прокси! Если в вашей корпоративной сети в настройках браузера нужно указывать какой-то прокси (нет прямого выхода в интернет) — программа сможет работать и у вас. Если ваш IP-адрес заблокируют на 2гис, вы сможете с помощью прокси обойти блокировку. Для включения работы через прокси запишите параметры прокси в формате login:passwordip:port в файл proxy.txt в папке программы. Запустите выгрузку, программа напишет в окне логов, что начала использовать прокси.

В редких случаях сайт 2гис в ответ на запросы выдаёт рекапчу. Обычно такое бывает, когда страна, из которой происходит парсинг, отличается от выгружаемой страны. Парсер ДубльГИС умеет работать с сервисом автоматического распознавания капчи для разгадки выдаваемых сайтом рекапч. Вам необходимо иметь аккаунт в этом сервисе для пользования парсером. Минимального баланса в 1$ хватит на несколько месяцев использования антикапчи, в стандартных условиях.
Вы можете не пользоваться сервисом антикапчи, а использовать VPN или прокси-сервер собираемой страны, для избежания выдачи рекапчи.

Парсер 2gis умеет приостанавливать свою работу, и продолжать её. Паузу можно включать вручную, а если отключится интернет — программа поставит себя на паузу автоматически. Если во время сбора на сайте возникнет ошибка, и парсер не сможет получить данные — она поставит себя на паузу на некоторое время, затем автоматически проснется и сделает еще несколько попыток получить те же данные.

Два индикатора показывают ход выполнения работы. Синий показывает прогресс по городам и рубрикам, зеленый индикатор показывает прогресс сбора данных внутри текущей рубрики.

Программа умеет фильтровать внушительный список категорий и подкатегорий по заданному признаку. Если нажать Ctrl+F и ввести «мото», на экране появится список из 3 рубрик с этим словом: ремонт мототехники, картинг-/мотоцентры, мототехника.

Парсер 2гис умеет работать в режиме получения списка новых организаций в базе. При запуске сбора парсер ищет файл skip.txt в своей папке, и загружает оттуда список ID организаций, которые не нужно загружать. Если Вы собрали какую-то рубрику некоторое время назад, возьмите из старого файла результатов первую колонку с числовыми ID организаций, и поместите этот список в файл skip.txt в папке программы. Запустите сбор той же рубрики, парсер 2gis пропустит все старые организации, и на выходе вы получите список только новых организаций заданной рубрики.

Скриншот программы-парсера 2ГИС:

Скриншот выгрузки парсером 2gis:

Ссылка на результаты проверки программы пятьюдесятью антивирусами, включая Касперского, ДрВеб, AVG, Avast, Panda и т.д.:

Скачать демо-версию парсера 2ГИС

Скачать демо-версию парсера 2ГИСЧто вы получаете, покупая у нас программу-парсер ДубльГИС:

Богатый функционал для любых бизнес-задач
Удобный поиск нужных рубрик в огромном списке категорий
Возможность выгрузки по произвольному списку запросов / ключевых слов
Возможность задавать для выгрузки как отдельные города, так и страны/округа/регионы!
Копилка рубрик для наглядности отобранных для выгрузки рубрик: даже при выборе рубрик из разных концов списка, всё остаётся под контролем!
Запоминание отмеченных городов и рубрик при выходе из программы, и восстановление их при запуске. Запускайте несколько копий парсера с разными профилями выгрузки из разных папок, в том числе одновременно!
Рубрика указывается для всех городов один раз, нет необходимости указывать ту же самую рубрику в каждом городе
Корректная обработка ошибок сайта 2гис — программа поставит себя на паузу, пока на сайте идут работы, чтобы не пропустить ни одной компании
Корректная обработка ошибок подключения к сети — парсер поставит себя на паузу, пока вы везете ноутбук из офиса домой, и продолжит сбор после приезда домой
Поддержка работы через прокси-сервер для адаптации к инфраструктуре вашей компании или для обхода блокировки
Корректная обработка ошибок подключения к сети — программа поставит себя на паузу, пока вы везете ноутбук из офиса домой
Возможность сбора почтовых индексов с карт 2гис
Возможность автоматического сбора ИНН с сайтов компаний
Возможность сбора адресов электронной почты email с сайтов компаний, в том числе с защищенных
Возможность задавать количество страниц, сканируемых на сайтах компаний, и менять это количество «на лету» в процессе сбора
Многопоточное сканирование сайтов компаний: до 50 параллельных потоков
Парсер 2гис при сканировании сайтов компаний умеет находить скрытые адреса электронной почты (например такие: office[at]mail, officemail[DOT]ru, office[собака]mail и другие подобные хитрости)
Синхронизация рубрикатора и списка городов с сайтом ДубльГИС
Визуальная индикация прогресса сбора с помощью разноцветных индикаторов
Возможность пропускать ненужные/старые компании с помощью функции skip
Программа автоматически задает имя файла с новой выгрузкой, не нужно искать куда и с каким именем сохранить, чтобы не потерять
Возможность настраивать кодировку файла выгрузки
Возможность выбирать, выгружать все данные в один общий файл, или выгружать каждый город в отдельный файл
Возможность выгружать файлы городов в свои отдельные папки
Программа автоматически открывает файл выгрузки после завершения сбора — невозможно не заметить
Возможность получения выгрузки и в формате Excel, и в формате SQL
Возможность сразу пользоваться собираемыми данными, еще до завершения полного сбора

Прозрачный, интуитивно понятный интерфейс

Надежная работа с любым качеством Интернет-соединения

Поддержка сервиса автоматического распознавания капчи

Высокое качество продукта — гарантия отсутствия глюков/перезагрузок/и т.д.

Возможность оплаты через расчетный счет с закрывающими бухгалтерскими документами

Оперативная бесплатная техподдержка от профессиональных разработчиков

Комплект бонусов — бесплатно при покупке Parser2GIS-стандарт на 1 год или навсегда!

БОНУС! Программа для отбора новых компаний в базе 2ГИС стоимостью 3.500Р — бесплатно!

БОНУС! Программа для склеивания нескольких баз в одну (например, для склеивания баз Абакана, Архангельска и Астрахани в одну базу «А») стоимостью 2.000Р — бесплатно!

БОНУС! Скидки на другие наши программы для сбора контактов — до 3.750Р!

БОНУС! Секретный бонус! Какой? — узнаете после покупки!

Стоимость парсера: от 500 до 4900 рублей в зависимости от выбранных опций!

Дорого это или нет? Давайте сравним, например, со стоимостью рекламы в газете бесплатных объявлений небольшого провинциального города Калуги. Реклама размером 12*18 на внутренней странице обойдется вам в 7.200р (здесь прайс). Потратив эту сумму на объявление в одной газете одного небольшого города, вы вправе рассчитывать на десяток-другой потенциальных клиентов.

Но, вкладывая всего от 500р в приобретение нашей программы, вы получаете доступ к тысячам потенциальных клиентов со всей страны! Протяните руку к телефону — все эти потенциальные клиенты находятся на расстоянии вытянутой руки! Стоят ли эти возможности такой смешной цены? Конечно да, и сотни наших покупателей уверены в этом. Не сомневайтесь, нажимайте кнопку покупки прямо сейчас, и уже через минуту Вы сможете делать выгрузки!


Нажмите кнопку выбранного варианта покупки, оформите заказ на защищённом сервере OnWiz, оплатите заказ в автоматическом режиме, и Вам будет автоматически выслана лицензия. Всего 1 минута отделяет Вас от возможности делать выгрузки!

Выберите подходящий вариант ниженет необходимости переплачивать за ненужные опции!
Лайт-версия, без указанных выше бонусов

Лайт-версия программы отличается от стандартной только тем, что она работает с одним городом, выбранным при покупке.
3 месяца за 500р 12 месяцев за 1000р
ВНИМАНИЕ! Сейчас 2гис выдаёт не более 5 страниц по 12 фирм, в любом списке фирм, по любой рубрике или запросу! Проверьте в браузере: ссылки на страницы дальше пятой например вот шестая 2gis/moscow/search/*/rubricId/5603/page/6 открывают первую страницу, без page! Поэтому выгрузка более 60 организаций с каждой рубрики/запроса сейчас невозможна! Если выгружать по 10 городам по сотне рубрик, можно выгрузить не более 60*10*100 = 60 тысяч фирм. Когда будет снято это ограничение — неизвестно.
Если у Вас есть ранее собранная полная выгрузка, Вы можете её актуализировать парсером организаций по ID фирм!
В нашем новом парсере можно обойти это ограничение и выгружать полные базы! Описание и демо парсера UltraParser2gis здесь.

Стандартная версия программы, без указанных выше бонусов

Стандартная версия программы работает со всеми городами на 2gis.
1 месяц за 500р 3 месяца за 1000р
6 месяцев за 1500р 12 месяцев за 2500р
ВНИМАНИЕ! Сейчас 2гис выдаёт не более 5 страниц по 12 фирм, в любом списке фирм, по любой рубрике или запросу! Проверьте в браузере: ссылки на страницы дальше пятой например вот шестая 2gis/moscow/search/*/rubricId/5603/page/6 открывают первую страницу, без page! Поэтому выгрузка более 60 организаций с каждой рубрики/запроса сейчас невозможна! Если выгружать по 10 городам по сотне рубрик, можно выгрузить не более 60*10*100 = 60 тысяч фирм. Когда будет снято это ограничение — неизвестно.
Если у Вас есть ранее собранная полная выгрузка, Вы можете её актуализировать парсером организаций по ID фирм!
В нашем новом парсере можно обойти это ограничение и выгружать полные базы! Описание и демо парсера UltraParser2gis здесь.

Стандартная версия, ВКЛЮЧАЯ КОМПЛЕКТ БОНУСОВ, перечисленных выше

Стандартная версия программы работает со всеми городами на 2gis.
1 год за 3900р Вечная лицензия за 4900р
ВНИМАНИЕ! Сейчас 2гис выдаёт не более 5 страниц по 12 фирм, в любом списке фирм, по любой рубрике или запросу! Проверьте в браузере: ссылки на страницы дальше пятой например вот шестая 2gis/moscow/search/*/rubricId/5603/page/6 открывают первую страницу, без page! Поэтому выгрузка более 60 организаций с каждой рубрики/запроса сейчас невозможна! Если выгружать по 10 городам по сотне рубрик, можно выгрузить не более 60*10*100 = 60 тысяч фирм. Когда будет снято это ограничение — неизвестно.
Если у Вас есть ранее собранная полная выгрузка, Вы можете её актуализировать парсером организаций по ID фирм!
В нашем новом парсере можно обойти это ограничение и выгружать полные базы! Описание и демо парсера UltraParser2gis здесь.

VIP-версия программы, ВКЛЮЧАЯ КОМПЛЕКТ БОНУСОВ, перечисленных выше

VIP-версия программы работает со всеми городами на 2gis, имеет на порядок (в 10-15 раз) более высокую скорость выгрузки с 2гис, выгружает больше емейлов, поддерживает возможность запуска с параметрами командной строки для автоматизации работы
VIP-версия за 7900р
ВНИМАНИЕ! Сейчас 2гис выдаёт не более 5 страниц по 12 фирм, в любом списке фирм, по любой рубрике или запросу! Проверьте в браузере: ссылки на страницы дальше пятой например вот шестая 2gis/moscow/search/*/rubricId/5603/page/6 открывают первую страницу, без page! Поэтому выгрузка более 60 организаций с каждой рубрики/запроса сейчас невозможна! Если выгружать по 10 городам по сотне рубрик, можно выгрузить не более 60*10*100 = 60 тысяч фирм. Когда будет снято это ограничение — неизвестно.
Если у Вас есть ранее собранная полная выгрузка, Вы можете её актуализировать парсером организаций по ID фирм!
В нашем новом парсере можно обойти это ограничение и выгружать полные базы! Описание и демо парсера UltraParser2gis здесь.
Если у Вас не получается оплатить на сайте Onwiz нажатием кнопки, или Вы хотели бы оплатить по безналу от организации, пришлите заявку с удобным способом оплаты через эту форму:

Имя*
Электронная почта*
Удобный для Вас способ оплаты:
Я даю Согласие на обработку моих персональных данных и подтверждаю ознакомление с Положением об обработке персональных данных*

Ссылка на Согласие. Ссылка на Положение.

Покупатели парсера онлайн-версии 2ГИС, чаще всего покупают парсер офлайн-версии ДубльГис и парсер Яндекс-карт. При покупке несколько программ вы получаете скидку до 50%!

Требуется подобная программа для сбора с другого сайта? Закажите разработку у нас: Заказать!