MonsterParser2Gis - многопоточный парсер 2 гис + доп. парсер Email (работает на API) Доступ навсегда

Тема в разделе "Бизнес и свое дело", создана пользователем zennomonster, 18 янв 2019.

Статус обсуждения:
Комментирование ограничено.
  1. 24 фев 2019
    #41
    Goodu
    Goodu ЧКЧлен клуба
  2. 25 фев 2019
    #42
    intelligent man
    intelligent man ОргОрганизатор
    @zennomonster, мало столбцов, надо доработать ваш распарс данных. На дворе уже 2019 год, надо делать не хуже конкурентов. Отметил оранжевым то, чего у вас нет, прошу доработать парсер.
     

    Вложения:

    2 пользователям это понравилось.
  3. 26 фев 2019
    #43
    zennomonster
    zennomonster ЧКЧлен клуба
    Всем привет! Хорошие новости))

    Проверка почти завершена и скоро будем стартовать

    За время проверка скрипт был значительно дополнен и улучшен

    + В базу добавлено поле "Страна"
    + В интерфейс добавлена видео инструкция по работе с программой
    + Добавлена возможность продолжить предыдущий парсинг (можно парсить большую базу в несколько подходов)
    + Добавлен прогрессбар. Шкала, на которой видно как много компаний уже собрано и сколько осталось
    + Добавлена кнопка для удобного закрытия программы (раньше нужно было нажимать правой кнопкой -> закрыть). Теперь просто одна кнопка
    + Улучшен алгоритм парсинга. Благодаря этому не будет проблем при парсинге больших объёмов данных

    Большое спасибо проверяющим за активность и обратную связь!

    P.S. Если Вы ещё не прорекламировали тему для получения бонуса, сейчас самое время ;)
     
    1 человеку нравится это.
  4. 26 фев 2019
    #44
    Mozgovik
    Mozgovik ЧКЧлен клуба
    А что на счёт наших просьб по улучшению?
    Если мобильные телефоны свалены в одну кучу с городскими,
    и их надо сортировать как-то самостоятельно,
    то ценность такого парсера резко снижается.
     
  5. 26 фев 2019
    #45
    zennomonster
    zennomonster ЧКЧлен клуба
    Сейчас как раз работаю по Вашей просьбе)) Добавлю все указанные Вами поля, кроме подраздела и раздела

    По остальным полям согласен, нужные и полезные поля. По разделам - есть рубрика. Добавлять разбивку по разделам очень трудозатратно и не столь актуально на мой взгляд
     
    2 пользователям это понравилось.
  6. 26 фев 2019
    #46
    zennomonster
    zennomonster ЧКЧлен клуба
    Хотя нет, в принципе можно добавить и это... Добавлю все поля, которые Вы указали. В том числе "Сотовый телефон"
     
    3 пользователям это понравилось.
  7. 26 фев 2019
    #47
    zennomonster
    zennomonster ЧКЧлен клуба
    Закончил обновление по Вашей просьбе. Добавил все поля кроме раздела и подраздела... Их добавить не получилось.

    В итоге парсер сейчас выдаёт таблицу со следующими полями:

    - Название
    - Тип
    - Страна
    - Регион
    - Город
    - Адрес
    - Раздел
    - Подраздел
    - Рубрика
    - Email
    - Телефон
    - Сотовый
    - ФИО директора
    - ВКонтакте
    - Facebook
    - Instagram
    - Twitter
    - Сайт
    - YouTube
    - Одноклассники
    - Рейтинг
    - Количество отзывов
    - Количество филиалов
    - Широта
    - Долгота
    - ID
    - Ссылка на организацию
     
    2 пользователям это понравилось.
  8. 26 фев 2019
    #48
    Mozgovik
    Mozgovik ЧКЧлен клуба
    Отлично! А скриншотик не сделаете?
    Широта & Долгота - это конечно самые важные функции для спамера/фрилансера/маркетолога.
    Без них, как без рук. В ковычках.
    Всё что ни поподя зачем делать, для количества?
     
  9. 26 фев 2019
    #49
    intelligent man
    intelligent man ОргОрганизатор
    Отлично, но вам надо логично рассортировать порядок столбцов и возможно изменить некоторые названия столбцов. Ориентируйтесь на список, который я скидываю под спойлером, он из известного парсера конкурента.

    Дата обновления
    Дата добавления
    Название
    Тип
    Страна
    Регион
    Населенный пункт
    Район
    Индекс
    Адрес
    Комментарий к адресу
    Раздел
    Подраздел
    Рубрика
    Ключевое слово
    Телефоны
    Сотовый
    Метро (остановка)
    Email
    Сайт
    Vk.com
    Twitter.com
    Facebook.com
    Instagram.com
    X
    Y
    Количество филиалов
    Рейтинг
    Количество отзывов
    Главное фото
    Средний чек
    Дополнительно
    Время работы
    Заголовок
    Информация
    Описание
     
  10. 26 фев 2019
    #50
    zennomonster
    zennomonster ЧКЧлен клуба
    Держите скрины. Новые столбцы это не всё что не попадя... Сделал по просьбе одного из участника складчины. Плюс разным людям под разные задачи нужны разные столбцы с данными... Кому то, например, может быть нужен рейтинг и количество отзывов))

    У меня всё достаточно логично отсортировано, спасибо.
     

    Вложения:

    1 человеку нравится это.
  11. 26 фев 2019
    #51
    intelligent man
    intelligent man ОргОрганизатор
    Не логично, сайт засунули в социалки и отцепили от почт, которые идут с них. Сайт и Email надо сделать перед столбцом ВКонтакте. А столбец Город надо переименовать в Населенный пункт, так как там идут названия не только городов, а поселков, деревень и т.п.
     
  12. 26 фев 2019
    #52
    intelligent man
    intelligent man ОргОрганизатор
    @zennomonster, вопросы:
    1) Когда-то выйдет из беты новая версия 2ГИС Скрытая ссылка Что потом будет с вашим парсером?
    2) Может вы еще сделаете новый парсер по Яндекс.Картам (новая отдельная складчина)?
     
  13. 26 фев 2019
    #53
    zennomonster
    zennomonster ЧКЧлен клуба
    1) АПИ у 2гиса под новую бету уже обновилось, скрипт написан под новый апи, я его полностью переписал
    2) Да, есть такое в планах в ближайшем будущем. Для начала нужно провести эту складчину, потом буду заниматься следующим продуктом
     
    1 человеку нравится это.
  14. 26 фев 2019
    #54
    intelligent man
    intelligent man ОргОрганизатор
    @zennomonster,
    1) https://v21.skladchik.org/threads/m...pi-Доступ-навсегда.221129/page-3#post-7066967 прочитали это сообщение? :oops:
    2)
    Я его больше жду, чем 2ГИС, так как среди парсеров 2ГИС, есть выбор. А вот среди парсеров Яндекс.Карт, выбор меньше и я бы купил такой :)
     
  15. 5 мар 2019
    #55
    kamalovbiz
    kamalovbiz ЧКЧлен клуба
  16. 21 мар 2019
    #56
    skayskan
    skayskan ДолжникДолжник
    На правах рекламы:
    Отличная возможность научиться писать шаблоны для Zennoposter по гуманной цене:
    ZennoPoster+ C#. Разбор по косточкам 2.0: больше участников - дешевле.
    Записываемся, ставим в подпись по доброте душевной и сбиваем цену до минимума - всё как в лучших традициях складчика.
     
  17. 21 мар 2019
    #57
    specialist
    specialist ЧКЧлен клуба
    2 пользователям это понравилось.
  18. 29 мар 2019
    #58
    kamalovbiz
    kamalovbiz ЧКЧлен клуба
  19. 29 мар 2019
    #59
    zennomonster
    zennomonster ЧКЧлен клуба
    Привет! Скоро старт, думаю примерно через неделю
     
    1 человеку нравится это.
  20. 12 апр 2019
    #60
    intelligent man
    intelligent man ОргОрганизатор
Статус обсуждения:
Комментирование ограничено.