Шаблон zenno poster для парсинга групп с фильтрацией

Складчина: Шаблон zenno poster для парсинга групп с фильтрацией

На входе - блок с настройками:

На выходе - файл с группами:

Шаблон не закодирован, основная часть на c#.
Работает через vk api, а значит парсинг занимает секунды.

UPD.Шаблон обновлен.

 

Уважаемые модераторы, глубоко извиняюсь, но установите пожалуйста фиксированный взнос в 100 рублей(я не нашел как это сделать)

 

Уважаемый организатор. С удовольствием поучаствую, но только если алгоритм проекта действительно будет открыт для изучения и редактирования. Больше для самообразования беру.

 

Кто из модераторов и оргов готов взять на проверку за отзыв?

 

Насколько я знаю, VK api не позволяет в поисковом запросе указывать тип сообщества, в отличии от стандартного поиска.
Т.е. блок настроек по типу сообщества просто сегментирует выдачу.
Или что-то поменялось в api ?

 

Как раз фильтрацию по типу сообщества vk api поддерживает, а вот остальное фильтрируется на ходу.

поле type

 

О как, добавили наконец.
Просто я в свое время создавал тикет в саппорт о том, что api не поддерживает в запросе тип сообщества и получил ответ, что да так и задумано и пока что менять они это не планируют.

Взял софт на проверку.

 

Спасибо Red_Fox за идеи.Шаблон обновлен.
Добавлено:
-возможность парсинга сразу по нескольким запросам

-возможность парсинга в формат таблиц excel

-новый фильтр: возможность постинга на стене

 

я правильно понял, что этот скрипт собирает адреса сообществ и все?
если нет, то можно расписать этот момент…

 

Если сохранение в текстовый файл - то да.
Если в таблицу excel то парсит доп. данные такие как кол. подписчиков и т.д

 

Мой отзыв по предлагаемому к продаже шаблону.

Изначально я пошел проверяющим из чистого любопытства, т.к. у меня есть свой шаблон для сбора групп VK и мне было интересно взглянуть на реализацию задачи от другого автора.
К слову, свой шаблон я несколько раз задумывался переделать, ибо на момент его создания у меня не было желания разбираться в особенностях программирования внутри ZennoPoster и поэтому разбор xml реализован регулярками (кто разбирается – поймет уровень изврата )
Ну да ладно, хватит лирики…
То что я получил на руки изначально, мне не понравилось, о чем я автору и сообщил. Объясню причины первичного негативного отношения. Шаблон первой редакции был заточен на получение информации по одному ключу. Мое же видение данного вопроса – нужна массовость и набор ряда дополнительных параметров для запроса, чтобы иметь возможность сбора базы под различные задачи. Все свои мысли я изложил автору и предложил переделать шаблон.
В несколько итераций был получен текущий вариант шаблона, который как я понимаю, будет финальным и будет раздаваться участникам данной складчины.
Характеристики шаблона:
- все настройки через окно входных параметров
- автоматическая авторизация через мобильное приложение
- работа в один поток

Настраиваемые параметры:
- список ключей. каждый задается с новой строки
- публичность сообщества (открытое / закрытое / не имеет значения)
- тип сообщества (группа / страница / встреча / не имеет значения)
- стена (открыта / закрыта / не имеет значения)
- возможность задания ограничений по количеству участников как сверху так и снизу
- настройка выходных параметров
- сохранять полные пути или только id сообществ
- выходной файл либо txt, либо csv

Заявленный функционал протестирован в работе. Тестовые прогоны не несли под собой цели сбора реальной базы и выполнялись только для проверки работоспособности шаблона.

ЗЫ: Касательно автора шаблона…в процессе работы над новым функционалом, новые версии для тестирования клепались достаточно оперативно, что косвенно характеризует его уровень знаний ZennoPoster.

 

Отзыв на материал.

Мной был получен шаблон, уже конечной сборки. Фокс уже перечислил характеристики и особенности, поэтому повторять их не буду. Скажу только, что вся заявленное присутствует.
Что касается работы шаблона, работает быстро, очень быстро на мой взгляд, меня сначала удивила даже такая скорость, но вспомнил, что основная часть реализована на С.
Парсил я группы по 3-4 пересекающимся ключам, указав при этом количество участников, необходимое мне, и выводил результат в таблицу. Время работы не превышало секунд 30 по ощущениям, прогонял подряд раз по 5 по разным запросам. Количество результатов варьировалось от 700+ до пары тысяч сообществ.

В целом работа понравилась, быстро четко и то, что нужно получается и цена не высокая, так что автору + за материал.

 

Уважаемый ТС,
Есть ли возможность добавить функци парсить админов вместе с группами ?

 

Там немного с этим запутано, апи как таковых админов не возвращает, а возвращает помоему только контакты(или как то так).

 

Реально работает.
Сначала (как у новичка) возникли неувязки, но Орг.оперативно отвечает.
Я доволен!

 

Теперь бы шаблончик для рассылки еще)

 

Скорее всего будет.