[ZennoPoster] Парсер женских фото с dating-сайта с автосортировкой

Складчина: [ZennoPoster] Парсер женских фото с dating-сайта с автосортировкой

Здравствуйте, уважаемые одноклубники!
Первая складчина на первый мой шаблон
P.S. я не гений в ZP, еще только учусь, так что сильно прошу не пинать )

Предлагаю небольшой шаблон по парсингу женских фотографий с одного сайта знакомств.
Функции шаблона:
1. Сбор ссылок на все женские анкеты
2. Сбор ссылок на фотографии с собранных анкет
3. Скачивание фотографий по собранным ссылкам
4. Сортировка фотографий по уникальным папкам (в каждой папке фото только одной конкретной девушки)

Спойлер: Скрин входных настроек

Данные по шаблону:
Писался и проверялся в работе на ZP 5.9.9.1 и 5.10.2.0
Шаблон работает без использования браузера - только GET-запросы и регулярки (минимальный расход трафика и высокая скорость работы)
Шаблон будет привязан и доступен только на выполнение
Шаблон работает только в 1 поток
В комплекте с шаблоном будет идти небольшая текстовая инструкция по функциям и настройке.
Основные подсказки по шаблону прописаны во входных настройках (на скрине часть видна). Настроек минимум.

Вопросы - Ответы
Будет ли ZennoBox - нет, не планировалось
Будет ли работать на демо-версии - да, должен
Будет ли поддержка шаблона - да, правки вносится будут, если будет необходимость
Будет ли развитие шаблона - глобальных изменений пока не планирую
Нужны ли доп. затраты - нет, кроме наличия ZennoPoster больше ничего не надо
Что за сайт, откуда парсим - скажу после проверки тремя оф. проверяющими
Много ли фотографий, анкет - около 6 000 анкет, около 66 000 фотографий
Какого качества фото - хорошего качества
Есть ли ню-фото - не нашел таких, все в одежде, хотя одежда разной длины, открытости и откровенности
Кому пригодится шаблон - многим, кто занимается как dating-направлением в соц. сетях, так и просто работает с женскими аккаунтами, кому необходима именно серия фотографий одной девушки
Возраст, ГЕО девушек - 20-40 лет, РФ, Украина (может СНГ)
Сколько фотографий в анкете - по разному, у кого-то 5-10 шт, а есть и по 35 фотографий на анкете.
Парсинг происходит с сайта

Шаблон готов. Ищу 3-4 официальных проверяющих с ZP

ОТЗЫВЫ

Первый
Второй
Третий

 

Сбор всех анкет - около 12 минут
Сбор всех ссылок на фото - пару часов, может часа 3-4 (не замерял точную цифру)
Скачивание - тут от интернета зависит
Автосортировка - очень быстро.

мало, там каждый день плюс-минус 1-2 анкеты. Но опять же - специально не отслеживал, просто при парсинге анкет заметил разное количество строк.

 

@kapelan28, готов проверить. ZP имеется.

 

Как насчет водяных знаков? Работаю только с чистыми фотками... Если есть, то каков примерно процент? Спасибо.

 

Сколько фотографий просматривал - все чистые в этом плане, ни одной пока не попалось с водяными знаками, да и сами фото, такое впечатление, что сделаны на зеркальный фотоаппарат.
Все 66000+ фотографий я так и не скачал до сих пор, да и смотреть такой объем долго очень.

 

@starters @Mr-Grey @Рогожкин - не хотите выступить в качестве оф. проверяющих?

 

Спасибо
Взял на проверку другую тему
больше 1 не беру

 

Понятно, если будет возможность взять на проверку - пиши.

 

Привет. Тоже не могу, сильно загружен. Но почитал описание, за такую цену может и сойдёт, но если по хорошему, то мало входных настроек, чтобы настроить парсинг под себя.. Нужно хотя бы регулировку возраста вручную, гео на выбор, побольше сайтов для парсинга, регулировка по количеству фото, какие нибудь проверочки на качество, уникализацию (так как эти 6 тысяч анкет спарсят и проспамят, оглянуться не успеешь). Удачи с проверкой

 

На счет всего перечисленного - буду под другой сайт делать, постараюсь там реализовать этот функционал (или хотя бы его часть). На счет уникализации - думал на эту тему, но у меня под рукой есть другой бесплатный софт, который уникализирует не хуже ЗП (ты про него сам говорил еще в первом курсе). Да это и логично - скачал фотки, прогнал через уникализацию. Глупо использовать их как есть.

 

Поучаствую, нужный инструмент. Из ВК и ок процентов 60-70 достойных фоток заспамлены

 

Это смотря чем и как отбирать, а также уникализировать)

 

Ну уникализация не есть проблема при наличии материала. И средства для этого озвучены не раз.

 

Ты прав. Но если при парсинге использовать умный алгоритм, то упомянутые тобой соц. сети еще парсить и парсить. В одноклассниках только сотня миллионов аккаунтов, которые можно использовать. Если интересно, смотри мою подпись. Будет Жарко)

 

По просьбе проверяющих добавил в шаблон возможность сбора анкет по указанному интервалу возраста (правда, это серьезно замедляет скорость сбора на первом этапе), поэтому сделал выбор режима сбора - всех подряд или по указанным годам.

Спойлер: Настройки шаблона

 

Логику измени. Если хочешь, могу помочь.

 

Уже думаю над этим вопросом, если что - напишу в ЛС.

 

Шаблон выдан на проверку четырем проверяющим, так что ждем результаты и отзывы.

 

Отзыв:

Свой уровень владения информацией и навыками: в данной области вы: новичок, теоретик либо опытный практик?

Шаблон сам не пишу.

В каком виде предоставлен материал и насколько удобно он оформлен?

Шаблон и инструкция.

Сколько времени заняло изучение и выполнение заданий данного инфопродукта?
Насколько легко усваивается материал, вызвал ли он какие-либо затруднения при проверке?

Шаблон понятен. Инструкция есть но смело можно и без него.

Сколько времени заняло достижение заявленного автором результата?

1 час 40 минут. 27 анкет или 506 фоток с небольшими перерывами. Шаблон работает в 4 этап. Каждый этап запускат вручную.

Нужны ли специальные навыки и дополнительные материальные вложения?

Нет.

Оказывал ли автор должную поддержку в процессе проверки?

Да. Правки. Вынес предложения, если допольнит - напишу.

Каковы в целом общие впечатления о компетентности автора?

Автор компетентен.

Материал полностью соответствует заявленному автором описанию и пригоден для проведения складчины.

Если будут вопросы, пишите свой вопрос с

Код:

@Basill

С удовольствием отвечу!