[PHP] Скрипт сбора информации с сервиса «Мой Мир». 100 000 контактов в сутки

Скрипт предназначен для сбора информации о пользователях любой группы.

Какая информация собирается:

1. Email
2. Имя Фамилия
3. Дата последнего входа в «Мой Мир»
4. Статус – онлайн

Основные потребители скрипта наверное те кто занимается email маркетингом, но возможно кто-то найдет ему другое применение)

Устанавливается на любой хостинг, поддерживающий cURL и имеющий планировщик.
Указанная производительность скрипта проверялась на хостинге евробайт, скрипт запускался раз в минуту.

Бонус: для тех кто поставит в подпись или прорекламирует в 3-x профильных темах:
в скрипт будет добавлена функция проверки контактов в mail-agent на статус online

PS Ищутся три проверяющих

 

могу проверить
сам хотел такой парсер написать но всё лень не давала начать процесс

 

Еще бы парсер ссылок на группы)))
Вещь бомба для баз ретаргета на фейсбук.

 

это как?

ок, принято)

 

Ну я так понимаю скрипту надо указывать ссылки на группы, верно?

 

Интересно, поставил в подпись

 

я планировал сделать так
скрипт сам начинает парсинг по группам
выбирает группы из поиска , парсит мыльники , потом его друзей и так далее по цепочке

 

это да, а что ты имел ввиду парсер ссылок на группы
вот эти ссылки парсить?

это мега круто

 

@instocky ,могу стать неоф проверяющим

 

ок, похоже это модно становится)

 

Ха...сам не практиковал что ли)))

 

Готов поучаствовать в проверке!

 

Если осталось место - могу проверить.

 

смотрю проверяющих больше чем участников.

Автор: 1.Как взнать поддерживает ли хостинг cURL, ведь большинство об этом не пишут даже ?
2. а планировщик зачем? его нельзя запускать когда хочеш, по требованию.? Тоесть запустил на парсинг парочки груп, пришел через час, снял результат в xls файле.. Обязательно в cron прописывать?

 

1. 99% поддерживают cURL. Самый простой способ узнать до покупки - задать вопрос в онлайн чате или по телефону. Если хостинг уже есть - написать вопрос в техподдержку
2. На обычном хостинге(не VDS) действует ограничение на время выполнения скрипта - обычно 30 секунд.
   Если скрипт длится дольше - хостер его просто выключает..

 

Думаю те кто пользуется парсером и собирает ящики должен уже понимать что хостинг за 15 рублей для такие задачи не подходят
Можно за 150 рублей купить ВПС и иметь полный доступ без ограничений

 

ну как бы скрипт тестировал именно на обычном хостинге

• скопировал в папку скрипт
• запустил планировщик раз в минуту
• через 24 часа получил 100 000 mails

 

Там в настройках php можно изменять время жизни, даже на обычных хостингах.. Но не на всех. главное был бы доступ к php.ini
А вообще несколько способов есть как его увеличить. Вплоть до указания использовать вначале выполнения скрипта, функции void set_time_limit( int seconds ), которая меняет значение параметра max_execution_time

p.s. И таки да, ВПС же у всех кажется кто на складчике вертится.. Или есть такие кто собирался работать-зарабатывать, и 150р на хост зажыдить?

 

@instocky
не совсем поняла, как начинается парсинг, что служит основой для старта. может ли он обойти пользователей определенной группы, или по перечню групп? как решается проблема текущего ограничения, на вывод числа участников группы в 500 ед/еще два года назад было 10000 (и дальше нужно варьировать имя его черех поиск, чтобы еще взять какую то выборку). Что мешает добавить в сбор информации акка еще возраст и город (пусть даже это и не везде есть, но это крайне важно, хотя бы опционально)? Спасибо.

 

Скриптом собираю себе первичную базу для рассылки и делал естественно под себя, чтобы не заморачиваться - беру большие группы. Поставил на 1-5 дней и забыл))

Теперь думаю сделать, пока есть список групп, с которых не собрана информация - скрипт будет работать.

скрипт собирает полностью участников из группы

ничего не мешает - добавлю