Сообщений в теме: 6

[redirect]

Всем привет

 

Возникла задача

Есть список пользователей ВК

Нужно из них вытащить тех, в статусе которых (не семейное положение, а текст под именем-фамилией) есть одно из нескольких ключевых слов. Например, "продам, сдам, научу и т.д."

 

Как это можно сделать?

[pohlebkin]

php-скрипт (или шаблон зенки) заходит на страницы всех этих пользователей

парсит html-код страницы, строку со статусом из этого html-кода выделить элементарно

далее так же элементарно ищется вхождение ваших ключевых слов в этой строке

 

без захода скрипта на каждую страницу не обойтись, апи вконтакте не дает возможности фильтровать пользователей по тексту в строке статуса

[RusZarj]

php-скрипт (или шаблон зенки) заходит на страницы всех этих пользователей

парсит html-код страницы, строку со статусом из этого html-кода выделить элементарно

далее так же элементарно ищется вхождение ваших ключевых слов в этой строке

 

без захода скрипта на каждую страницу не обойтись, апи вконтакте не дает возможности фильтровать пользователей по тексту в строке статуса

Я бы сделал методом users.search и в параметр fields добавил status, получая сразу от 1к до 20к статусов за 1 запрос (зависит простой запрос или экзекут)
Далее продвигаться оффсетом.

Если использовать НЕ апи вк - будешь годами парсить, тут только апи, без вариантов.

Но если ты мазохист и хочешь на каждую страницу делать отдельный запрос статуса - юзай метод status.get

[Тони]

закажи у RusZarj шаблон и не парься

он в этих делах не первый год крутится

[pohlebkin]

Я бы сделал методом users.search и в параметр fields добавил status, получая сразу от 1к до 20к статусов за 1 запрос (зависит простой запрос или экзекут)
Далее продвигаться оффсетом.

Если использовать НЕ апи вк - будешь годами парсить, тут только апи, без вариантов.

Но если ты мазохист и хочешь на каждую страницу делать отдельный запрос статуса - юзай метод status.get

 

вы правы, так намного эффективнее

 

redirect писал что список пользователей уже есть готовый, как в этом случае использовать users.search?

[RusZarj]

вы правы, так намного эффективнее

 

redirect писал что список пользователей уже есть готовый, как в этом случае использовать users.search?

Сообщение ТСа прочёл не очень внимательно, отвечал в основном тебе.

В случае с готовым списком пользователей получится максимум 25 пользователей за запрос, максимум 3 запроса в секунду, следовательно максимум 75 пользователей в секунду. 
При таком раскладе (в 3 потока) спарсить 50к статусов должно примерно за 12-15 минут, если нужно быстрей - то вариант только парсить с дополнительных аккаунтов, на каждый акк свой прокси, тогда можно масштабировать настолько, насколько хватит ресурсов компа или дедика.7

[marshmellow]

Всем привет

 

Возникла задача

Есть список пользователей ВК

Нужно из них вытащить тех, в статусе которых (не семейное положение, а текст под именем-фамилией) есть одно из нескольких ключевых слов. Например, "продам, сдам, научу и т.д."

 

Как это можно сделать?

 

А зачем так усложнять? В том же таргетхантере есть функция "поиск по статусу" заливайте туда свою базу и проработайте её по своим запросам. Берёте любой ключик из гугла на 2 бесплатных дня - вам с головой хватит.