Парсер аватарок VK
2908 UAHТребуется написать многопоточный парсер для vk (40 потоков). Парсер должен работать на Ubuntu 18.04. В парсер подаются ссылки для парсинга юзеров, ссылки на их профили. Проработанные ссылки должны удаляться из списка. Парсер должен скачивать аватарку юзера, и десять последних аватарок (фотки, которые были аватарками, если листать вправо).
Фотографии должны сохраняться в папки, один юзер = одна папка, папка должна называться номером профиля юзера, например, vk.com/xxxxxx/, значит папка будет называться xxxxxx.
Авторизация не нужна, но если попадается юзер у которого аватарки доступны после логина, то ссылка на него должна сохраняться в отдельный текстовый файл, в котором находится список таких же юзеров. Один поток, это всегда = один прокси = один юзерагент, одинаковые. Количество потоков должно регулироваться в конфиге. Прокси так же должны браться из списка. Список прокси оформить в файлик формата JSON, прокси приватные с логином и паролем. Заготовить юзерагентов нужно Вам, в инете есть список актуальных самых популярных юзерагентов. Парсер в минуту должен обрабатывать 40 аккаунтов, желательно парсер реализовать в виде скрипта, который я просто буду запускать кроном раз в минуту.
Если профиль юзера не закрыт, то фотки скачиваются согласно алгоритму описанному выше, если закрыт, то скачивается та фотка, которая видна - одна актуальная аватарка юзера.
Должен быть файл ошибок, в котором должны писаться прокси, если они не работают.
При начале работы выдаю сервер VDS, прокси 40 штук, с авторизацией по логину и паролю. Сервер с LAMP, если вам нужно установить еще какие то компоненты, то ставьте, в таком случае вам нужно написать подробную инструкцию как установить парсер на аналогичный сервер с нуля.
Интерфейс для человека не нужен
Відгук замовника про співпрацю з Сергеем Забирниковым
Парсер аватарок VKРекомендую до співпраці, зацікавлений в якісному результаті для клієнта. Проект виконаний більш ніж на відмінно
Профіль видалено | Сейф
Відгук фрилансера про співпрацю з замовником
Парсер аватарок VKЧудовий замовник, рекомендую всім.
-
662 27 0 Привітання, готовий виконати цей проект.
Для уточнення деталей проекту та повної вартості іїшіть в ЛС або...
Скайп Spider13software
ІККК 3533966
Телеграм @spider13software
Сайт HTTPS://spider13.net/
Здравствуйте, готов выполнить данный проект.
Для уточнения деталей проекта и полной стоимости иишите в ЛС или...
Скайп spider13software
icq 3533966
Телеграм @spider13software
Сайт https://spider13.net/
-
если на компе нет 40 ядер, то смысла в 40 потоках нет. 1 ядро = 1 поток, если 1 ядро - 2 потока, то эти 2 потока будут выполняться друг за другом, что ломает суть одновременной работы
-
что за бредятина, у меня аналогичный парсер на php только еще с авторизацией и работой по api, в 40 потоков работает на VDS KVM на одном ядре с одним гигом оперативы, обрабатывает 40 аккаунтов в минуту, а этот парсер еще проще. Если Вы не компетентный в этом деле, не пишите бред и не смущайте людей
-
Актуальні фриланс-проєкти в категорії PHP
Натягнути готову верстку на движок Simpla
5000 UAH
Потрібно натягнути готову верстку на движок Simpla. Підключити весь необхідний функціонал згідно макета і оптимізувати завантаження сайту згідно Google Page Speed - Приклад макета - http://surl.li/uufz PHP, Веб-програмування |
Налаштувати магазин Wordpress/WooCommerceВстановити та налаштувати Wordpress (тема Phlox Pro) + WooCommerce Налаштути переклад українською, вигляд головної сторінки, картки товару, та каталогу товарів. Налаштувати процедуру оформлення замовлення. Додати модулі доставки Нова Пошта, Укрпошта, оплати (Еквайринг от моно),… PHP, Веб-програмування ∙ 5 ставок |
"Magento 2.4.6 додавання товару через атрибути»"Проблема: На сайті присутній великий вибір продуктів, які можуть продаватися разом з іншими продуктами. Потрібно додавати продукти через атрибут у конфігураційному продукті. Наприклад: Комп'ютерна миша доступна в різних кольорах, і до неї можна придбати килимок для миші (при… PHP, Веб-програмування ∙ 3 ставки |
Розробити скрипт під WordPress CMS + Google maps API + MySQLМи потребуємо код для веб-сайту на WordPress. Поточний (демо) веб-сайт https://e-ztrans.com/ базується на деякій саморобній CMS. Ми намагаємося перевизначити й зробити його надійнішим. Я надам доступ до панелі адміністратора поточного веб-сайту, а також вихідного коду поточної… PHP, Веб-програмування ∙ 3 ставки |
Додати розділ на сайт
3000 UAH
1. Додати розділ https://www.vitajuwel.us/sana на сайт https://vitajuwel.com.ua/ 2. Виправити центральний слайдер. Сайт на Laravel. Значення по пейджспіду не повинно зменшитися. PHP ∙ 5 ставок |