Скрипт для массовой проверки доменов - Ahrefs API
Задача: Создать скрипт по массовой проверке доменов с использованием сервиса Ahrefs API (есть платный аккаунт).
Сервис ahrefs позволяет проверять за 1 раз (10 секунд новый запрос) прямо из веба не более 200 доменов. На обработку 200 запросов уходит 2-3 секунды, в результате чего мы получаем таблицу, с которой возможно работать прямо из веба (сортировка по 24+ параметрам), также, мы можем сохранить ее в UTF-16 for Microsoft Excel.
Нам необходимо обрабатывать большие объемы доменов, речь о 300К+ доменов на предмет нужных нам параметров в виде условий (например, отбираем домены с параметром не менее X).
На входе у нас может быть список в виде csv файла. Сохранение и выборку доменов на начальном этапе мы будем производить только по 1 параметру, но в будущем нам возможно потребуется выборка и по другим параметрам.
На выходе мы должны получать CSV файлы с 15К строк, в последующем планируем загружать их в Google Sheets для ручного отбора доменов, пример загружен к проекту - batch_analysis_export.utf-16.csv, только для доменов с параметром Domain Rating (desc) не менее 5.
Описание веб сервиса https://help.ahrefs.com/en/articles/79506-how-many-domains-urls-can-i-analyse-with-the-batch-analysis-tool
Документация Ahrefs API: https://ahrefs.com/api/documentation
Также было бы интересно рассмотреть ваш альтернативный вариант по сохранению и последующей работе с доменами и их ручным отбором.
Додатки 2
-
Добрый вечер, а уточните. 300к+ это грубо говоря за один раз вы такой список можете скормить? Или имеется ввиду образно за месяц
-
Актуальні фриланс-проєкти в категорії PHP
Адмінка для статейного сайтуДобрий день. необхідно написати адмін панель для ігрового статейного сайту (сайт цей - https://themeforest.net/item/goodgames-portal-store-html-gaming-template/17704593) В адмінці повинно бути: 1. **Управління користувачами:** - Створення нових користувачів. -… HTML та CSS верстання, PHP ∙ 4 ставки |
Laravel + VueJS + InertiaJS ``` Ларавель + В'юДжеС + ІнерціяДжеСGood day, the project is written, it is working and ready to launch. Except for one nuance. SSR(Server Side Rendering) works very slowly, when launching a bot to check the load - the site crashes after 3-4 minutes. If you restart SSR during the check, it works but very slowly.… Javascript, PHP ∙ 2 ставки |
Змінити логіку акції 1+1=3Відео про те, що потрібно зробити https://www.loom.com/share/e73bc4b1b04c49f7b78acf95e9ce7d15?sid=73b5c8ee-c7c5-4518-86ef-acfc7ffda194 Якщо коротко, то потрібно змінити логіку акції 1+1=3 Наразі при додаванні 2-х піц 40см, вистрибує модалка де юзер може обрати собі 30-ку в… PHP ∙ 1 ставка |
Реалізувати інтеграцію 1c та Woocommerce |
Розробник Laravel з навичками роботи з SphinxУсім доброго часу доби, шукаю розробника Laravel, який зможе допомогти доробити поточний функціонал одного з проектів. Важливі навички роботи з Sphinx, а також вміння працювати з JS на більш-менш базовому рівні. У ставці будь ласка текстом вказуйте вартість 1 години вашої… PHP, Веб-програмування ∙ 2 ставки |