SocksNode
Justmetrically logo
API данных

Justmetrically

Управляемый сбор веб-данных и конвейеры с ИИ — сразу в ваше хранилище, дашборды или API.

Justmetrically — компания корпоративных услуг по данным. Они прорабатывают и строят индивидуальные процессы сбора, чистят и нормализуют результат с помощью ИИ и отдают готовые наборы данных в BigQuery, Snowflake, Sheets, webhook или ваш собственный API. Их конвейеры обрабатывают более миллиона записей в день, а сотрудничество начинается с ограниченной проверки, а не с подписки.

Остальное собирайте через SocksNode

Четыре шага. Страна в логине возвращает локальную версию страницы, а постоянный порт держит один адрес на всю задачу.

  1. 1

    Откройте настройки прокси в скрейпере, скрипте или агенте, который обрабатывает страницы вне покрытия Justmetrically.

  2. 2

    Выберите HTTP или SOCKS5. Хост: global.socksnode.com. Порт 10000 (HTTP) или 12000 (SOCKS5) держит один IP на сессию.

  3. 3

    Вставьте логин и пароль прокси из панели SocksNode, добавив нужную страну, например USERNAME-country-de.

  4. 4

    Пропустите одну страницу через прокси, проверьте, что цена и язык локальные, затем запускайте задачу параллельно с вызовами Justmetrically.

Настройки прокси для сбора данных

Хост
global.socksnode.com
Порт
10000 (HTTP) · 12000 (SOCKS5)
Логин
USERNAME-country-de
Пароль
••••••••

Добавьте -session-9f2a41c7-lifetime-30 к логину, если задаче нужно несколько запросов с одного адреса.

Почему Justmetrically и SocksNode хорошо работают вместе

  • Конвейер, который ведёт кто-то другой

    Justmetrically прорабатывает, строит и контролирует сбор по источникам из договора. Там, где ваша команда собирает что-то сама, прокси SocksNode дают каждому скрипту свою точку выхода.

  • Страница такой, какой её видит местный

    Цена, наличие и язык меняются от страны к стране. Sticky-сессия SocksNode на нужном рынке возвращает местную версию страницы, и то, что вы проверяете вручную, совпадает с тем, что присылает конвейер.

  • Проверить цифру, не ждав следующего запуска

    Если число на дашборде выглядит странно, откройте исходную страницу сами из той же страны через прокси SocksNode. За минуту станет ясно, изменились данные или сайт.

Пример: управляемый конвейер и ваши собственные проверки

Justmetrically отдаёт источники из договора. SocksNode закрывает то, что вы смотрите сами.

  1. 1

    Согласуйте с Justmetrically источники, схему и место доставки и пусть конвейер работает по расписанию.

  2. 2

    Чтобы проверить присланную запись, создайте sticky-прокси SocksNode в той же стране: хост global.socksnode.com, порт 10000 (HTTP), логин USERNAME-country-de-session-9f2a41c7-lifetime-30.

  3. 3

    Откройте исходную страницу через эту сессию, чтобы она показала местную цену, язык и наличие.

  4. 4

    Сравните с присланной строкой и о любом расхождении сообщите своему контакту в Justmetrically.

Вопросы о Justmetrically и SocksNode

Нужны ли прокси, если сбором занимается Justmetrically?

Для источников из договора — нет, именно за их работу вы и платите. Они нужны, когда ваша команда собирает что-то параллельно, и всякий раз, когда нужна страница ровно в том виде, в каком она открывается в одной стране или городе.

Какие прокси SocksNode подходят для работы с данными?

Ротируемые резидентные в sticky-сессии, когда задаче нужно несколько запросов с одного адреса, и ротирующаяся сессия, когда не нужно. Серверные дешевле и подходят сайтам, которые не возражают.

Можно ли использовать обоих в одном проекте?

Да. Обычно тяжёлые регулярные источники отдают управляемому конвейеру, а свой небольшой скрейпер за прокси SocksNode оставляют на длинный хвост.

Другие партнёры

Делаете инструмент для пользователей прокси?

Разместите свой продукт здесь и поставьте ссылку на нас у себя. Пришлите нам сайт и пару слов о продукте.

Стать партнёром