Justmetrically logo
API de Dados

Justmetrically

Recolha de dados da web gerida e pipelines com IA, entregues no seu armazém, painéis ou API.

A Justmetrically é uma empresa de serviços de dados para organizações. Define e constrói fluxos de recolha à medida, limpa e normaliza o resultado com IA e entrega conjuntos de dados prontos no BigQuery, Snowflake, Sheets, num webhook ou na sua própria API. Os pipelines processam mais de um milhão de registos por dia, e a colaboração começa com uma validação delimitada em vez de uma subscrição.

Colete o restante com a SocksNode

Quatro passos. Um país no usuário retorna a versão local da página, e uma porta fixa mantém um endereço para toda a tarefa.

  1. 1

    Abra as configurações de proxy do scraper, script ou agente que busca as páginas que o Justmetrically não cobre.

  2. 2

    Escolha HTTP ou SOCKS5. Host: global.socksnode.com. Porta 10000 (HTTP) ou 12000 (SOCKS5) mantém um IP para a sessão.

  3. 3

    Cole seu usuário e senha de proxy do painel da SocksNode, adicionando o país desejado, por exemplo USERNAME-country-de.

  4. 4

    Rode uma página por ele, confira se o preço e idioma são locais, depois deixe o trabalho rodar junto com suas chamadas Justmetrically.

Configurações de proxy para coleta de dados

Host
global.socksnode.com
Porta
10000 (HTTP) · 12000 (SOCKS5)
Usuário
USERNAME-country-de
Senha
••••••••

Adicione -session-9f2a41c7-lifetime-30 ao usuário quando uma tarefa precisar de vários requests de um só endereço.

Por que Justmetrically e SocksNode funcionam bem juntos

  • Um pipeline operado por outra pessoa

    A Justmetrically define, constrói e vigia a recolha das fontes do seu contrato. Naquilo que a sua equipa recolhe em paralelo, os proxies da SocksNode dão a cada script a sua própria localização de saída.

  • A página como um local a vê

    Preço, stock e idioma mudam conforme o país. Uma sessão sticky da SocksNode no mercado que lhe interessa devolve a versão local da página, por isso o que verifica à mão coincide com o que o pipeline entrega.

  • Verificar um número sem esperar pela próxima execução

    Quando um número no painel parece errado, abra a página de origem a partir do mesmo país através de um proxy da SocksNode. Num minuto sabe se mudaram os dados ou o site.

Exemplo: um pipeline gerido e as suas próprias verificações

A Justmetrically entrega as fontes do âmbito. A SocksNode cobre o que vê por si.

  1. 1

    Acorde com a Justmetrically as fontes, o esquema e o destino de entrega, e deixe o pipeline correr conforme o calendário.

  2. 2

    Para verificar um registo entregue, gere um proxy sticky da SocksNode no país de onde veio: host global.socksnode.com, porta 10000 (HTTP), utilizador USERNAME-country-de-session-9f2a41c7-lifetime-30.

  3. 3

    Abra a página de origem através dessa sessão, para que mostre o preço, o idioma e o stock locais.

  4. 4

    Compare com a linha entregue e levante qualquer diferença com o seu contacto na Justmetrically.

Perguntas sobre Justmetrically e SocksNode

Preciso de proxies se a Justmetrically faz a recolha?

Para as fontes do seu contrato não — operá-las é aquilo que lhes paga. Precisa deles quando a sua equipa recolhe algo em paralelo e sempre que quiser uma página exatamente como aparece num país ou numa cidade.

Que proxies da SocksNode servem para trabalho de dados?

Residenciais rotativos em sessão sticky quando uma tarefa precisa de vários pedidos a manter o mesmo endereço, e sessão rotativa quando não precisa. Os de datacenter custam menos e servem para sites que não se importam.

Podem conviver no mesmo projeto?

Sim. As equipas costumam entregar as fontes pesadas e recorrentes a um pipeline gerido e manter um scraper pequeno próprio, atrás de proxies da SocksNode, para a cauda longa.

Outros parceiros

Você cria uma ferramenta para quem usa proxies?

Liste seu produto aqui e coloque um link para nós no seu. Envie seu site e uma linha sobre o que ele faz.

Seja parceiro