Integração do Apify Proxy

O uso de proxies Bright Data com Apify aumenta a eficiência do Scraping de dados, garantindo a extração segura e anônima de dados e reduzindo o risco de bloqueios e detecção de IP.

Este guia pode estar desatualizado. Para obter um guia atualizado, consulte nossa documentação.

Teste grátis Registro no Google

신용 카드 필요 없음

400M+ IPs residencialis
Sessões fixas e rotativas
Taxa de sucesso de 99,95%
Segmentação por localização geográfica - GRÁTIS

O que é o Apify?

O Apify é uma poderosa plataforma de Scraping de dados e RPA na web. Ele pode automatizar tudo o que você pode fazer manualmente em um navegador da web e executá-lo em escala. A Apify Store tem centenas de ferramentas de scraping prontas para uso que exigem apenas que você altere algumas configurações.

Os proxies costumam ser uma parte essencial do Scraping de dados. Você deve sempre proteger sua identidade ao fazer Scraping de dados e também pode precisar lidar com medidas anti-scraping e outras restrições implementadas pelo site de destino.

É aí que entra a Bright Data 💪

Os proxies da Bright Data podem ajudá-lo a concluir com sucesso suas tarefas de scraping e automação. Os proxies da Bright Data se integram perfeitamente ao Apify para que você possa realizar seu trabalho sem ser bloqueado.

Obtenha proxies para o Apify

Como configurar o Apify
com proxies Bright Data:

Acesse Bright Data:

Faça login na sua conta Bright Data e acesse o painel
Clique em Proxy & Infra e crie uma zona
Você pode escolher entre Datacenter, Residencial, ISP e IPs móveis
Configure e crie a zona de acordo com os requisitos do seu projeto
Clique no ícone Configurações ao lado do nome da zona.
Obtenha o nome de usuário e a senha.

Acesse o Apify:

Acesse apify.com e faça login na sua conta.

Quando estiver no Console Apify, clique em Atores no menu à esquerda.

Apify user dashboard with various navigation options and cards.

Na guia Loja, você encontrará o Scraper. Usaremos isso como nosso exemplo. Clique nele.

Web Scraper tool interface in Apify platform.

Navegue até a guia Entrada.
Insira lumtest como URL inicial para extrair: https://lumtest.com/myip.json

Na função Página, cole este código:

      async function pageFunction(context) {
    // jQuery é útil para localizar elementos DOM e extrair dados deles.
    // Para usá-lo, certifique-se de habilitar a opção "Injetar jQuery".
    const $ = context.jQuery;

    // Selecione o elemento usando o seletor CSS 'body > pre' e extraia seu conteúdo de texto.
    const data = $('body > pre').text();

    // Retorne um objeto com os dados extraídos. Ele será armazenado no conjunto de dados resultante.
    return {
        data: data
    };
}

Em seguida, role para baixo para encontrar a configuração do Proxy e do navegador.

Clique em seu próprio Proxy e insira suas credenciais de Proxy no seguinte formato.

http://username:[email protected]:33335 e a senha podem ser obtidos nas configurações da zona que acabamos de criar.
O nome do host para proxies Bright Data é:brd.superproxy.io e a porta é 33335.
Esta é a aparência final da URL do Proxy Bright Data: http://lum-customer-c_375eb5c4-zona-zone5:[email protected]:33335
Em seguida, basta clicar em Iniciar.

Você pode então visualizar e baixar os dados como HTML, JSON, CSV, Excel, XML e feed RSS, ou visualizá-los na guia de saída
Para confirmar que o Apify usou o Proxy, acesse o painel do Bright Data, navegue até Proxy e verifique o Log de eventos.

Screenshot of a data table showing JSON data output.

⚠️Observação importante: se você estiver usando os Proxies residenciais, o Web Unlocker ou a API SERP da Bright Data, será necessário instalar um certificado SSL para habilitar conexões seguras de ponta a ponta com seus sites de destino. Esse é um processo simples. Consulte https://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificate para obter instruções.