TR
Hemen başlayın

Entegrasyonlar · Otomasyon ve kazıma

HProxy'yi Puppeteer ile kullanın.

Puppeteer ve page.authenticate ile başsız Chrome'u bir HProxy proxy'si üzerinden çalıştırın.
  • 3 adım
  • Çalışan kod
  • HTTP ve SOCKS5
  • Proxy URL'sinde giriş bilgileri

Neden proxy

Puppeteer ile neden proxy kullanılır

Puppeteer, başsız (veya arayüzlü) Chrome'u Node'dan yönetir; JavaScript dünyasında işleme ağırlıklı kazıma ve otomatik test için ilk tercihtir.

Bir veri merkezi IP'sinden çalışan başsız Chrome, sitelerin ilk bakışta tanıdığı bir parmak izidir. Bir konut çıkışı bu işaretin ağ yarısını ortadan kaldırır, böylece değerlendirilen şey tarayıcının davranışı olur.

Setup

HProxy kurulumu: Puppeteer

  1. 1

    Chrome'u host'unuzu ve portunuzu gösteren --proxy-server ile başlatın.

  2. 2

    Proxy giriş gerektirdiği için gezinmeden önce kullanıcı adınız ve parolanızla page.authenticate() çağırın.

  3. 3

    Her zamanki gibi gezinin; sayfa yüklemesinin tamamı artık proxy üzerinden geçer.

Bilmeye değer

Kullanıcı adı ve parola page.authenticate() üzerinden gider; --proxy-server bayrağı bunları taşımaz.

Burada gösterilen host, port ve giriş bilgileri biçimi gösterir; tam değerleriniz kontrol paneli içinde, kopyalamaya hazır.

Puppeteer, HProxy ile

import puppeteer from "puppeteer";

const browser = await puppeteer.launch({
  args: ["--proxy-server=example.hproxy.com:8080"],
});
const page = await browser.newPage();
await page.authenticate({ username: "user-country-us", password: "pass" });
await page.goto("https://ipinfo.io/json");

Puppeteer soru

Sık sorulan sorular

proxy-server bayrağı kullanıcı adımı ve parolamı neden kabul etmiyor?

Çünkü bu Chrome bayrağı yalnızca bir host ve port alır. Giriş bilgileri bunun yerine gezinmeden önce çağrılan page.authenticate üzerinden gider. Bir Puppeteer proxy kurulumunun, proxy yanlışmış gibi görünen kimlik doğrulama hataları döndürmesinin en yaygın tek nedeni budur.

Her sayfada kimlik doğrulaması yapmam gerekir mi?

Evet. Kimlik doğrulama tarayıcı için bir kez yapılmaz, her sayfa için ayrı ayarlanır; bu yüzden açtığınız her yeni sayfa gezinmeden önce bu çağrıya ihtiyaç duyar. İkinci bir sayfada bunu unutmak, aralıklı görünen ama tamamen belirlenimci bir hataya yol açar.

Her Puppeteer sayfasına nasıl farklı bir IP veririm?

Daha fazla sayfa açmak yerine kimlik başına ayrı bir tarayıcı örneği başlatın, çünkü proxy bayrağı başlatma sırasında ayarlanır ve bir tarayıcıdaki sayfalar onu paylaşır. Dönen bir proxy ile her yeni başlatma otomatik olarak yeni bir çıkış alır.

Puppeteer'ın görsel indirmesini nasıl durdururum?

İstek yakalamayı etkinleştirin ve kaynak türü görsel, yazı tipi, medya veya stil sayfası olan istekleri iptal edin. Gigabayt başına faturalandırmada yapabileceğiniz en etkili değişiklik budur, çünkü başsız bir tarayıcı varsayılan olarak tüm bunları gerçek bir tarayıcı gibi çeker.

Siz hazır olduğunuzda biz hazırız.

Kontrol paneliniz on saniye uzağınızda. Satış görüşmesi yok, abonelik yok, minimum yok.