TR
Hemen başlayın

Sözlük

Performans

Eşzamanlılık

Aynı anda kaç istek çalıştırdığınız; kazıma veriminin ana kaldıracı ve yaygın bir gizli sınır.

Eşzamanlılık, aynı anda devam eden istek sayısıdır. Bir kazıyıcının ne kadar iş çıkardığını herhangi bir tek isteğin hızından çok daha fazla o belirler: yüz sayfayı paralel olarak getiren bir iş, her bir istek daha hızlı olmasa bile onları birbiri ardına getiren bir işin süresinin küçük bir kısmında biter.

Proxy'ler eşzamanlılıkla iki şekilde etkileşir. Bir havuz, istekleri tek bir adrese yığmadan yüksek eşzamanlılık çalıştırmanızı sağlar, çünkü her paralel istek farklı bir çıkış alabilir. Ancak proxy hizmetinin kendisi eşzamanlı bağlantıları sınırlayabilir ve iş parçacıklarını sınırlayan bir plan, ağ ne kadar hızlı olursa olsun verimi sessizce sınırlar.

Bu yüzden herhangi bir proxy'de kontrol edilmeye değer olan, gigabayt başına fiyatın yanında eşzamanlı bağlantıların sınırlı olup olmadığıdır. Bir havuzun gerçek avantajı olan paralelliğin gerçekten ortaya çıkmasını sağlayan sınırsız eşzamanlılıktır.

Yine de daha fazlası kendiliğinden daha iyi olmaz ve insanların aşırıya kaçtığı yer burasıdır. Eşzamanlılık verimi yalnızca başka bir şey darboğaz olana kadar artırır: kendi bant genişliğiniz, ilerledikçe ayrıştırıyorsanız CPU'nuz, hedefin toleransı veya gerçek tarayıcılar çalıştırıyorsanız bellek; bunların her biri düz bir HTTP isteğinden çok daha fazlasını tüketir. O noktanın ötesinde onu artırmak sonuç yerine zaman aşımları ve yeniden denemeler üretir ve yeniden denemeler size zaten ödediğiniz trafiğe mal olur.

Hız sınırlamayla da insanları şaşırtan bir şekilde etkileşir. Elli farklı çıkış üzerinden elli paralel istek, adres başına bir sayaç açısından elli ayrı ziyaretçidir. TEK bir adres üzerinden elli paralel istek, neredeyse her eşiği anında tetikleyecek bir patlamadır. Eşzamanlılık ve havuz boyutu birlikte hareket etmelidir; aksi hâlde eklediğiniz paralellik yalnızca daha hızlı engellenmenizi sağlar.

Kendi sayınızı bulmanın dürüst yolu, deneyerek ve aşağıdan başlamaktır. Temkinli başlayın, adım adım artırın ve verim grafiği yerine hata oranını izleyin. Doğru ayar, hataların başladığı noktanın hemen altındakidir ve hedefe göre değişir, çünkü aslında hedefin bir özelliğidir.

HProxy bunu nasıl ele alıyor

Konut planlarımız eşzamanlı bağlantıları veya iş parçacıklarını sınırlamaz, çünkü bir iş parçacığı sınırı başka kelimelerle ifade edilmiş bir verim sınırıdır ve ucuz görünen bir planı pratikte yavaşlatan kısıt tam olarak budur.

Sık sorulan sorular

Kazıma için iyi bir eşzamanlılık düzeyi nedir?

Evrensel bir sayı yoktur, çünkü sınır hedefe aittir. Düşük başlayın, adım adım artırın ve hata oranını izleyin: doğru ayar hataların başladığı noktanın hemen altındadır. Toleranslı bir site yüzlerce paralel isteği kabul edebilir, katı bir site bir avuç kadarını; aynı kod her biri için farklı ayarlara ihtiyaç duyar.

Daha yüksek eşzamanlılık daha hızlı kazıma mı demek?

Bir noktaya kadar, sonra tersine döner. Kendi bant genişliği, CPU veya bellek tavanınızı ya da hedefin toleransını aştığınızda ek paralellik sonuç yerine zaman aşımları ve yeniden denemeler üretir. Yeniden denemeler zaten hattan geçmiş trafiğin bedelini ödediği için gigabayt başına faturalandırmada eşzamanlılığı aşırıya kaçırmak zamanın yanında paraya da mal olur.

Proxy sağlayıcıları eşzamanlı bağlantıları sınırlar mı?

Birçoğu sınırlar ve bu çoğu zaman ilan edilmek yerine plan ayrıntılarına gömülür. Bir iş parçacığı veya bağlantı sınırı, başka kelimelerle ifade edilmiş bir verim sınırıdır ve ucuz görünen gigabayt başına bir ücreti pratikte yavaşlatabilir. Fiyatları karşılaştırmadan önce kontrol etmeye değer, çünkü aynı ücretteki iki plan gerçekte çalıştırmanıza izin verdikleri şeyde muazzam farklılık gösterebilir.

Eşzamanlılık proxy havuzumun boyutuyla nasıl ilişkili?

Birlikte hareket etmeleri gerekir. Birçok çıkışa yayılmış paralel istekler birçok ayrı ziyaretçi gibi görünür ve amaç budur. Aynı paralelliğin tek bir adresten geçmeye zorlanması, adres başına bir sınırı anında tetikleyen bir patlamadır. Arkasında yeterince farklı adres olmadan eşzamanlılığı artırmak, sizi sıralı çalıştırmanın yapacağından daha hızlı engeller.

Geri dön: sözlüğün tamamı.

HProxy.

Sözümüze güvenmek zorunda değilsiniz. Kendiniz Ölçün.

Tarayıcınızda canlı adrese karşı çalışır. Kayıt yok, liste saklanmaz.

HProxy