TLS parmak izi
Bir istemcinin şifrelemeyi nasıl müzakere ettiğinden oluşturulan tanımlayıcı; temiz bir IP üzerinden bile otomasyonu tespit etmek için kullanılır.
İsteğinizin tek bir baytı şifrelenmeden önce istemciniz kendini çoktan tanıtmıştır. Bir TLS el sıkışmasının açılış mesajı olan ClientHello açık metin olarak gönderilir ve ayrıntılı bir beyandır: hangi TLS sürümlerini desteklediğiniz, hangi şifre takımlarını hangi tercih sırasıyla sunduğunuz, hangi uzantıları hangi sırayla uyguladığınız, hangi eliptik eğrileri kabul ettiğiniz, hangi nokta biçimlerini kullandığınız. Hiçbiri gizli sayılmaz ve hepsi herhangi bir şifreleme başlamadan önce okunur.
Bu beyan sıralama düzeyine kadar standartlaştırılmamıştır ve onu tanımlayıcı yapan tam olarak budur. Chrome bir seti bir sırayla sunar. Firefox farklı bir seti farklı bir sırayla sunar. Python'un requests kütüphanesi, Go'nun net/http'si, curl ve bir headless tarayıcı her birinin kendine ait bir dizilişi vardır. Bütün düzeni kısa bir dizeye özetlerseniz, o yazılımın daha sonra kendisi hakkında ne iddia ettiğinden bağımsız olarak hangi yazılımın konuştuğunu söyleyen bir parmak izi elde edersiniz.
JA3, bunun yaygın olarak benimsenen ilk sürümüydü: TLS sürümü, şifre listesi, uzantı listesi, eliptik eğriler ve eğri nokta biçimlerinin birleştirilmesiyle elde edilen bir MD5 özeti. JA4 onun halefidir ve bugün bilinmeye değer olan odur: istemcilerin JA3'ten kaçmasını sağlayan şifre karıştırmaya karşı daha dayanıklıdır, ayrıca yapılandırılmış ve kısmen insan tarafından okunabilir bir biçimdedir; bu da onu savunanlar için çok daha yararlı kılar.
Bunun neredeyse diğer tüm sinyallerden daha önemli olmasının nedeni durduğu yerdir. IP adresinizin altındadır; bu yüzden kusursuz bir konut proxy'si ona dokunmaz. Başlıklarınızın da altındadır; bu yüzden kusursuz bir User-Agent dizesi de ona dokunmaz. Güvenilir bir Alman hanesi adresinden bir istek gönderin, kendinizi Windows'ta Chrome 130 olarak tanıtın ve bir Python TLS el sıkışması sunun: tespit edilmesi tek bir sorguya mal olan ve hiçbir proxy kalitesinin örtemeyeceği bir çelişki üretmiş olursunuz.
Bir tarayıcıda kusursuz çalışan bir kazıyıcının aynı hedefe karşı aynı proxy ile bir betikten çalıştırıldığında başarısız olmasının belirli nedeni budur. İnsanlar proxy'nin kötü olduğu sonucuna varır ve daha pahalı bir tane satın alır. Sorun baştan beri el sıkışmadaydı.
Düzeltmek, istemcinizin iddia ettiği şeyi değiştirmek yerine gerçekte gönderdiği şeyi değiştirmek demektir. Gerçek bir tarayıcının el sıkışmasını bayt bayt yeniden üretmek için özel olarak kütüphanelerin var olmasının nedeni budur; Go'da bilinen örnek uTLS'tir. Gerçek bir tarayıcıyı yönetmek de sorunu tamamen aşar, çünkü o zaman istemci gerçekten iddia ettiği şeydir.
Bir uyarı: bir parmak izi yalnızca hikâyenizin geri kalanıyla çeliştiğinde bir çelişkidir. Bilinen bir kütüphane el sıkışması, betik bekleyen bir API'de kendiliğinden şüpheli sayılmaz. Bir tüketici adresinde tüketici tarayıcısı kılığında geldiğinde şüpheli hâle gelir, çünkü gerçek tüketici tarayıcıları bunu yapmaz.
HProxy bunu nasıl ele alıyor
Adresin tek bir katman olduğunu ve bütün yanıtı kapsamadığını söylememizin nedeni tam olarak budur. Güvenilir bir IP taban seviyenizi yükseltir; şifreleme başlamadan önce kendini otomasyon olarak tanıtan bir istemciyi kurtaramaz. Bir engelin hatasını ayıklayan herkes daha pahalı bir proxy almadan önce el sıkışmayı kontrol etmelidir.
Sık sorulan sorular
JA3 ile JA4 arasındaki fark nedir?
JA3 özgün TLS parmak izidir: ClientHello'daki TLS sürümü, şifre takımları, uzantılar, eliptik eğriler ve eğri nokta biçimleri üzerinden alınan bir MD5 özeti. Zayıflığı, istemcilerin bu listeleri karıştırarak veya doldurarak farklı bir özet üretebilmesi ve eşleştirmeden kaçabilmesidir. JA4 bu karıştırmaya dayanacak şekilde tasarlanmış haleftir. Yapılandırılmış ve kısmen okunabilir olduğu için savunan taraf onu yalnızca bilinen bir listeyle karşılaştırmakla yetinmez, parçaları üzerinde de akıl yürütebilir.
Bir proxy TLS parmak izimi gizleyebilir mi?
Hayır. Sıradan bir proxy bağlantınızı aktarır; bu yüzden istemcinizin ürettiği ClientHello hedefe ulaşan ClientHello'nun ta kendisidir. Proxy el sıkışmanın hangi IP adresinden geliyormuş gibi göründüğünü değiştirir, el sıkışmanın kendisinde hiçbir şeyi değiştirmez. Parmak izini değiştirmek, onu üreten istemciyi değiştirmeyi gerektirir.
Kazıyıcım neden tarayıcıda çalışıyor da bir betikten başarısız oluyor?
Genellikle isteğin diğer her şeyi eşleşse bile tarayıcı ile betiğin TLS parmak izleri farklı olduğu için. Betik tarayıcının başlıklarını, çerezlerini ve User-Agent'ını birebir kopyalayabilir ve yine de TLS katmanında tamamen farklı bir şifre ve uzantı sıralaması duyurabilir; bir tespit sistemi bunu başka bir şeyi değerlendirmeden önce otomasyon olarak okur. Proxy değiştirmeye rağmen süren bir engelin en yaygın nedeni budur.
Kendi TLS parmak izimi nasıl kontrol ederim?
Endişe ettiğiniz istemci üzerinden, gözlemlediği JA3 veya JA4 değerini geri yansıtan herhangi bir hizmete bir istek gönderin, ardından aynı isteği gerçek bir tarayıcıdan tekrarlayın ve karşılaştırın. İkisi farklıysa bu fark bağlandığınız her siteye görünür ve isteğinizin şifresi çözülmeden önce görünür.
HTTP/2 kullanmak parmak izini değiştirir mi?
Bir tane daha ekler. TLS el sıkışmasının ötesinde HTTP/2 istemcileri ayar çerçevesi değerlerinde, başlık sıralamasında ve öncelik davranışında farklılık gösterir; bu da TLS parmak izinin yanında ayrı bir HTTP/2 parmak izi üretir. Bir istemci TLS katmanında bir tarayıcıyla eşleşip bir üst katmanda yine de tanımlanabilir.
Geri dön: sözlüğün tamamı.

