Proxy sağlayıcısı nasıl seçilir: gelişmiş kriterler ve karşılaştırma

Profesyonel bir proxy sağlayıcısı seçmek; IP havuzu çeşitliliğinin, ağ gecikmesinin ve sağlayıcının Akamai veya Cloudflare gibi gelişmiş anti-bot sistemlerini aşma yeteneğinin teknik olarak değerlendirilmesini gerektirir. Yüksek performanslı web scraping ve otomasyon; ayrıntılı oturum kontrolü, SOCKS5 desteği ve CAPTCHA tetiklenmesini en aza indirecek yüksek oranda temiz, residential IP adresi sunan bir altyapı ister.

1. Altyapı mimarisi: residential, veri merkezi ve mobil

Seçimdeki ilk kriter, IP adreslerinin kaynağıdır. Çoğu sağlayıcı sunduğu hizmetleri, her biri farklı teknik gereksinimlere ve maliyet profillerine hitap eden üç ana katmana ayırır.

Veri merkezi proxy'leri

Veri merkezi proxy'leri büyük veri merkezlerindeki (AWS, GCP, DigitalOcean) sunucularda barındırılır. En yüksek hızları — çoğu zaman 1 Gbps üzerinde — ve en düşük gecikmeyi sunarlar. Ancak IP aralıkları internet servis sağlayıcıları (ISP) yerine şirketler adına kayıtlı olduğundan, hedef siteler tarafından kolayca tespit edilirler. Bunları temel fiyat takibi veya dahili testler gibi, güvenliği zayıf sitelerde yapılan yüksek hızlı işler için kullanın.

Residential proxy'ler

Residential proxy'ler, ISP'lerin gerçek ev kullanıcılarına atadığı IP adreslerini kullanır. Gerçek kullanıcı trafiği gibi göründükleri için web scraping'de altın standarttır. GProxy, alt ağ (subnet) yasağı riski olmadan yüksek eşzamanlılıkta işlere izin veren devasa bir residential IP havuzu sunar. Bir site residential IP gördüğünde 403 Forbidden hatası veya CAPTCHA doğrulaması tetikleme olasılığı çok daha düşüktür.

Mobil proxy'ler

Mobil proxy'ler trafiği 3G, 4G veya 5G hücresel ağlar üzerinden yönlendirir. Bu IP'ler CGNAT (Carrier-Grade NAT) aracılığıyla binlerce gerçek kullanıcı arasında paylaşılır. Tek bir mobil IP'yi engellemek binlerce meşru müşteriyi de engelleyebileceğinden, siteler bu IP'leri kara listeye almakta son derece isteksizdir. En pahalı seçenektir ancak sosyal medya otomasyonu (Instagram, TikTok) ve hiper-yerel reklam doğrulaması için vazgeçilmezdir.

2. Gelişmiş performans metrikleri ve kıyaslama

Uzman kullanıcılar "%99,9 çalışma süresi" gibi pazarlama iddialarına güvenmez. Bunun yerine bir sağlayıcıyı, yük altındaki belirli ağ performansı göstergelerine göre değerlendirmelisiniz.

• Başarı oranı: CAPTCHA veya engel sayfasına yönlendirilmeden 200 OK durum kodu dönen isteklerin yüzdesi. Üst düzey bir sağlayıcı, residential havuzlarda %95'in üzerinde bir başarı oranını korumalıdır.
• Yanıt süresi (gecikme): İsteğin gönderilmesinden ilk baytın alınmasına kadar geçen süre (TTFB). Küresel operasyonlarda, proxy ağ geçidi ile hedef sunucu arasındaki fiziksel mesafeyi azaltan uç (edge) sunucuları olan sağlayıcıları tercih edin.
• Verim (throughput): Proxy'nin saniyede işleyebildiği veri hacmi. Video akışı veya büyük ölçekli doküman toplama gibi veri yoğun işlerde kritiktir.

Bir sağlayıcıyı doğru şekilde kıyaslamak için, farklı coğrafi bölgelerdeki ortalama yanıt süresini ölçen bir betik kullanın. Aşağıda proxy gecikmesini test etmek için requests kütüphanesini kullanan bir Python örneği yer alıyor:

import requests
import time

def test_proxy_performance(proxy_url, target_url):
    proxies = {
        "http": proxy_url,
        "https": proxy_url,
    }
    try:
        start_time = time.time()
        response = requests.get(target_url, proxies=proxies, timeout=10)
        end_time = time.time()

        latency = end_time - start_time
        status = response.status_code

        return {"status": status, "latency": latency}
    except Exception as e:
        return {"error": str(e)}

# GProxy residential uç noktası ile örnek kullanım
proxy = "http://username:[email protected]:8000"
test_url = "https://www.google.com/generate_204"
result = test_proxy_performance(proxy, test_url)
print(f"Status: {result['status']}, Latency: {result['latency']:.4f}s")

3. Protokol desteği: HTTP(S) ve SOCKS5

Protokol seçimi, verinin nasıl paketlenip gönderildiğini belirler. Çoğu scraping aracı HTTP veya HTTPS kullansa da, ileri düzey senaryolar SOCKS5'in esnekliğini gerektirir.

HTTP/HTTPS proxy'ler: Uygulama katmanında (Katman 7) çalışırlar. Web trafiğini yorumlamak üzere tasarlandıklarından, sağlayıcıların başlık düzenlemesi veya içerik filtreleme yapmasına imkân verirler. Yalnızca HTML veya JSON verisi çekmeniz gereken standart web scraping için idealdirler.

SOCKS5 proxy'ler: Oturum katmanında (Katman 5) çalışırlar. İçlerinden geçen veriyi yorumlamazlar; bu da onları belirli işlerde daha hızlı kılar ve UDP, SMTP ve FTP dahil her tür trafiği taşıyabilmelerini sağlar. Oyun, VoIP veya özel TCP bağlantıları gerektiren karmaşık scraping için özel yazılım kullanıyorsanız SOCKS5 zorunludur. GProxy güçlü SOCKS5 desteği sunarak çok çeşitli üçüncü taraf otomasyon araçlarıyla uyumluluğu güvence altına alır.

4. Proxy türlerinin karşılaştırması

Aşağıdaki tablo, seçiminizi projenizin bütçesi ve teknik gereksinimleriyle hizalamanıza yardımcı olmak için temel proxy kategorileri arasındaki ödünleşimleri özetler.

5. Rotasyon mantığı ve oturum yönetimi

Modern anti-bot sistemleri bir IP adresinin zaman içindeki davranışını izler. Bir IP 10 saniyede 500 istek gönderirse anında işaretlenir. Etkili proxy yönetimi, gelişmiş bir rotasyon mantığı gerektirir.

Rotasyonlu proxy'ler (istek başına)

Bu modelde gönderdiğiniz her isteğe havuzdan yeni bir IP adresi atanır. Kısa bir zaman aralığında kullanılan benzersiz IP sayısını en üst düzeye çıkarmanız gereken büyük dizinlerin scraping'i için mükemmeldir. Hedef sunucunun faaliyetinize dair bir profil oluşturmasını engeller.

Sticky (yapışkan) oturumlar

Alışveriş sepetine ürün eklemek veya bir hesaba giriş yapmak gibi bazı işler, aynı IP adresini birkaç dakika boyunca korumanızı gerektirir. "Sticky oturum", aynı IP'yi belirli bir süre (örneğin 1, 5 veya 30 dakika) elinizde tutmanızı sağlar. Sağlayıcı seçerken, port ayarları veya proxy dizesindeki oturum kimlikleri üzerinden oturum kalıcılığı için ayrıntılı kontrol sunduğundan emin olun.

Proxy dizesinde oturum yönetimi örneği:

# GProxy oturum tabanlı dize biçimi
# 'session-12345' soneki, bu kimliği kullanan tüm isteklerde aynı IP'nin kullanılmasını sağlar
username-country-us-session-12345:[email protected]:8000

6. Coğrafi ayrıntı düzeyi ve ASN hedefleme

Reklam doğrulama, yerelleştirilmiş fiyat araştırması veya coğrafi engelli içeriğin aşılması için basit ülke düzeyinde hedefleme çoğu zaman yetersiz kalır. Gelişmiş sağlayıcılar belirli şehirleri, hatta belirli Otonom Sistem Numaralarını (ASN) hedeflemenize izin verir.

ASN'ler, tek bir kuruluş (Comcast, AT&T veya Deutsche Telekom gibi) tarafından yönetilen büyük IP adresi bloklarını temsil eder. Belirli ASN'leri hedeflemek, belirli bir demografinin trafik desenlerini taklit etmenize veya bazı ISP'lere uygulanan engelleri aşmanıza yardımcı olabilir. GProxy paneli hassas coğrafi hedeflemeye olanak tanır ve isteklerinizin kullanım senaryonuzun gerektirdiği tam konumdan çıkmasını sağlar.

7. Fiyatlandırma modelleri: IP başına ödeme ve GB başına ödeme

Proxy seçiminizin ekonomik etkisini anlamak, teknik özellikler kadar önemlidir. Sağlayıcılar genellikle iki faturalandırma modeli kullanır:

1. Sayaçlı (GB başına ödeme): Residential ve mobil proxy'lerde yaygındır. Aktarılan veri için ödersiniz. Hisse fiyatları gibi az miktarda ama çok değerli veriyi çekmek için ekonomiktir, ancak medya ağırlıklı scraping'de pahalıya gelebilir.
2. Sayaçsız (IP/port başına ödeme): Veri merkezi ve özel proxy'lerde yaygındır. Belirli sayıda IP veya eşzamanlı iş parçacığı için sabit aylık ücret ödersiniz. Bant genişliği tüketiminin yüksek olduğu, yüksek hacimli veri çıkarımı için idealdir.

Maliyetleri değerlendirirken Toplam Sahip Olma Maliyeti'ni (TCO) hesaplayın. %50 hata oranına sahip daha ucuz bir sağlayıcı, boşa giden bant genişliği ve geliştirici zamanı nedeniyle, %99 başarı oranı sunan GProxy gibi premium bir sağlayıcıdan daha pahalıya mal olur.

8. Etik kaynak ve uyumluluk

Güncel hukuki ortamda (GDPR, CCPA) residential IP'lerin kaynağı önemlidir. Profesyonel sağlayıcılar IP havuzlarının etik yollarla oluşturulmasını güvence altına alır; bu genellikle kullanıcıların açıkça onay verdiği uygulamalardaki SDK'lar aracılığıyla, boştaki bant genişlikleri karşılığında kendilerine ödeme yapılmasıyla olur. IP kaynağı konusunda muğlak kalan sağlayıcılardan uzak durun; "botnet" IP'leri kullanmak hukuki sorunlara ve kötü itibar puanlarına yol açabilir.

Öne çıkanlar

Doğru proxy sağlayıcısını seçmek, veri operasyonlarınızın ölçeklenebilirliğini ve güvenilirliğini etkileyen stratejik bir karardır. GB başına fiyatın ötesine geçip ASN çeşitliliği, SOCKS5 desteği ve oturum kararlılığı gibi teknik metriklere bakarak çok daha dayanıklı otomasyon sistemleri kurabilirsiniz.

• Başarı oranlarına öncelik verin: Yüksek başarı oranı, yeniden deneme yükünü azaltır ve scraper'larınızın kısıtlanmasını önler.
• Proxy'yi siteye göre seçin: Maliyetten tasarruf için düşük güvenlikli sitelerde veri merkezi proxy'leri kullanın, ancak Amazon veya LinkedIn gibi korumalı hedeflerde GProxy residential veya mobil IP'lere geçin.
• Trafiğinizi denetleyin: Proxy sağlayıcınızın döndürdüğü gecikme ve hata kodlarını düzenli olarak izleyerek IP havuzunun kalitesini koruduğundan emin olun.

Pratik ipucu 1: Kodunuzda 429 (Too Many Requests) ve 407 (Proxy Authentication Required) hatalarını düzgün biçimde ele alan bir "yeniden deneme mantığı" mutlaka uygulayın. Bu, geçici bir ağ dalgalanmasının tüm scraping hattınızı çökertmesini engeller.

Pratik ipucu 2: JavaScript ağırlıklı siteleri işlemek için Playwright veya Puppeteer gibi bir headless tarayıcıyı residential proxy'lerle birlikte kullanın. Bu kombinasyon, otomatik trafiğinizi evindeki bağlantıdan gezinen gerçek bir insan kullanıcıdan neredeyse ayırt edilemez hale getirir.