Proxy listeleri

Proxy listeleri, çoğunlukla özel web sitelerinde veya forumlarda yayımlanan, herkese açık proxy sunucularının IP adresleri ve port numaralarından oluşan derlemelerdir; temel bağlantı açısından doğrulanabilseler de ciddi güvenlik, güvenilirlik ve performans riskleri nedeniyle herhangi bir ciddi uygulamada kullanılmaları genellikle önerilmez.

Proxy listeleri, kullanıcıların diğer ağ servislerine dolaylı bağlantı kurmasını sağlayan ağ servisleri olan açık proxy sunucuları hakkındaki bilgileri toplar. Bu listeler tipik olarak proxy'nin IP adresini, port numarasını, protokolünü (HTTP, HTTPS, SOCKS4, SOCKS5) ve bazen konum ya da anonimlik düzeyini içerir.

Proxy listeleri nerede bulunur

Proxy listeleri başlıca birkaç kaynakta bulunur; doğruluk ve güncellik dereceleri değişkendir.

Proxy listesine adanmış siteler

Çok sayıda site, ücretsiz proxy listelerini derleyip yayımlamakta uzmanlaşmıştır. Bu siteler genellikle interneti açık proxy'ler için tarar ve listelerini düzenli olarak günceller. Örnekler:
* FreeProxyLists.net
* SPYS.one
* Proxy-List.org
* HideMy.name (ücretli hizmetlerin yanı sıra ücretsiz liste de sunar)

Bu siteler proxy'leri genellikle ülkeye, protokole, hıza ve anonimlik düzeyine göre sınıflandırır. Ancak sunulan veriler, özellikle hız ve anonimlik bilgileri, bağımsız olarak doğrulanmalıdır.

GitHub depoları

Geliştiriciler ve güvenlik araştırmacıları çoğu zaman proxy listelerini derleyen GitHub depoları tutar. Bu listeler otomatik betiklerle veya topluluk katkılarıyla güncellenebilir. GitHub'da "free proxy list", "public proxies" ya da "SOCKS5 list" gibi terimlerle arama yapmak sonuç verebilir. Bu depolar bazen listedeki proxy'leri doğrulayan betikler de içerir.

Çevrimiçi forumlar ve topluluklar

Bazı çevrimiçi forumlar, özellikle web scraping, siber güvenlik veya anonimlik odaklı olanlar, zaman zaman proxy listeleri paylaşır. Bu listeler daha niş veya uzmanlaşmış olabilir, ancak diğer kaynaklarla aynı doğrulama zorluklarını taşır.

Proxy listeleri nasıl derlenir

Proxy listelerinin derlenmesi genellikle manuel seçim yerine otomatik tarama ve tespit yöntemlerine dayanır.

Otomatik tarama

En yaygın yöntem, proxy sunucularının sık kullandığı açık portlar (örneğin 80, 8080, 3128, 1080) için geniş IP adresi aralıklarını taramaktır. Açık bir port bulunduğunda, o porttaki servisin proxy olarak çalışıp çalışmadığını ve hangi protokolü desteklediğini anlamak için banner grab yapılır veya bağlantı denenir.

Web scraping

Bazı servisler, liste oluşturmak için diğer proxy listesi sitelerini ya da herkese açık dizinleri scrape eder.

Kullanıcı gönderimleri

Daha seyrek olarak kullanıcılar bildikleri açık proxy'leri gönderebilir. Bu yöntem daha az ölçeklenebilirdir ve bayat ya da kötü niyetli kayıtlara daha açıktır.

Listedeki proxy'ler nasıl doğrulanır

Doğaları gereği güvenilmez olduklarından, listedeki proxy'leri doğrulamak şarttır. Doğrulama; bağlantı, performans, anonimlik ve protokol desteğinin kontrolünü kapsar.

Bağlantı testi

Temel kontrol, proxy'nin çevrimiçi ve erişilebilir olup olmadığını doğrulamaktır.

# Bilinen bir servise HTTP proxy bağlantısını test et
curl -x http://PROXY_IP:PROXY_PORT http://www.google.com --max-time 5

Başarılı bir yanıt (örneğin Google'dan gelen HTML içeriği) temel bağlantının çalıştığını gösterir. Zaman aşımı veya bağlantı reddedildi hatası, proxy'nin büyük olasılıkla çevrimdışı olduğunu ya da bağlantıyı engellediğini gösterir.

Anonimlik testi

Proxy'nin gerçek IP adresinizi açığa çıkarıp çıkarmadığını veya kimliğinizi belli eden başlıklar ekleyip eklemediğini belirleyin.

# HTTP proxy için anonimlik testi
curl -x http://PROXY_IP:PROXY_PORT http://ipinfo.io/ip --max-time 5

Çıktı PROXY_IP ise proxy büyük olasılıkla IP düzeyinde anonimdir. Gerçek IP'niz çıkıyorsa proxy şeffaftır veya başarısız olmuştur. Farklı bir IP çıkıyorsa farklı türde bir proxy söz konusudur. Daha ileri kontroller X-Forwarded-For veya Via başlıklarına bakmayı içerir.

# Kimlik açığa çıkaran başlıkları kontrol et
curl -x http://PROXY_IP:PROXY_PORT http://headers.cloxy.net --max-time 5

Çıktıyı, kimliğinizi ele verebilecek başlıklar açısından inceleyin.

Hız ve gecikme testi

Proxy üzerinden bağlanma ve veri alma süresini ölçün.

# HTTP proxy üzerinden aktarım süresini ölç
curl -x http://PROXY_IP:PROXY_PORT http://example.com -w "Total time: %{time_total}s\n" -o /dev/null --max-time 10

Daha düşük time_total değerleri daha iyi performans anlamına gelir. Performans dalgalanabildiği için testlerin tekrarlanması önerilir.

Protokol desteği

Proxy'nin istediğiniz protokolü (HTTP, HTTPS, SOCKS4, SOCKS5) desteklediğini doğrulayın.

# SOCKS5 proxy bağlantısını test et
# Not: curl, ana makine adının proxy üzerinden çözülmesi için socks5h gerektirir
curl -x socks5h://PROXY_IP:PROXY_PORT http://ipinfo.io/ip --max-time 5

SOCKS5 olarak duyurulan bir proxy socks5h ile başarısız oluyorsa yalnızca SOCKS4 destekliyor ya da yanlış yapılandırılmış olabilir.

Konum doğrulama

Proxy sunucusunun coğrafi konumunu doğrulayın. ipinfo.io gibi servisler coğrafi konum verisi sağlar.

# Proxy IP ayrıntılarını al
curl http://PROXY_IP/json

Bildirilen ülke/şehir bilgisini proxy listesinde duyurulan konumla karşılaştırın. Tutarsızlıklar yaygındır.

Python ile otomatik doğrulama

Büyük listeler için otomatik betikler gereklidir.

import requests
import time

def verify_proxy(proxy_address, protocol='http'):
    proxies = {
        'http': f'{protocol}://{proxy_address}',
        'https': f'{protocol}://{proxy_address}'
    }
    try:
        start_time = time.time()
        response = requests.get('http://ipinfo.io/json', proxies=proxies, timeout=5)
        response.raise_for_status() # HTTP hataları için istisna fırlat
        end_time = time.time()
        data = response.json()
        print(f"Proxy {proxy_address} is operational.")
        print(f"  Speed: {end_time - start_time:.2f} seconds")
        print(f"  Reported IP: {data.get('ip')}")
        print(f"  Location: {data.get('city')}, {data.get('country')}")
        return True
    except requests.exceptions.RequestException as e:
        print(f"Proxy {proxy_address} failed: {e}")
        return False

# Örnek kullanım
# verify_proxy("1.2.3.4:8080", "http")
# verify_proxy("5.6.7.8:1080", "socks5")

Proxy listeleri kullanılmalı mı?

Herkese açık listelerdeki proxy'leri kullanma kararı büyük ölçüde kullanım amacına bağlıdır ve riskler ağır basar.

Sınırlı kullanım senaryoları

• Geçici, kritik olmayan işler: veri güvenliğinin ve güvenilirliğin önemsiz olduğu, proxy'nin hemen atılabildiği basit ve tek seferlik istekler için.
• Öğrenme ve test: proxy'lerin nasıl çalıştığını anlamak veya üretim dışı bir ortamda temel ağ yapılandırmalarını denemek için.
• Basit coğrafi kısıtlamaları aşmak: proxy doğru bölgede ve çalışır durumdaysa, önemsiz coğrafi engellere sahip içeriğe erişmek için.

Ciddi riskler ve dezavantajlar

• Güvenlik açıkları:
  • Veri dinleme (MITM): birçok ücretsiz proxy, trafiği (özellikle şifresiz HTTP bağlantılarını) dinleyebilen, kaydedebilen veya değiştirebilen kötü niyetli aktörler tarafından işletilir. Kimlik bilgileri, çerezler ve diğer hassas veriler risk altındadır.
  • Zararlı yazılım enjeksiyonu: proxy'ler web sayfalarına zararlı kod (örneğin JavaScript) enjekte ederek istemci sistemlerini tehlikeye atabilir.
  • IP sızıntısı: yanlış yapılandırılmış veya düşük kaliteli proxy'ler gerçek IP adresinizi istemeden açığa çıkarabilir ve anonimliği bozabilir.
• Güvenilmezlik ve kararsızlık:
  • Yüksek kesinti: herkese açık proxy'ler sık sık çevrimdışı olur, aşırı yüklenir ya da hızla kara listeye alınır; bu da yüksek hata oranı demektir.
  • Tutarsız performans: hızlar aşırı değişkendir; tıkanıklık veya sınırlı bant genişliği nedeniyle çoğu zaman çok yavaştır.
  • Kısa ömür: listelerdeki proxy'lerin çalışma ömrü çok kısadır; sürekli yeniden doğrulama ve değiştirme gerektirir.
• Anonimlik sorunları:
  • Kayıt tutma: birçok ücretsiz proxy kullanıcı etkinliğini kaydeder ve gizlilik kazancını ortadan kaldırır.
  • Şeffaflık: ücretsiz proxy'lerin önemli bir kısmı şeffaf (transparent) veya bozucu (distorting) türdendir; yani gerçek IP adresinizi tamamen ya da kısmen açığa çıkarır.
• Kara liste:
  • Önceden kara listelenmiş IP'ler: herkese açık listelerdeki IP'ler, geçmişteki kötüye kullanımlar nedeniyle popüler sitelerin ve servislerin (örneğin Google, sosyal medya platformları) kara listelerinde çoktan yer alır.
  • Paylaşımlı IP havuzları: bu IP'ler paylaşımlı olduğundan, yaptıklarınız aynı proxy'yi kullanan diğer kişilerin önceki kötü niyetli faaliyetleriyle ilişkilendirilebilir.

Karşılaştırma: ücretsiz proxy listeleri ile ücretli proxy servisleri

Ücretsiz proxy listelerine alternatifler

Güvenilirlik, güvenlik veya sürdürülebilir performans gerektiren her uygulama için ücretsiz listelere alternatifler şarttır.

• Ücretli özel proxy'ler: tek bir kullanıcıya özel olarak atanan adanmış IP adresleri. Herkese açık listelerden daha iyi hız, güvenilirlik ve güvenlik sunar.
• Ücretli residential proxy'ler: internet servis sağlayıcılarının (ISP) ev kullanıcılarına atadığı IP adresleri; trafiğin meşru kullanıcı trafiği gibi görünmesini sağlar. Gelişmiş tespit sistemlerini aşmakta çok etkilidir ama daha pahalıdır.
• Ücretli veri merkezi proxy'leri: veri merkezlerinden çıkan IP'ler. Residential proxy'lerden daha hızlı ve ucuzdur, ancak gelişmiş anti-bot sistemleri tarafından daha kolay tespit edilir.
• VPN servisleri: geleneksel anlamda proxy olmasalar da VPN'ler tüm trafiği şifreler ve güvenli bir sunucu üzerinden yönlendirir; genel internet kullanımı için güçlü anonimlik ve güvenlik sağlar.
• Kendi proxy'nizi kurmak: Squid, Nginx veya TinyProxy gibi yazılımlarla bir Virtual Private Server (VPS) üzerinde proxy sunucusu kurmak; güvenlik, kayıt tutma ve performans üzerinde tam denetim verir. Teknik uzmanlık gerektirir.
• Proxy ağları/API'leri: web scraping gibi belirli işler için tasarlanan, proxy rotasyonunu, CAPTCHA çözümünü ve tarayıcı parmak izini otomatik yöneten servisler.