CAPTCHA

CAPTCHA (Completely Automated Public Turing test to tell Computers and Humans Apart), web siteleri tarafından insan kullanıcıları otomatik botlardan ayırmak için uygulanır; temel amaç kötüye kullanımı önlemek ve hizmet bütünlüğünü korumaktır. Özellikle otomatik süreçlerde bununla başa çıkmak, IP rotasyonu, gelişmiş tarayıcı parmak izi (fingerprint) önlemleri ve üçüncü taraf CAPTCHA çözüm servisleriyle entegrasyon gibi stratejiler gerektirir.

Siteler Neden CAPTCHA Kullanır

Web siteleri, kaynaklarını ve kullanıcı deneyimini çeşitli otomatik kötüye kullanım biçimlerinden korumak için CAPTCHA mekanizmaları devreye alır. Bu sistemler bir kapı bekçisi gibi çalışır: insanların kolayca geçebileceği, botların ise zorlanacağı bir test ister.

Otomatik Kötüye Kullanımın Önlenmesi

CAPTCHA uygulamasının başlıca gerekçeleri şunlardır:

• Spam Önleme: Botlar sıklıkla bloglarda ve forumlarda spam yorum yayınlamak ya da e-posta spam'i için sahte hesaplar açmak amacıyla kullanılır. CAPTCHA bu otomatik gönderimleri engeller.
• Credential Stuffing ve Hesap Ele Geçirme (ATO): Otomatik betikler, çalınmış kimlik bilgisi listeleriyle kullanıcı hesaplarına giriş yapmayı dener. CAPTCHA, büyük ölçekli otomatik giriş denemelerini engeller.
• Web Scraping ve Veri Hırsızlığı: Yetkisiz botlar; ürün listeleri, fiyat bilgileri veya kullanıcı verileri gibi büyük veri hacimlerini hızla çekebilir. Bu hem sunucu kaynaklarını zorlar hem de hizmet şartlarını ihlal eder.
• Hizmet Reddi (DoS) Saldırıları: Uygulama katmanındaki DoS saldırılarında botlar belirli sayfalara sürekli erişir veya sunucuyu boğmak için hesaplama açısından ağır işlemler yürütür. CAPTCHA, her istek için doğrulama isteyerek bunları azaltabilir.
• Sahte Hesap Oluşturma: Botlar; ücretsiz deneme sürelerini, promosyon tekliflerini istismar etmek veya başka dolandırıcılık faaliyetlerinde bulunmak için çok sayıda sahte hesap açar.
• Reklam Dolandırıcılığı: Botlar, sahte gösterim veya tıklama üretmek için reklamlarla insan etkileşimini taklit eder; bu da reklam gelirini ve analitiği bozar.
• Bilet Karaborsacılığı ve Stok İstifleme: Botlar, sınırlı sayıda bulunan ürünleri (örneğin konser biletleri, sınırlı sayıda üretilen ürünler) insan kullanıcılardan önce hızla satın almak ve çoğu zaman şişirilmiş fiyatlarla yeniden satmak için kullanılır.

CAPTCHA Doğrulama Türleri

CAPTCHA teknolojisi, basit metin tanımadan karmaşık davranış analizine doğru evrildi.

Geleneksel CAPTCHA

İlk biçimler, kullanıcıdan bozulmuş metin veya rakamları yazmasını isterdi.
* Metin tabanlı: Bozulmuş harfler/rakamlar, bazen arka plan gürültüsüyle birlikte.
* Ses tabanlı: Görme engelli kullanıcılar için bozulmuş konuşma içeren bir ses kaydı.

Görsel Tabanlı CAPTCHA

Kullanıcıdan bir görsel kümesi içinde belirli nesneleri işaretlemesini ister.
* reCAPTCHA v2 ("Ben robot değilim" kutucuğu): Genellikle bir onay kutusu gösterir. Kullanıcı davranışı şüpheliyse görsel doğrulamaya yükseltilir (örneğin "trafik ışığı içeren tüm kareleri seçin").
* hCaptcha: reCAPTCHA v2'ye benzer; gizlilik gerekçeleriyle sıklıkla alternatif olarak kullanılır.

Görünmez CAPTCHA

Arka planda çalışır ve şüphe yüksek olmadıkça açık bir etkileşim istemeden kullanıcı davranışını analiz eder.
* reCAPTCHA v3: Kullanıcının site genelindeki etkileşimlerine göre bir puan (0.0 – 1.0) atar. Düşük puanlar bot benzeri davranışa işaret eder.
* hCaptcha Enterprise: Gelişmiş risk analizi, özel modeller ve kurumsal düzeyde bot tespiti için entegrasyon sunar.
* Davranışsal CAPTCHA: İnsanı bottan ayırmak için fare hareketlerini, yazım kalıplarını, kaydırma davranışını ve diğer telemetri verilerini analiz eder.

Otomatik Operasyonlarda CAPTCHA ile Nasıl Başa Çıkılır

Otomatik iş akışlarında CAPTCHA ile başa çıkmak, özellikle proxy servisleri kullanırken, çok yönlü bir yaklaşım gerektirir. Proxy'ler esas olarak CAPTCHA tetikleyicilerinden kaçınmaya yardımcı olur; CAPTCHA'ları çözmek içinse genellikle harici servisler gerekir.

CAPTCHA'dan Kaçınmak için Proxy Seçimi ve Yönetimi

Proxy altyapınızın türü ve yönetimi, CAPTCHA ile karşılaşma olasılığınızı büyük ölçüde belirler. Siteler istekleri genellikle IP itibarına, tek bir IP'den gelen istek hacmine ve user-agent verilerinin tutarlılığına bakarak işaretler.

• Residential proxy'ler: Bu IP'ler gerçek kullanıcı cihazlarından (ISP'lerden) gelir ve meşru kullanıcı gibi görünür. Özellikle hassas hedeflerde, veri merkezi proxy'lerine kıyasla işaretlenme olasılıkları daha düşüktür.
• Rotasyonlu proxy'ler: İstekleri geniş bir IP havuzuna dağıtmak (otomatik rotasyon) hiçbir IP'nin şüpheli istek hacmi biriktirmesine veya rate limit yemesine izin vermez. Bu, çeşitlilik gösteren insan trafiğini taklit eder.
• Dedicated proxy'ler: Tutarlı bir IP kimliği sunarlar; IP'nin zamanla temiz bir itibar oluşturabildiği belirli ve istikrarlı kullanım senaryoları için uygundur. Ancak kötüye kullanım tespit edilirse tek bir dedicated IP kolayca engellenebilir.
• Mobil proxy'ler: Mobil operatörlere ait IP'ler, mobil verinin dinamik yapısı ve maliyeti nedeniyle genellikle yüksek güvenilirlikte kabul edilir. Çok agresif anti-bot sistemlerinde CAPTCHA tetikleme olasılığı en düşük seçenektir.

CAPTCHA'dan Kaçınma Açısından Proxy Türlerinin Karşılaştırması:

Tarayıcı Parmak İzi ve Header Yönetimi

Siteler, IP adresinin ötesinde botları belirlemek için tarayıcı özelliklerini ve istek header'larını da analiz eder.

• User-Agent dizeleri: User-Agent dizenizin tutarlı olduğundan ve yaygın bir tarayıcı/işletim sistemi kombinasyonunu taklit ettiğinden emin olun. Gerekirse User-Agent'ları rotasyona sokun.
• HTTP header'ları: Gerçek bir tarayıcının göndereceği standart header'ları ekleyin (örneğin Accept, Accept-Language, Referer).
• Tarayıcı emülasyonu: Sayfaları render eden ve JavaScript çalıştıran headless tarayıcı framework'lerini (örneğin Puppeteer, Playwright, Selenium) kullanın; böylece istekler daha insansı görünür. Bunları yaygın bot tespit kalıplarından kaçınacak şekilde yapılandırın (örneğin navigator.webdriver özelliği).
• Canvas fingerprinting: Botların canvas render çıktıları çoğu zaman öngörülebilirdir. Gelişmiş emülasyon bu sorunu giderebilir.
• WebGL fingerprinting: Canvas'a benzer şekilde, WebGL parametrelerinin gerçek bir tarayıcıyla uyumlu olduğundan emin olun.

import requests

proxies = {
    "http": "http://user:password@proxy_ip:port",
    "https": "http://user:password@proxy_ip:port",
}

headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36",
    "Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7",
    "Accept-Language": "en-US,en;q=0.9",
    "Referer": "https://www.google.com/",
    # ... diğer ilgili header'lar
}

try:
    response = requests.get("https://example.com/protected-page", proxies=proxies, headers=headers, timeout=10)
    response.raise_for_status() # HTTP hatalarında istisna fırlatır
    print(response.text)
except requests.exceptions.RequestException as e:
    print(f"Request failed: {e}")
    # Mümkünse yanıtı CAPTCHA belirtileri açısından kontrol edin

Harici CAPTCHA Çözüm Servisleri

CAPTCHA'lardan kaçınmak mümkün olmadığında, harici servisler bunları çözmek için bir mekanizma sunar. Bu servisler proxy altyapınızdan bağımsız çalışır, ancak genellikle onunla birlikte kullanılır.

• İnsan gücüne dayalı çözücüler: Bu servisler CAPTCHA doğrulamalarını, onları gerçek zamanlı çözen insan çalışanlara yönlendirir. Doğrulukları çok yüksektir, ancak gecikme ekleyebilir ve çözüm başına maliyetleri daha yüksektir.
• AI/ML tabanlı çözücüler: Otomatik sistemler, yaygın CAPTCHA türlerini (özellikle görsel tanımayı) çözmek için makine öğrenmesi modelleri kullanır. Daha hızlı sonuç ve daha düşük maliyet sunar; ancak karmaşık veya yeni CAPTCHA türlerinde doğrulukları düşük olabilir.
• Entegrasyon: Çözüm servislerinin çoğu, otomatik iş akışlarına entegrasyon için API sunar. Botunuz bir CAPTCHA tespit eder, doğrulama ayrıntılarını (örneğin site key, görsel verisi) çözücü API'ye gönderir ve çözüm token'ını ya da metnini alır; bu da hedef siteye gönderilir.

# CAPTCHA çözüm servisi API'siyle entegrasyon için sözde kod
import requests
import json

def solve_captcha(site_key, page_url, service_api_key):
    # reCAPTCHA v2 doğrulaması için örnek
    payload = {
        "clientKey": service_api_key,
        "task": {
            "type": "NoCaptchaTaskProxyless", # Çözücü proxy kullanıyorsa NoCaptchaTask
            "websiteURL": page_url,
            "websiteKey": site_key
        }
    }

    # İsteği CAPTCHA çözüm servisine gönder
    create_task_url = "https://api.captchasolver.com/createTask"
    response = requests.post(create_task_url, json=payload).json()

    if response["errorId"] == 0:
        task_id = response["taskId"]
        print(f"CAPTCHA task created with ID: {task_id}")

        # Sonucu sorgula
        get_result_url = "https://api.captchasolver.com/getTaskResult"
        while True:
            result_payload = {
                "clientKey": service_api_key,
                "taskId": task_id
            }
            result_response = requests.post(get_result_url, json=result_payload).json()
            if result_response["errorId"] == 0 and result_response["status"] == "ready":
                return result_response["solution"]["gRecaptchaResponse"] # Gönderilecek token
            elif result_response["status"] == "processing":
                import time
                time.sleep(3) # Bekle ve yeniden sorgula
            else:
                print(f"Error solving CAPTCHA: {result_response}")
                return None
    else:
        print(f"Error creating CAPTCHA task: {response}")
        return None

# Kullanım örneği:
# captcha_token = solve_captcha("YOUR_SITE_KEY", "https://target-site.com", "YOUR_SOLVER_API_KEY")
# if captcha_token:
#     # captcha_token'ı form verilerinizle birlikte hedef siteye gönderin
#     pass

Rate Limit ve Doğal Etkileşim

Sağlam proxy'ler ve doğru fingerprint ayarlarına rağmen, aşırı istek hızları veya doğal olmayan etkileşim kalıpları CAPTCHA tetikleyebilir.

• Throttling: İnsan gezinme hızını taklit etmek için istekler arasına gecikme koyun.
• Rastgeleleştirme: Öngörülebilir bot kalıplarından kaçınmak için rastgele gecikmeler ve değişken gezinme yolları ekleyin.
• Çerezler ve oturumlar: Kesintisiz bir kullanıcı oturumu gibi görünmek için oturum çerezlerini ve diğer durum bilgilerini koruyun.

Akıllı proxy yönetimini gelişmiş tarayıcı emülasyonuyla ve gerektiğinde harici CAPTCHA çözüm servisleriyle birleştirmek, otomatik ortamlarda CAPTCHA korumalı sitelerde gezinmek için en sağlam çözümü sunar.