ASN (Número de Sistema Autônomo)

Um Autonomous System Number (ASN) é um identificador único atribuído a um sistema autônomo (AS), que é uma rede ou um conjunto de redes sob uma única entidade administrativa que apresenta à Internet uma política de roteamento comum e claramente definida. No contexto de proxies, o ASN de um servidor proxy pode ser usado para diversas finalidades, incluindo identificar o provedor do proxy, geolocalizar a origem do proxy e aplicar políticas de segurança baseadas na propriedade da rede.

Entendendo sistemas autônomos e ASNs

Um sistema autônomo (AS) é um componente crítico da infraestrutura de roteamento da Internet. É essencialmente uma grande rede ou conjunto de redes administrado por uma única entidade, como um provedor de acesso à Internet (ISP), uma grande organização ou um provedor de nuvem. A característica principal de um AS é que ele tem uma política de roteamento unificada, ou seja, ele determina como vai rotear o tráfego dentro da própria rede e como vai interagir com outras redes na Internet.

Cada AS recebe um Autonomous System Number (ASN) único. Esse número é fundamental para o Border Gateway Protocol (BGP), o protocolo de roteamento que rege como os diferentes ASes trocam informações de roteamento pela Internet. O BGP usa ASNs para identificar o caminho que o tráfego deve seguir até chegar à rede de destino.

Como os ASNs são atribuídos

Os ASNs são atribuídos por registros regionais da Internet (RIRs), como:

• ARIN: América do Norte
• RIPE NCC: Europa, Oriente Médio e partes da Ásia Central
• APNIC: região da Ásia-Pacífico
• LACNIC: América Latina e Caribe
• AfriNIC: África

Esses RIRs garantem que cada ASN seja único e que a alocação seja gerenciada corretamente. Organizações que solicitam um ASN normalmente precisam demonstrar que atendem a critérios específicos, como ter uma rede multi-homed (conectada a pelo menos dois outros ASes) e uma política de roteamento própria.

O papel do BGP

O BGP é a pedra angular do roteamento entre ASes. Ele permite que os ASes anunciem a acessibilidade de suas redes a outros ASes. Quando um AS recebe uma atualização BGP de um AS vizinho, ele fica sabendo dos caminhos que podem ser usados para alcançar redes específicas. O AS então usa sua própria política de roteamento para escolher o melhor caminho para encaminhar o tráfego.

Os ASNs são parte integrante do BGP porque estão incluídos nas informações de roteamento trocadas entre os ASes. Isso permite que cada AS trace o caminho percorrido pelo tráfego e identifique possíveis loops de roteamento ou outros problemas.

ASNs e servidores proxy: aplicações práticas

Proxies atuam como intermediários entre clientes e servidores de destino. Ao usar um proxy, seu tráfego parece ter origem no endereço IP do servidor proxy. O ASN associado a esse endereço IP fornece informações valiosas.

Identificação de provedores de proxy

O ASN ajuda a identificar a organização que opera o servidor proxy. Consultando o ASN associado ao IP do proxy, muitas vezes é possível determinar o provedor do proxy (por exemplo, um serviço de proxies residenciais, um provedor de proxies de datacenter ou um serviço de VPN). Isso pode ser útil para:

• Verificar a legitimidade de um serviço de proxy: um provedor de proxy respeitável tem um ASN registrado.
• Diagnosticar problemas relacionados a proxies: saber quem é o provedor ajuda a acionar os canais de suporte corretos.
• Entender a infraestrutura do proxy: proxies de datacenter geralmente têm ASNs associados a provedores de datacenter, enquanto proxies residenciais costumam estar associados a ISPs.

Você pode usar ferramentas como whois ou serviços online de consulta de ASN para descobrir o ASN associado a um endereço IP.

whois <proxy_ip_address>

A saída normalmente inclui o ASN (por exemplo, AS12345) e a organização que o detém.

Geolocalização baseada em ASN

Embora não seja tão precisa quanto a geolocalização por IP, o ASN dá uma ideia geral da localização geográfica do proxy. O RIR que atribuiu o ASN é geograficamente específico (por exemplo, ARIN para a América do Norte). Portanto, o ASN pode indicar a região onde o servidor proxy provavelmente está localizado. Isso pode ser útil para:

• Verificar a localização anunciada do proxy: se um provedor afirma oferecer proxies em um país específico, você pode checar o ASN para ver se ele bate com essa localização.
• Aplicar controles de acesso por região: você pode bloquear ou liberar tráfego com base no ASN do servidor proxy.
• Detectar possíveis fraudes: se for detectado tráfego vindo de um ASN inesperado, isso pode indicar atividade fraudulenta.

Porém, é importante notar que a localização do ASN nem sempre é exata, já que algumas organizações podem ter ASNs registrados em regiões diferentes daquelas em que seus servidores estão fisicamente instalados. Para maior precisão, use sempre geolocalização baseada em IP.

Aplicação de políticas de segurança

ASNs podem ser usados para aplicar políticas de segurança baseadas na propriedade da rede. Por exemplo, você pode optar por:

• Bloquear tráfego de ASNs maliciosos conhecidos: empresas de segurança costumam manter listas de ASNs associados a botnets, spammers e outros agentes maliciosos.
• Priorizar tráfego de ASNs confiáveis: você pode dar tratamento preferencial ao tráfego originado de ASNs em que confia.
• Monitorar tráfego de ASNs específicos: você pode monitorar de perto o tráfego originado de ASNs conhecidos por estarem associados a certos tipos de atividade.

Isso pode ser implementado em firewalls, sistemas de detecção de intrusão e outros appliances de segurança.

Estratégias de rotação de proxies

Algumas estratégias avançadas de rotação de proxies usam ASNs para diversificar os endereços IP utilizados. O objetivo é evitar detecção e banimentos pelos sites-alvo. Isso pode envolver:

• Rotacionar entre proxies do mesmo ASN: isso oferece certo grau de diversidade de IP mantendo uma identidade de rede consistente.
• Rotacionar entre proxies de ASNs diferentes: isso proporciona maior diversidade de IP, mas também pode aumentar o risco de detecção, já que tráfego vindo de vários ASNs pode parecer suspeito.

A escolha da estratégia depende do caso de uso específico e das medidas antiproxy do site-alvo.

Filtragem por ASN em web scraping

No web scraping, usar proxies é vital para evitar banimentos de IP. Alguns sites implementam bloqueio por ASN para impedir scraping a partir de provedores de hospedagem ou datacenters específicos. Nesse caso, usar proxies residenciais com ASNs pertencentes a ISPs comuns se torna essencial.

Veja um exemplo de como filtrar proxies por ASN usando Python:

import requests
import json

def get_asn(ip_address):
    """Retrieves the ASN for a given IP address."""
    try:
        response = requests.get(f"https://api.hackertarget.com/aslookup/?q={ip_address}") # Use aqui qualquer API de consulta de ASN
        response.raise_for_status()  # Levanta HTTPError para respostas ruins (4xx ou 5xx)
        asn_data = response.text.strip()
        if "No ASN Record found" in asn_data:
            return None
        return asn_data
    except requests.exceptions.RequestException as e:
        print(f"Error fetching ASN: {e}")
        return None

def filter_proxies_by_asn(proxy_list, allowed_asns):
    """Filters a list of proxies, keeping only those with allowed ASNs."""
    filtered_proxies = []
    for proxy in proxy_list:
        try:
            ip_address = proxy.split('@')[1].split(':')[0] # Extrai o IP da string do proxy
            asn = get_asn(ip_address)
            if asn and asn in allowed_asns:
                filtered_proxies.append(proxy)
        except Exception as e:
            print(f"Error processing proxy {proxy}: {e}")
    return filtered_proxies

# Exemplo de uso:
proxy_list = ["http://user:[email protected]:8080", "http://user:[email protected]:8080", "http://user:[email protected]:8080"]
allowed_asns = ["AS12345", "AS67890"]  # Substitua pelos ASNs que você quer permitir

filtered_proxies = filter_proxies_by_asn(proxy_list, allowed_asns)
print(f"Filtered proxies: {filtered_proxies}")

Considerações importantes:

• API de consulta de ASN: o código usa api.hackertarget.com. Isso é apenas um exemplo, e você pode precisar de uma API mais robusta e confiável para consultas de ASN. Há muitas APIs de consulta de ASN disponíveis, algumas gratuitas e outras pagas. Verifique os limites de uso e a precisão de cada uma.
• Tratamento de erros: o código inclui tratamento básico de erros, mas você pode precisar de um tratamento mais sofisticado para lidar com problemas de rede, erros de API e formatos de proxy inválidos.
• Limite de requisições: fique atento aos limites de requisição da API de consulta de ASN escolhida. Implemente atrasos adequados ou cache para não ser bloqueado.
• Formato do proxy: o código pressupõe um formato específico de proxy (http://user:pass@ip:port). Ajuste o código se o seu formato for diferente.

ASN x endereço IP: principais diferenças

Conclusão

ASNs fornecem contexto valioso sobre a origem de rede do tráfego de servidores proxy. Entender os ASNs e como eles são usados no contexto de proxies ajuda você a tomar decisões fundamentadas sobre seleção de proxies, políticas de segurança e estratégias avançadas de rotação. Ao aproveitar as informações de ASN, você melhora a confiabilidade, a segurança e a eficácia do uso de proxies.