스마트 TV와 AI 스크래핑 경제: Bright Data SDK가 기기를 프록시로 전환하는 방법

소비자 전자기기, 특히 스마트 TV와 모바일 애플리케이션이 주거용 프록시 역할을 하면서 전 세계적인 “AI 스크래핑 경제”에 통합되고 있습니다. 특정 SDK를 삽입함으로써 Bright Data와 같은 기업은 제3자 웹 스크래핑 트래픽을 사용자의 가정 IP 주소를 통해 라우팅할 수 있어, 스크래핑 트래픽이 정상적인 주거용 사용자 활동으로 보이게 하여 대상 웹사이트의 탐지를 피합니다.

프록시 SDK의 기술 구현

프록시 기능은 명령·제어(C&C) 서버와 지속적인 연결을 설정하는 SDK를 통해 구현됩니다.

연결 및 라우팅

SDK가 구성 정보를 가져오면 wss://proxyjs.brdtnet.com:443에 지속적인 WebSocket 연결을 엽니다. 이 호스트 이름은 AWS Global Accelerator IP 주소로 해석됩니다. 이러한 연결에 사용되는 TLS 인증서는 CN=*.luminatinet.com이며, Bright Data의 2018년 이전 기업명인 Luminati Networks를 참조합니다.

인터페이스 선택을 통한 VPN 우회

iOS 기기에서는 SDK가 사용자가 설정한 VPN을 명시적으로 우회할 수 있습니다. SDK 구성에는 "use_netifs": true 플래그가 포함되어 있으며, 이는 시스템 기본 라우트 대신 특정 인터페이스(en0(WiFi) 또는 pdp_ip0(셀룰러))를 사용해 네트워크 연결(NWConnection)을 구성하는 코드를 트리거합니다. 이를 통해 프록시 터널이 대부분의 VPN이 사용하는 tun0 인터페이스를 통과하지 않게 하여, 프록시 트래픽을 사용자의 VPN 모니터링 도구로부터 효과적으로 숨깁니다.

최종 사용자에게 미치는 위험

소비자 기기를 주거용 프록시로 전환하면 기기 소유자에게 중대한 보안 및 법적 위험이 발생합니다.

법적 및 포렌식 위험

기기의 IP 주소가 제3자를 위해 데이터를 가져오는 데 사용되기 때문에, 대상 웹사이트에 보이는 것은 IP 주소 소유자입니다. 이로 인해 프록시를 통해 제3자가 수행한 불법 행위가 가정 사용자에게 귀속될 위험이 발생합니다. 커뮤니티 구성원들의 언급처럼:

경찰이 당신의 집에 찾아와서 당신이 아동 포르노를 거래하고 있다고 판단했지만, 실제 범인은 당신의 TV를 프록시로 사용해 아동 포르노를 거래하고 있는 사람이라는 상황을 상상해 보세요.

자원 소비

이 네트워크의 노드 역할을 하는 기기는 대역폭과 시스템 자원을 소비합니다. 사용자는 스마트 TV가 인간에 의해 적극적으로 사용되지 않을 때에도 네트워크 트래픽 급증 및 차단된 DNS 쿼리가 발생한다는 보고를 했습니다.

탐지 및 완화 전략

기기가 스크래핑 경제에 참여하지 못하도록 하려면 네트워크 수준 차단과 하드웨어 선택을 결합해야 합니다.

네트워크 수준 방어

DNS 차단 및 SNI 필터링: *.brdtnet.com 또는 *.luminatinet.com과 같은 알려진 Bright Data 엔드포인트에 대한 요청을 차단하면 C&C 연결을 방해할 수 있습니다. 그러나 일부 전문가들은 이러한 엔드포인트가 탐지를 피하기 위해 자주 교체될 수 있다고 경고합니다.
방화벽: 스마트 TV가 외부 인터넷에 접근하지 못하도록 하면서 로컬 제어(예: HomeAssistant)를 허용하는 엄격한 방화벽을 구현하면 SDK를 무력화하는 효과적인 방법이 됩니다.
네트워크 모니터링: AdGuard와 같은 도구나 DNS 로그를 사용하면 비정상적으로 많은 양의 외부 요청을 생성하는 기기를 식별하는 데 도움이 됩니다.

하드웨어 및 구성

스마트 기능 에어갭: 일부 사용자는 HDMI 입력을 사용하고 TV 자체를 WiFi에 연결하지 않음으로써 스마트 TV를 “덤” 디스플레이로 취급할 것을 권장합니다.
앱 감사: 연구에 따르면 수십 개의 iOS 앱에 brdsdk.framework가 포함될 수 있습니다. 사용자는 설치된 소프트웨어에 포함된 SDK를 감사함으로써 이러한 앱을 식별할 수 있습니다.

웹 인프라에 미치는 광범위한 영향

주거용 프록시 네트워크의 증가는 스크래퍼와 웹사이트 운영자 간에 “고양이와 쥐” 게임을 만들었습니다. 트래픽이 주거용 IP에서 발생하기 때문에 IP 평판에 기반한 전통적인 봇 탐지 방법은 효과가 떨어집니다. 이로 인해 주거용 프록시에서 발생하는 트래픽이 증가하여 소규모 웹사이트를 압도하고, 주거용 소스 스크래핑에 대한 보다 강력한 방어책에 대한 수요가 촉발되었습니다.