Samsung Tizen 기기가 960x540 프레임에서 몇 초마다 TensorFlow Lite AlexNet 모델을 실행합니다

Samsung 스마트 TV가 Tizen 운영 체제에서 960x540 비디오 프레임에 대해 약 2초마다 온디바이스 TensorFlow Lite 이미지 분류 모델을 실행한다는 사실이 개발자 Mike(@mike64_t)가 X에 공개한 실기기 분해 분석에서 밝혀졌습니다. 모델 파일 이름은 alex.tflite이며, PyTorch torchvision.models.alexnet 아키텍처를 따르는 AlexNet 스타일 네트워크로 보이며, 보고서에 따르면 시청자가 어떤 게임을 하고 있는지 추측하기 위해 존재합니다. 시청자가 동의 게이트를 통과하지 않은 경우 출력은 폐기되는 것으로 알려졌습니다.

이 발견은 Hacker News에서 285포인트를 얻었으며, 토론은 모델에 대한 기술적 호기심, 동의한 기기와 동의하지 않은 기기 모두에서 낭비되는 에너지에 대한 불만, 그리고 소비자 하드웨어 개인정보 보호가 전혀 규제될 수 있는지에 대한 광범위한 논쟁으로 나뉘었습니다.

분해 분석이 실제로 주장하는 것

핵심 주장은 스마트 TV 원격 측정에 대한 일반적인 의심이 아니라 특정하고 명명된 아티팩트입니다. 즉, alex.tflite라는 TensorFlow Lite 모델이 INT8 양자화를 사용하여 축소된 960x540 캡처에 대해 반복 간격으로 기기에서 실행되고 있다는 것입니다.

Mike 자신의 파이프라인 설명:

확인해 봤는데, 말 그대로 960×540 이미지에 INT8 양자화를 적용한 TensorFlow Lite 모델을 몇 초마다 실행해서 어떤 게임을 하고 있는지 파악하려고 합니다. 파일 이름은 말 그대로 "alex.tflite"이고, 말 그대로 AlexNet이며 torchvision.models.alexnet을 따르는 것 같습니다.

같은 스레드에서 주장을 평가하는 사람에게 중요한 두 가지 추가 세부 사항:

• 분류 출력은 Mike가 "이상한 최근접 이웃 특징 비교"라고 설명하는 것을 사용하여 데이터베이스와 비교됩니다.
• 그는 이 접근 방식이 "99%의 경우 말 그대로 작동하지 않는다"고 말합니다. 이는 측정된 벤치마크가 아닌 비공식적인 정확도 특성화입니다.

모델: AlexNet, INT8 양자화, 960x540 프레임

AlexNet은 ImageNet 분류 챌린지에서 우승한 2012년 시대의 합성곱 신경망입니다. 960x540 해상도에서 INT8 양자화를 사용하는 AlexNet 형태의 모델을 사용하는 것은 서버가 아닌 TV의 시스템 온 칩에서 저렴하고 지속적으로 실행되어야 하는 온디바이스 콘텐츠 인식 워크로드와 일치합니다.

인용된 세부 사항(960x540 샘플링 해상도, INT8 양자화, 약 "몇 초마다" 실행 주기)은 이것이 일회성 분석 업로드와 구별되는 점입니다. 모델은 로컬에서 반복적으로 실행됩니다. Mike는 또한 스레드와 함께 TensorFlow 모델 그래프와 덤프된 프레임 캡처를 게시했습니다.

동의 게이트는 추론 후에 오지, 추론 전에 오지 않습니다

Hacker News 토론에서 가장 반복된 비판 중 하나는 아키텍처에 관한 것입니다. 모델은 동의를 확인하기 전에 실행되며, 동의가 부여되지 않으면 결과가 폐기됩니다.

stavros는 비효율성을 요약했습니다:

동의하지 않으면 결과를 실행한 다음 버리는 건가요? 전기 낭비하는 방법이네...

kmeisthax는 동일한 설계를 개인정보 보호에 민감한 사용자에게 불리하게 작용하는 것으로 규정했습니다:

동의 여부와 관계없이 비싼 스파이 모델을 실행해서 동의를 거부한 사람들이 더 나은 배터리 수명을 얻지 못하게 하는 점이 정말 마음에 듭니다. 마치 배터리의 일부가 여전히 삼성의 마케팅 목적을 위한 삼성 소유인 것처럼요.

Mike 자신의 표현은 모델이 "동의 게이트가 나중에 오기 때문에 결과를 그냥 허공에 버리는 것 같다"는 것이었습니다.

플랫폼은 Tizen이며, 이는 Samsung TV를 가리킵니다

스레드에서 @log4j의 답변은 모델을 맥락에 배치합니다: 실기기에서 분석을 실행하여 생성된 "tizen의 주요 우려 사항"을 분석하는 더 긴 문서입니다.

samsung 발견에 대한 라이브 트윗은 재미있었습니다. 제 에이전트에게 조금 더 시간을 주겠지만, 이 문서는 이미 실기기에서 실행된 tizen의 주요 우려 사항에 대한 가장 포괄적인 분석입니다.

Tizen은 Samsung의 스마트 TV용 운영 체제로, 이 발견을 휴대폰 기능이 아닌 스마트 TV 기능으로 읽을 수 있게 합니다. "어떤 게임을 하고 있는지" 식별한다는 언급은 연결된 게임 콘솔을 포함하여 화면에 표시된 내용을 분류하려는 TV와 일치합니다.

여러 Hacker News 댓글 작성자는 어떤 Samsung 제품이 논의되고 있는지 확신하지 못했습니다. HackerThemAll은 다음과 같이 썼습니다:

삼성 뭐? 냉장고? 에어컨? 식기세척기? 굴착기? 설명 한 마디만 더 하면 명확해질 텐데, 지금은 TV, 컴퓨터 모니터, 스마트폰인지 누가 알겠어요.

그리고 jacquesm은 우려를 다른 Samsung 하드웨어로 일반화했습니다: "TV에 이런 짓을 한다면, 휴대폰에는 뭘 하는 걸까?"

그 모호함은 명확히 언급할 가치가 있습니다: 스레드의 증거는 Tizen에 초점을 맞추고 있으며, Tizen은 TV 플랫폼이지만, 토론 자체는 댓글에서 기기 문제를 완전히 해결하지 못했습니다.

규제: 나무 판자 규칙이 시행되는 이유와 이것이 시행되지 않는 이유

스레드에서 가장 많은 투표를 받은 댓글은 좁고 오래된 규제와 소비자 데이터 수집에 대한 규제 부재를 대조했습니다.

영국에 "나무 판자는 보도를 따라 운반해서는 안 된다. 차량에서 내리거나 건물로 가져가는 경우에만 이동할 수 있다"는 법이 있다는 것이 정말 놀랍습니다. 하지만 빅테크는 전혀 규제할 수 없습니다. 우리는 충분히 성가신 사소한 것들을 규제하곤 했지만, 전체 인구를 감시하고 염탐하는 산업 전체는 괜찮습니다.

다른 댓글 작성자들은 법적 프레임워크를 직접 제기했습니다. zug_zug는 동의 없이도 행동이 지속된다는 별도의 분석을 지적하며 "이것은 법정에 가야 한다"고 썼습니다. nekusar는 소비자 하드웨어에서의 대규모 수집을 도청으로 규정하고, 규모에 따라 이를 수행하는 기업에 대한 기업 사형을 주장했습니다.

경제적 논쟁: 하드웨어 제조업체가 최악의 데이터 관리자입니다

miki123211의 긴 댓글은 TV 제조업체가 광고 회사보다 이런 종류의 파이프라인을 구축하는 이유에 대한 구조적 설명을 제공했습니다.

개인정보 보호에 대해 사람들이 이해했으면 하는 것은 회사가 기술과 덜 관련될수록 개인정보 보호 기록이 더 나쁘다는 것입니다. Meta와 Google은 절대 데이터를 팔지 않을 것입니다... 그들은 기술에 대해 무지하고, 데이터로 무엇을 해야 할지 모르며, 가격으로 치열하게 경쟁해야 합니다. 노련한 데이터 브로커가 와서 가격을 경쟁사보다 낮추고 데이터를 팔아 손실을 메우는 방식으로 사실상 시장 점유율을 얻을 수 있는 방법을 제안한다면? 그들은 거절할 수 없는 제안입니다. 하드웨어 제조업체는 대부분 식료품점 측에 있습니다... 개인정보 보호를 의미 있게 강화하려면 Meta를 그만두지 말고 Target, Visa, LG를 그만두세요.

그 논쟁은 alex.tflite 발견을 일탈이 아닌 저마진 하드웨어 비즈니스 모델의 증상으로 재구성합니다.

제안된 인증: 개인정보 보호를 위한 Energy Star

Terr_는 에너지 효율에서 차용한 자발적 라벨 플러스 조달 모델을 제안했습니다:

컴퓨터에 있던 Energy Star 로고 기억하세요? 이제 "이건 당신을 염탐하지 않을 것"이라는 공유 기준 표준 같은 것이 필요할 때입니다. 거짓으로 광고하는 회사에 막대한 재정적 벌칙을 부과하는 방식으로요. 정부가 구매하는 모든 것에 요구 사항으로 만들어 채택을 촉진하세요.

제안된 메커니즘은 다음과 같습니다: 공유 기준 표준, 허위 주장에 대한 무거운 벌칙, 그리고 소비자가 전력 소비를 비교하듯 개인정보 보호를 비교할 수 있도록 정부 구매로 채택을 부트스트래핑하는 것입니다.

논의된 완화 옵션: 비스마트 TV, 차단, 루팅

Smalltalker-80은 회피가 여전히 실용적이고 저렴하다고 주장했습니다:

사람들이 왜 아직도 스마트 TV를 사는지 이해할 수 없습니다. 큰 EU 온라인 쇼핑몰(bol.com)을 방금 확인했는데, 스마트하지 않은 풀HD 40인치 TV를 200달러 미만에 살 수 있습니다.

unstatusthequo는 TV 플랫폼 자체가 통제권을 되찾는 데 장애물이라고 지적했습니다: "Tizen이 루팅되었으면 좋겠어요. 느린 삼성 UI 위에 커스텀 펌웨어를 올리고 싶습니다."

ComputerGuru는 개인적인 경험에서 세대적 단절을 언급하며 2011년 삼성 플라즈마 TV가 "안전"했고 업계가 "그 이후로 내리막길"이라고 썼습니다. egamirorrim은 많은 독자들이 공유하는 실용적인 질문을 던졌습니다: 삼성 TV를 무력화하는 통합 가이드가 있는지 여부입니다.

스레드에서 추측에 불과한 주장

세 가지 댓글 스레드는 분해 분석의 증거를 넘어섰으며, 이를 분리해야 합니다:

• 게임 및 콘텐츠 인식 대 DRM. breakingcups는 동일한 온디바이스 기능이 HDCP와 같은 콘텐츠 보호 기술을 대체할 수 있는지 추측했습니다: "TV에 내장된 기능을 활용할 수 있다면 HDCP 같은 DRM이 필요한가?"
• 시장 데이터. jareklupinski는 회의실 마이크가 거래 신호를 공급하는 가상 시나리오를 제기했습니다: "삼성/LG 물건이 주식 시장이 한동안 이른 아침 거래에서 일부 사람들에게 그렇게 '예측 가능'해 보였던 이유인지 궁금합니다..." 이것은 주장이 아닌 사고 실험으로 제시되었습니다.
• 전력 효율 최적화. hypfer는 추론이 콘텐츠 기반으로 매개변수를 최적화하여 기기 효율성을 높이는 데에도 사용될 수 있다고 제안했습니다: "콘텐츠에 따라 매개변수를 최적화하여 전력 효율 등을 개선하는 데 사용되지 않았나요? 데이터 수집에도 사용되겠지만, 그 이상일 수도 있습니다. 아마도?"

한 댓글 작성자 codedokode는 비판을 별도의 기술로 확장했습니다: 삼성이 존재하지 않는 도메인에 대한 DNS 프로브와 잘못된 요청을 실행하고, 단순한 조건문으로 충분한 결과를 머신 러닝으로 분류한다는 것입니다.

발견이 입증하지 못하는 것

소스 자료의 한계에 대해 정확히 언급할 가치가 있습니다. 공개 증거는 한 개발자의 분해 분석 스레드와 실기기에서 더 긴 Tizen 문서를 확인하는 답변입니다. 스레드에는 모델에 대한 공개된 정확도 벤치마크, 어떤 데이터가 어떤 조건에서 기기를 떠나는지에 대한 완전한 목록, 또는 alex.tflite에 대한 Samsung의 명시된 목적에 대한 문서가 포함되어 있지 않습니다. 분류기가 "99%의 경우" 실패한다는 Mike의 추정은 측정된 결과가 아닌 그의 개인 평가입니다.

스레드가 명확히 입증하는 유일한 것은 명명된 양자화된 AlexNet 계열 TensorFlow Lite 모델이 실시간 Samsung Tizen 기기에서 정기적인 간격으로 실시간 화면 콘텐츠에 대해 실행되고, 추론이 실행된 후에 평가되는 동의에 따라 출력이 제한된다는 것입니다.