NyanNyanovich/nyan

해결하는 문제

Nyan은 다양한 Telegram 채널에서 뉴스를 스크래핑하고 유사한 게시물을 클러스터링하여 통합된 피드로 정리함으로써 정보 과부하를 방지하는 뉴스 아그리게이터입니다. 또한 정보의 신뢰성을 평가하기 쉽게 하기 위해 소스를 그룹화합니다.

작동 방식

시스템은 크롤러를 사용하여 Telegram 채널에서 콘텐츠를 스크래핑합니다. 데이터는 MongoDB에 저장됩니다. OpenAI 또는 OpenRouter를 통해 대규모 언어 모델(LLM)을 사용할 수 있도록 구성 가능하며, 모델 선택은 JSON 파일을 통해 구성할 수 있습니다.

대상 사용자

여러 Telegram 채널의 뉴스를 중앙 집중화되고 정리된 형태로 보고 싶지만, 유사한 중복 게시물을 읽을 필요가 없는 사용자들입니다.

주요 기능

• 자동 스크래핑: 여러 Telegram 소스에서 뉴스를 가져옵니다.
• 게시물 클러스터링: 유사한 게시물을 그룹화하여 중복을 줄입니다.
• 큐레이션: 신뢰도 기반으로 소스를 그룹화합니다.
• LLM 통합: OpenAI 및 OpenRouter를 포함한 다양한 LLM 제공업체를 지원하여 기능을 강화합니다.