alephpi/Texo

해결하는 문제

Texo는 수학 공식 이미지를 LaTeX 코드로 변환하도록 설계된 경량 오픈 소스 LaTeX OCR 모델입니다. 수학 노트를 디지털화해야 하는 STEM 학습자와 연구자들을 위해 빠르고 접근하기 쉬우며 정확한 도구에 대한 요구를 해결합니다.

작동 방식

Texo는 PPFormulaNet-S 모델을 증류한 버전으로, UniMERNet-1M 데이터셋에서 미세 조정되었습니다. 모델 인코더와 디코더의 조합을 사용하여 수학 이미지의 패턴을 인식하고 이를 LaTeX 명령의 폐쇄된 어휘로 변환합니다.

대상 사용자

이 프로젝트는 주로 손으로 쓰거나 인쇄된 수학 공식을 LaTeX 형식으로 빠르게 변환해야 하는 STEM 학생, AI 학습자 및 연구자를 위한 것입니다.

주요 특징

• 미니멀한 설계: 2,000만 개의 파라미터만 포함되어 있어 UniMERNet-T (107M)와 같은 다른 SOTA 모델보다 훨씬 작습니다.
• 높은 성능: UniMERNet-Test 데이터셋의 BLEU 및 편집 거리 지표 측면에서 더 큰 모델과 대등한 성능을 유지합니다.
• 소비자급 학습: 최소 16GB의 GPU 메모리가 있으면 소비자 수준의 GPU에서 학습할 수 있습니다.
• 브라우저 지원: 동반 웹 프로젝트를 통해 브라우저에서 직접 실행하는 것을 지원합니다.
• 빠른 추론: 가볍고 빠른 추론 속도를 위해 최적화되었습니다.