Devotd Github
새 소식멀티모달

iivek/ledgerlens — 오프라인 영수증 항목 추출과 모델 압축 평가

iivek/ledgerlens는 영수증 사진에서 항목별 구조화 자료를 추출하고 모델 압축에 따른 변화를 평가하는 오프라인 모바일 프로젝트다.

저장소 정보iivek/ledgerlens ↗

iivek/ledgerlens는 영수증 사진에서 항목별 구조화 자료를 추출하고 모델 압축에 따른 변화를 평가하는 오프라인 모바일 프로젝트다.

GitHub 설명: Offline, on-device invoice & receipt extraction: VLM distillation + quantization + pruning with a reproducible eval harness and a React Native app.

스타
★ 0
포크
0
언어
Python
라이선스
NOASSERTION
원문 보기 ↗GitHub에서 보기 ↗

iivek/ledgerlens는 영수증 사진에서 항목별 구조화 자료를 추출하는 오프라인 모바일 프로젝트다. 저장소에는 Python 기반 모델 작업과 React Native 앱, llama.cpp 실행 경로, 평가·재점수화 스크립트가 제시되어 있다. README가 소개하는 것은 Qwen2-VL-2B 기반 모델을 기기 내 처리에 맞게 다루는 구성이다.

이 프로젝트는 큰 모델의 동작을 작은 모델로 옮기는 증류(distillation), 모델 크기를 줄이는 양자화(quantization), 일부 연결을 제거하는 가지치기(pruning)를 평가 과정에 연결한다. 이미지와 텍스트를 함께 다루는 모델(VLM)을 대상으로 압축에 따른 크기와 정확도 변화를 비교하며, SROIE와 CORD 측정 결과 및 이를 다시 평가하는 도구를 제공한다. 이런 구성은 영수증 추출에서 모델 압축과 기기 내 실행을 함께 살펴보려는 시도다.

다만 공개된 SROIE·CORD 측정은 특정 Mac에서 얻은 단일 실행이다. README도 양자화 비교를 확정적 결론으로 보지 말고 반복 측정이 필요하다고 밝힌다. 휴대전화 실행과 추가 압축 평가는 아직 진행 중이다. 따라서 현재 결과는 압축 방식의 우열을 확정하기보다, 반복 측정과 실제 휴대전화 실행으로 검증해야 할 평가 단계에 가깝다.