자이나 전자 도서관, 400만 스캔 페이지를 2만 2천 명 사용자를 위한 JainGPT로 탈바꿈시키다

자이나 전자 도서관은 자이나 종교 문헌이 도서관, 사원 보관소, 전문 기관에 흩어져 있었기 때문에 2008년부터 고대 필사본, 서적, 논문, 오디오 파일, 경전을 디지털화하기 시작했습니다. 2020년 Anish Visaria가 합류했을 당시 이 프로젝트는 방대하지만 사용하기 어려운 아카이브를 갖고 있었습니다.

Visaria는 광학 문자 인식(OCR)을 사용해 400만 장이 넘는 스캔 페이지에서 원시 텍스트를 추출했습니다. 팀은 완전한 대화형 AI 시스템을 기다리는 대신 먼저 구글과 유사한 검색 엔진인 Jain Quantum을 구축한 뒤, 2023년 JainGPT를 출시해 사용자들이 자이나교와 그 일차 자료에 대해 질문할 수 있게 했습니다.

단계적 접근은 측정 가능한 성과를 냈습니다. Jain Quantum은 지난 한 해 동안 79만 명의 사용자를 확보했고, JainGPT는 출시 후 2만 2천 명의 사용자를 확보했으며 대부분 14세에서 35세 사이였습니다. 이 도구는 아직 자연어 대규모 언어 모델이 아니라 의미 검색이었음에도 연구자, 교수, 디아스포라 사용자, 비자이나교인들도 이를 이용했습니다.

Jain Quantum은 지난 한 해 동안 79만 명의 사용자를 확보했고, JainGPT는 2023년 출시 후 2만 2천 명의 사용자에 도달해 젊은 독자와 연구자에게 일차 문헌을 열어 주었습니다.

기존 자이나 문헌은 도서관, 사원 보관소, 전문 기관 밖에서는 접근하기 어려웠습니다.

젊은 사용자들은 경전과 관련 저작에 대해 질문하고 답을 받을 더 쉬운 방법을 필요로 했습니다.

OCR은 400만 장이 넘는 스캔 페이지를 검색 가능한 제품을 뒷받침할 수 있는 원시 텍스트로 변환했습니다.

JainGPT보다 Jain Quantum을 먼저 구축함으로써 완전한 대규모 언어 모델을 기다리지 않고도 유용성을 제공했습니다.

특화된 아카이브를 사용하기 어려울 때는 먼저 기반 코퍼스를 디지털화한 뒤 검색과 대화형 접근을 추가하십시오. 최종 인터페이스가 완전히 성숙하기 전에도 채택이 늘어날 수 있습니다.

자이나 전자 도서관의 디지털 접근은 자이나 신자 너머로 확대되었습니다. Visaria는 JainGPT가 의식, 기도, 자이나 철학을 배우는 사용자뿐 아니라 연구자와 교수에게도 서비스를 제공했다고 말했습니다. 이 도구에는 여전히 자연어 LLM 계층이 필요했지만, 아카이브는 이미 검색 가능하고 전 세계적으로 사용할 수 있는 자원이 되어 있었습니다.