Freeing the Law with LOCUS: A Local Ordinance Corpus for the United States
Paper ID: 2606.19334 โข 2 Upvotes
Dataset NLP Legal-AI OCR RAG
๐ ํต์ฌ ์์ฝ
๋ฏธ๊ตญ ์ ์ญ์ ์ง๋ฐฉ ์กฐ๋ก ๋ฐ์ดํฐ๋ฅผ ์์งยท์ ํํํ์ฌ ๋ฒ๋ฅ AI ์ฐ๊ตฌ์ ์ฌ๊ฐ์ง๋๋ฅผ ํด์ํ ๋๊ท๋ชจ ์ฝํผ์ค ๋ฐ ๋ชจ๋ธ ๊ณต๊ฐ
๐ ์์ธ ๋ด์ฉ
๋ฒ๋ฅ AI์ ๋ฐ์ ์ ์ ๋ขฐํ ์ ์๋ ํ
์คํธ ๋ฐ์ดํฐ์ ์์กดํ์ง๋ง, ์ผ์์ํ๊ณผ ๋ฐ์ ํ ์ง๋ฐฉ ์กฐ๋ก๋ ํํธํ๋ ํ๋ซํผ์ ๊ฐํ ์์ด ๋๊ท๋ชจ ์ฐ๊ตฌ์ ํ์ฉํ๊ธฐ ์ด๋ ค์ ์ต๋๋ค. ์ด๋ฅผ ํด๊ฒฐํ๊ธฐ ์ํด ์ฐ๊ตฌ์ง์ ๋ฏธ๊ตญ ๋ด 9,239๊ฐ ์ยท๊ตฐ ์กฐ๋ก๋ฅผ ํฌํจํ๋ ๋๊ท๋ชจ ์ฝํผ์ค์ธ LOCUS๋ฅผ ๊ตฌ์ถํ์ต๋๋ค. OCR ๊ธฐ์ ์ ํ์ฉํด ๋ค์ํ ๋ฌธ์ ํ์์ ์ฒ๋ฆฌํ๊ณ , ์ธ๊ตฌ ๋๋ค์๋ฅผ ์ปค๋ฒํ๋ 2,309๊ฐ ์นด์ดํฐ ๊ท๋ชจ์ ์ ํํ๋ ๋ฐ์ดํฐ ๋ ์ด์ด๋ฅผ ์ ๊ณตํฉ๋๋ค. ๋ํ ModernBERT ๊ธฐ๋ฐ์ ๋ถ๋ฅ๊ธฐ๋ฅผ ํ์ต์์ผ ์กฐ๋ก์ ๋ถํฌ๋ช
์ฑ์ด๋ ์จ์ ์ฃผ์์ ๊ฐ์ ๋ณต์กํ ์ฐจ์์ ๋ถ์ํ ์ ์๋๋ก ํ์ต๋๋ค. ์ด ์ฝํผ์ค์ ๋ชจ๋ธ์ ์ฐ๊ตฌ ์ฌํ์ฑ๊ณผ ํฅํ ๋ฒ๋ฅ AI ์ฐ๊ตฌ ํ์ฅ์ ์ํด ๊ณต๊ฐ๋์์ต๋๋ค.
๐ ์ฃผ์ ๋ด์ฉ (Key Points)
- 9,239๊ฐ ์ยท๊ตฐ ์กฐ๋ก๋ฅผ ํฌํจํ๋ ๋๊ท๋ชจ ๋ฏธ๊ตญ ์ง๋ฐฉ ์กฐ๋ก ์ฝํผ์ค(LOCUS) ๊ตฌ์ถ
- OCR์ ํตํ ๋น์ ํ ๋ฌธ์์ ๊ธฐ๊ณ ํ๋ ๊ฐ๋ฅํ ๋ฐ์ดํฐ๋ก์ ๋ณํ ๋ฐ ์ ํํ
- ModernBERT ๊ธฐ๋ฐ ๋ถ๋ฅ๊ธฐ๋ฅผ ํตํ ์กฐ๋ก ํน์ฑ(๋ถํฌ๋ช ์ฑ ๋ฑ) ๋ถ์ ๋ชจ๋ธ ์ ๊ณต
๐ก ์ค๋ฌด์ ๊ฐ์น (Relevance)
ํํธํ๋ ๋น์ ํ ๋ฒ๋ฅ ๋ฐ์ดํฐ๋ฅผ ์ ํํ๋ ๋ฐ์ดํฐ์
์ผ๋ก ํ๋ณดํจ์ผ๋ก์จ, ํน์ ์ง์ญ ๋ง์ถคํ ๋ฒ๋ฅ RAG ์์คํ
์ด๋ ๊ท์ ์ค์(Compliance) ์๋ํ ๋ชจ๋ธ ๊ฐ๋ฐ์ด ๊ฐ๋ฅํด์ง๋๋ค.
โ ์ถ์ฒ ์ก์ (Actionable Items)
- HuggingFace์์ LOCUS ๋ฐ์ดํฐ์ ์ ๋ค์ด๋ก๋ํ์ฌ ๋ฐ์ดํฐ ํ์ง ํ์ธ
- ์ ๊ณต๋ ModernBERT ๋ชจ๋ธ์ ํ์ฉํ์ฌ ํน์ ์ง์ญ ์กฐ๋ก์ ํน์ฑ ๋ถ์ ์คํ
- RAG ํ์ดํ๋ผ์ธ์ LOCUS ๋ฐ์ดํฐ๋ฅผ ์ฃผ์ ํ์ฌ ๋ฒ๋ฅ ์ง์์๋ต ์ฑ๋ฅ ํ ์คํธ