여권 조항을 지식베이스에 넣는다 — 다산을 고른 근거인데 정답 문서가 없다
정성윤이 09-22 저녁 최종 QA(류준 페르소나 4 + 검증 웨이브)·운영 확인 결과를 보고 만든 티켓이다. 담당은 «제안»이다 — 본인이 확인하고 맞으면 착수, 아니면 옮긴다.
무엇을
다산콜을 고른 근거 ②가 「서류 문의 상위 단어에 여권 이 4위」인데(CLAUDE.md §1), 지식베이스 98조항에 여권 조항이 없다.
조항(요약·출처만 — 원문 전재 금지, 절대 원칙 6) → 골든셋 문항 → 로컬 재색인까지가 이 티켓이다.
나눠서
- 류준: 조항 작성 · 골든셋 문항 · 로컬 재색인 · 하네스 전후
- 장민석: 필요서류 규칙표(F-2)에 여권 발급·재발급 항목
- 정성윤: 운영 재적재(
index_knowledge_base.py --to-es --recreate --embed-model /models/koe5) —w6-nori-pos-filter와 같은 절차
완료 조건
knowledge-base/dasan/에 조항 + 출처(문서명·조항) —DASAN-TERM-4.23- 골든셋에 여권 문항 ≥ 3 · 하네스 Recall@5 전후 기록(표본 수 같이) — 로컬 값.
eval_run기록(--record)은 아직 - 운영 재적재 뒤 수동 검색 「여권 재발급」 1순위가 그 조항
근거: 마감 체크리스트 16번.
2026-09-22 — 류준 몫 끝 (_project/decisions/217)
- 조항
DASAN-TERM-4.23 여권 발급·재발급 — 필요서류— 외교부 여권안내 「재발급」·정부24 「여권 재발급 온라인 신청」을 우리 말로 요약, 조항 끝에 출처. 원문 전재 없음. 400자 안이라 1 청크(청크 100 → 101). - 골든셋 B 5건
GS-291~295(외국인·재외국민 문체 2건 포함) +GS-701B-6 → B 재라벨(notes 에 사유). B 96 → 102 · B-6 24 → 23.version은 합칠 때 올린다. - 로컬 재색인
callguard-kb-single101건 · 임베딩 101건(1024차원). - 하네스 전후(1회, 로컬, 기록 안 함) — 새 골든셋(B n=102): BM25 Recall@5 0.794 → 0.853 · MRR 0.642 → 0.686 / dense 0.912 → 0.971 · 0.817 → 0.875. 옛 96건만: 적중 수 그대로, MRR 조금 내려감(BM25 0.682 → 0.678 · dense 0.868 → 0.867). 로컬 「여권 재발급」 1순위 = 4.23(BM25·dense 둘 다).
- ⚠ dense 에서 4.23 이 여권과 무관한 B 11건·B-6 5건의 상위 5에 든다(허브) — 결정 기록 「남은 것」.
- ⚠
server테스트 1건 실패 —test_closure_rule_source.py::test_필요서류_조항은_전부_규칙이거나_제외_목록에_있다(4.23 이RULES·EXCLUDED어디에도 없다). 장민석 규칙표 항목이 같이 들어가야 main 에 합칠 수 있다. - 남은 것: 장민석(F-2 규칙표 항목) · 정성윤(운영 재적재 + 운영 「여권 재발급」 1순위 확인). 둘이 끝나면 done.
2026-09-22 (밤) — 운영 확인 (류준)
#135 머지(server 0.1.36) · 정성윤 님 운영 재적재 뒤, 운영 수동 검색 POST /hub/search 「여권 재발급」 → 1위 DASAN-TERM-4.23 (0.850), 2위 1.5 외국인 민원인 응대(0.696). 로컬 dense 측정과 같은 점수다 — 임베딩까지 재적재됐다. 완료 조건 셋째 ✅.
남은 것: 필요서류 규칙표 항목(장민석) — 4.23 은 지금 EXCLUDED(dense 끼어듦 때문, decisions/217).
2026-09-22 (밤) — 닫는다 (류준)
완료 조건 셋이 다 됐다(조항 · 골든셋 문항과 하네스 전후 · 운영 「여권 재발급」 1위). 「나눠서」의 필요서류 규칙표 항목은 완료 조건이 아니라 분담이고, 지금은 EXCLUDED(dense 끼어듦 때문, decisions/217)로 정해져 있다 — 규칙을 넣을지는 미결 「여권 조항 4.23 이 dense 에서 무관한 질문에 끼어든다」에서 장민석 님이 이어 본다.