질문 하나가 근거 조각이 되기까지 — 회사 자료 검색

질문 하나가 근거 조각이 되기까지 — 회사 자료 검색 A data-flow diagram generated by Archify. 01 / 들어온 물음 02 / 관문 · 카드 03 / 넓히기 · 밤 배치 04 / 후보 · 저장소 05 / 합쳐 내놓기 질문 · AI 작업실 · 메신저 등 · 01 / 들어온 물음 · 파이스 · claude.ai 커넥터도 질문 AI 작업실 · 메신저 등 파이스 · claude.ai 커넥터도 관문 · 범위 박기 · 몫 나누기 · 02 / 관문 · 카드 · 규격 이름이면 본문 몫 없음 관문 범위 박기 · 몫 나누기 규격 이름이면 본문 몫 없음 낱말 넓히기 · 사전 203항목 · 03 / 넓히기 · 밤 배치 · 영어 규격일 때만 낱말 넓히기 사전 203항목 영어 규격일 때만 뜻 후보 · 1비트로 걸러 다시 재기 · 04 / 후보 · 저장소 · 사본 32배 작음 뜻 후보 1비트로 걸러 다시 재기 사본 32배 작음 어휘 후보 · BM25 · 아스키 낱말 · 04 / 후보 · 저장소 · k1 1.2 · b 0.75 어휘 후보 BM25 · 아스키 낱말 k1 1.2 · b 0.75 합쳐 다듬기 · RRF k 60 · 같은 글 빼기 · 05 / 합쳐 내놓기 · 식별자 · 장 · 부록 순서 합쳐 다듬기 RRF k 60 · 같은 글 빼기 식별자 · 장 · 부록 순서 결과 조각 · 점수는 0~1 눈금 · 05 / 합쳐 내놓기 · 받는 쪽 문턱 0.4 결과 조각 점수는 0~1 눈금 받는 쪽 문턱 0.4 조각 저장소 · 규격 책 · 문서 본문 · 04 / 후보 · 저장소 · 6.2만 + 14만 2,911조각 조각 저장소 규격 책 · 문서 본문 6.2만 + 14만 2,911조각 파일 카드 · 이름 · 경로 · 요약 · 02 / 관문 · 카드 · 207만 장 파일 카드 이름 · 경로 · 요약 207만 장 밤 배치 · NAS 원본을 훑음 · 03 / 넓히기 · 밤 배치 · 카드 01:00 · 본문 06:10 밤 배치 NAS 원본을 훑음 카드 01:00 · 본문 06:10 물음 + 토큰 범위를 박아 영어 문장 추가 낱말 · 조항 추가 뜻 순위 200개 어휘 순위 200개 후보 (1비트 서명) 이름 · 경로 낱말 0.8초 본문 색인 카드 · 요약 순서 · 점수 Legend 낮에 묻는 길 밤에 쌓는 길 저장소 저장소 읽기

읽을 양을 줄인다

  • • 벡터 → 부호 1비트 (32배 작음)
  • • 후보만 정확히 다시 재기
  • • 점수와 순서는 전수와 같은 눈금
  • • 20만 조각 아래는 전수

숫자

  • • 규격 약 6.2만 · 본문 14만 2,911조각
  • • 본문은 조각당 134B (50만 조각 ≈ 67MB)
  • • 볼트 217만 노트 4~6초 → 0.3초
  • • 작업 PC 합성 재현 56~107ms → 5~8ms

점수는 경계를 넘는 값

  • • 순위값(0, -1, -2)으로 내보냈더니
  • • 받는 쪽 문턱 score >= 0.4 가 한글 질문 결과를 통째로 버렸다
  • • 0~1 눈금으로 되돌림