본문으로 건너뛰기

답변 후처리 및 원본 출처 연결

LLM이 반환한 인용을 검증하고, 인용된 원문 청크를 실제 문서와 원본 페이지에 연결해 사용자에게 보여줄 형태로 구성합니다.

입력과 출력​

입력LLM이 생성한 claims
출력후처리된 답변과 원본 출처

공개 API 응답에서는 답변 뒤에 인용한 원문 청크 ID가 붙고, citations와 search_results에서 같은 원문의 출처를 확인할 수 있습니다. 아래는 원문 한 건을 인용한 짧은 응답 예입니다.

{
  "answer": "근로자가 작업중지를 요청하면 즉시 필요한 조치를 해야 합니다. [ruf_3612bfa54e64f90ad761c4c9]",
  "citations": [
    {
      "unit_id": "ruf_3612bfa54e64f90ad761c4c9"
    }
  ],
  "search_results": [
    {
      "unit_id": "ruf_3612bfa54e64f90ad761c4c9",
      "doc_id": "d000786_459d662b8a",
      "grounding": {
        "source_uri": "manifest://d000786_459d662b8a/ruf_3612bfa54e64f90ad761c4c9",
        "source_display_name": "d000786_459d662b8a",
        "block_id": "ruf_3612bfa54e64f90ad761c4c9",
        "page_span": {
          "first": 0,
          "last": 0
        }
      },
      "answer_used": true
    }
  ]
}

citations에는 답변에 실제로 사용한 원문 청크 ID가 들어갑니다. 같은 ID의 search_results 항목에서 문서 주소와 페이지 범위를 찾을 수 있습니다. page_span은 0부터 시작하므로 0은 원본의 첫 페이지를 뜻합니다.

동작 방식​

  1. LLM이 반환한 cited_unit_ids를 정리하고 검증합니다.
  2. 유효한 원문 청크를 실제 문서와 원본 페이지에 연결합니다.
  3. 답변 문장에 원문 청크 ID를 붙이고 출처 목록을 구성합니다.

인용은 다음 순서로 정리합니다.

순서처리
1같은 claim 안의 중복 인용 제거
2검색표현 ID 제거
3Context에 없는 ID 제거
4유효한 인용이 남지 않은 claim 제거

검색표현은 검색을 돕기 위한 데이터이므로 최종 Citation으로 사용할 수 없습니다. 또한 LLM Context에 포함되지 않은 원문 청크도 인용할 수 없습니다.

같은 원문 청크를 여러 claim이 함께 사용하는 것은 허용합니다.

정리가 끝난 인용 ID는 원문 청크의 문서 정보와 페이지에 연결되고, 사용자가 원본을 확인할 수 있는 출처 링크로 구성됩니다. 이 과정에서는 LLM을 다시 호출하지 않습니다.

설정값​

profile key현재 production 값의미
query.citation_normalization_policystable_dedup_then_drop_rte_and_noncontext_then_drop_unsupported_claims_v1인용을 검증하고 정리하는 정책

코드 참조​

확인할 내용파일·심볼
인용 정리backend/struct4search/query/answer/citation_normalizer.py · DeterministicCitationNormalizer
원본 출처 연결backend/struct4search/query/answer/citation_linker.py · DefaultCitationLinker
출처 연결 계약backend/struct4search/query/contracts.py · SourceLinkResolver
profileconfigs/production.yaml · query.citation_normalization_policy