응답 실패 사례를 찾기 위한 팁
1. Primary Source (모델이 공식 또는 최적의 출처를 놓친 경우)
권위 있는 출처 혼동
여러 개의 그럴듯한 “공식 출처”가 존재하는 주제를 선택하세요.
- 건강 가이드라인: WHO vs 국가 보건부 vs 지역 보건당국
- 세관/수입 규정: 자국 세관 사이트 vs 목적지 대사관 사이트
(실제로는 목적지 국가 세관 사이트가 가장 권위 있음) - 이민/비자: 자국 대사관 vs 목적지 국가 이민국
- 세금: 국가세 vs 주·도세 vs 지방세
- 환율: 중앙은행 환율 vs 시중은행 vs 암시장 환율
(예: 아르헨티나, 베네수엘라, 레바논)
집계 사이트가 공식 사이트보다 상위에 노출되는 경우
제3자 사이트가 공식 사이트보다 검색 상단에 뜨는 주제를 선택하세요.
- 부동산: Zillow, Idealista 등 vs 실제 부동산 등록기관
- 식당 영업시간: Google/Yelp/Tripadvisor vs 식당 공식 페이지
- 항공편 일정: 비공식 항공 추적 사이트 vs 항공사 공식 일정
- 대학 입학 마감일: 뉴스 블로그 vs 대학 공식 입학처
- 약품 재고/판매 여부: 집계 사이트 vs 국가 의약품 등록기관
2. 해당 지역에 부적절한 Source
(잘못된 국가·지역·시장 정보를 사용한 경우)
같은 언어지만 다른 국가
하나의 언어를 여러 국가가 사용하는 경우를 활용하세요.
- 스페인어:
- 스페인: NIE/NIF
- 멕시코: RFC
- 아르헨티나: CUIT
- 콜롬비아: NIT
- 프랑스어:
- 프랑스: France Travail
- 퀘벡: Emploi-Québec
- 벨기에: ONEM
- 포르투갈어:
- 브라질: Polícia Federal
- 포르투갈: SEF/AIMA
- 영어:
- 미국 공증 시스템 vs 영국 공증 시스템 vs 인도 공증 제도
보편적으로 보이지만 사실 지역 의존적인 주제
- “최고의 은퇴 계좌”
→ 국가별로 다름 (401k, ISA, PPF, AFORE 등) - “프리랜서 세금 신고 방법”
→ 국가마다 완전히 다름 - “MRI 비용”
→ 국가·보험·공공의료 여부에 따라 매우 다름
단위·형식 차이
- “03/04”
→ 미국: 3월 4일
→ 대부분 국가: 4월 3일 - “$”
→ AI가 USD로 가정할 수 있음
(멕시코·아르헨티나·홍콩 등에서는 다를 수 있음) - 세금 포함 가격 vs 세금 별도 가격
→ 일본/EU vs 미국
3. Niche Source
(정답이 숨겨진 페이지·표·PDF 안에 있는 경우)
공식 사이트 안 깊숙한 곳에 있는 요금표
- 철도 환불 규정:
- JR
- SNCF
- Renfe
- DB
- Trenitalia
- 대학 등록금:
메인 페이지에는 평균만 있고
실제 금액은 학과 PDF에 존재 - 병원 시술 비용:
행정용 PDF나 숨겨진 표 안에 있음
세부 조건을 놓친 경우
- “[특정 학과] 등록금”
→ AI가 대학 평균 등록금만 제시 - “[특정 차량 종류] 등록세”
→ 기본 승용차 세율만 제시 - “[특정 HS 코드] 관세”
→ 평균 관세율만 제시
할인·예외 규정 누락
- 학생 할인
- 노인 할인
- 장애인 할인
- 비거주자 요금
- 피크/비피크 요금
4. Wrong Query or Response Language
(잘못된 검색 언어 또는 응답 언어)
문자 체계가 비슷해서 혼동되는 경우
- 번체 중국어 질문 + 일본 관련 내용
→ AI가 일본어로 답할 수 있음 - 한자어가 많은 한국어 질문
→ 일본/중국 자료로 잘못 연결 가능
영어 검색으로는 찾기 어려운 로컬 용어
- 정부 프로그램명:
- Bolsa Família
- Aadhaar
- Mi Beca para Empezar
- 법률 용어:
- amparo
- habeas data
- PIL
원어 스크립트 검색 실패
로마자 검색만 하면 현지 공식 자료를 놓칠 수 있음.
예:
- 아랍어
- 태국어
- 키릴 문자
- 데바나가리 문자 등
5. 오래된 정보
(오래된 정보)
정기적으로 갱신되는 정보
- 최저임금
- 세율
- 사회보장 한도
- 학교 일정
- 서머타임
- 스포츠 경기 일정
- 최신 스마트폰 모델
최근 변경된 정책
- 비자 규정 변경
- 세금 제도 개편
- 전동 킥보드 법규
- GST/VAT 세율 변경
- 보조금 폐지/신설
선거 관련 정보
- 현재 시장
- 현재 주지사
- 현재 국회의원
특히 아래 표현이 있으면 최신 검증이 중요
- current
- today’s
- latest
- still
- this season’s
Bonus: 여러 실패 유형이 동시에 섞인 경우
(가장 가치 높은 실패 사례)
예시 1
현지 언어 질문 + 최근 규정 변경
→ Wrong Query Language
- Outdated Information
- Primary Source
예시 2
같은 언어지만 다른 국가 + 숨겨진 PDF
→ Locale Error
- Niche Source
예시 3
비공식 사이트 + 오래된 정보
→ Primary Source
- Outdated Information
