이름이 불리는 것과 제대로 알려지는 것은 다르다

Arthur · xeolab 대표 · 2026-11-05 발행 · 읽는 시간 5분

답변에 이름이 나왔다는 것만으로 '알려졌다'고 적지 않는다. 등장 여부와 역할 설명의 정확성은 별도 항목으로 보고한다.

핵심 요약

더케이뷰티사이언스의 2026년 11월 3일 보도에 따르면, 영국 피트먼 컴즈가 11월 2일 낸 보고서는 ChatGPT에 영국 시장 원료 조달 질문 6개를 각 3회 넣어 추천 90건을 모았고, 기능성 원료 추천 15건 중 12건이 유통업체였다. 사전에 고른 기업 26곳 중 11곳은 한 번도 추천되지 않았다. 보도는 보고서가 기업명이 답변에 나오는 것과 그 기업의 기술 전문성이 정확히 설명되는 것을 구분해야 한다고 짚었다고 전했다. 등장률은 이름이 있었는지만 세기 때문에, 우리는 답변 원문을 남겨 두고 어떤 역할로 불렸는지를 따로 확인한다.

기능성 원료 추천 15건 중 12건은 유통업체였다

더케이뷰티사이언스가 2026년 11월 3일 전한 내용이다. 영국 PR 회사 피트먼 컴즈가 11월 2일 ChatGPT의 화장품 원료 공급업체 추천을 분석한 보고서를 냈다. 조사일은 10월 18일. 영국 시장을 대상으로 원료 조달 질문 6개를 각각 3회 입력하고 답변마다 공급업체 5곳을 요청해 추천 90건을 모았다. 기업명을 넣지 않은 질문, 개인화를 끈 임시 대화, 웹 검색을 켠 상태였다.

결과 가운데 하나가 눈에 걸린다. 기능성 원료 추천 15건 중 12건이 유통업체였다. 한 글로벌 원료사는 다섯 원료 분야의 추천 목록 15개 모두에 들었고, 기능성 원료 질문에서는 세 번 모두 제조업체로 추천됐다. 조사 전에 고른 기업 26곳 중 15곳은 한 번 이상 추천됐고 11곳은 한 번도 나오지 않았다. 보도에 소개된 연구의 한계는 작은 표본, 확인되지 않은 모델 버전, 검색 조건에 대한 독립 검증 부재다. 발행사가 가시성 진단 서비스를 파는 회사라는 점도 함께 적혀 있다.

이 수치는 추천된 업체의 구성을 보여 준다. 답변이 각 업체의 역할을 어떻게 설명했는지는 다른 물음이고, 보도는 보고서가 그 둘을 구분해야 한다고 짚었다고 전했다. 우리가 이 사례에서 읽은 것도 그 구분이다.

등장률이 세는 것과 세지 않는 것

등장률은 측정한 답변에서 우리 이름이 나온 비율이다. 제조사로 불렸는지 유통사로 불렸는지, 추천으로 들어갔는지 비교 대상으로 끼었는지 주의할 곳으로 언급됐는지, 설명이 맞는지는 세지 않는다. 숫자가 같아도 그 안의 답변은 다를 수 있다.

가상의 예를 두겠다. 제조사를 유통사라고 잘못 설명한 답변에도 회사 이름은 들어 있다. 등장률에서는 바르게 설명한 답변과 같은 1건이다. 우리는 이런 답변을 이름의 등장과 역할 설명의 정확성으로 나눠 기록한다. 그 둘을 등장률 옆에 적지 않은 보고서는 거짓은 아니어도 부족하다고 본다.

우리는 이렇게 읽는다

측정 결과를 쌓을 때 답변 원문을 함께 남긴다. 등장률은 이름이 나온 비율로 적고, 설명의 정확성은 많이 나온 질문의 원문을 사람이 읽어 확인한다. 사람이 검토한 답변에서 역할 설명의 오류를 세고, 검토한 답변 수와 오류가 확인된 답변 수를 함께 적는다. 오류가 확인되면 우리 사이트와 답변에 인용된 자료의 역할 설명을 대조한다. 우리 페이지의 오류는 고치고, 제3자 자료는 정정 요청이 필요한지 확인한다.

  • 등장률 보고에는 상위 질문의 답변 원문 한두 개를 붙인다. 숫자만 보내지 않는다
  • 역할 설명이 틀린 답변(제조사를 유통사로, 병원을 약국으로)은 사람이 검토한 범위 안에서 건수를 세고, 검토한 답변 수를 함께 적는다
  • 오류가 확인되면 우리 페이지의 역할 설명을 먼저 고치고, 인용된 제3자 자료는 정정 요청이 필요한지 확인한다

자주 묻는 질문

등장률이 높으면 좋은 것 아닌가요?

등장률이 높다는 것은 측정한 답변에서 이름이 나온 비율이 높다는 뜻입니다. 우리는 답변 원문을 읽어 역할 설명이 맞는지도 확인하고, 그 결과를 등장률 옆에 따로 적습니다.

AI가 우리 회사를 잘못 설명하면 어떻게 하나요?

먼저 어떤 질문에서 어떻게 틀렸는지 원문으로 모읍니다. 그다음 우리 사이트와 답변에 인용된 자료의 역할 설명을 대조해 우리 페이지의 오류는 고치고, 제3자 자료는 정정 요청이 필요한지 확인합니다. 바뀌었는지는 같은 질문을 반복 측정해 봅니다.

이 보고서 결과를 한국 시장에도 적용할 수 있나요?

그대로 옮기지는 않습니다. 영국 시장, 질문 6개, 하루 조사의 결과이고 보고서도 소규모 탐색 연구라고 적었습니다. 우리가 가져오는 것은 수치가 아니라 '이름과 역할을 따로 봐야 한다'는 질문입니다.

출처

플랫폼 공식 문서·동료심사 연구·공개 통계만 인용한다.

  1. 1.더케이뷰티사이언스 — 챗GPT는 화장품 원료 공급업체를 어떻게 추천하나… 피트먼 컴즈 Visibility Index Report (2026-11-03)(영국 Pitman Comms 보고서(2026-11-02)를 전한 보도 · 조사일 2026-10-18 · 질문 6개×3회·추천 90건 · 보고서 원문 URL 미확보)

관련 용어

함께 읽기