ChatGPT는 새 웹페이지를 어떻게 찾나?
이번 실험에서는 Cloudflare가 페이지의 존재와 변경 여부 같은 정보를 제공해 OpenAI의 검색 수집을 돕는다. OpenAI는 발견한 페이지를 독립적으로 평가하고 질문에 맞는 순위를 정한다. 웹사이트를 찾는 일과 답변에 사용할 자료를 고르는 일에 두 회사가 각각 역할을 맡는 구조다.
검색 서비스는 새 글뿐 아니라 이미 읽은 페이지의 수정도 따라가야 한다. 7월 발표는 콘텐츠의 최신성, 방문 요청의 성격, 실제 페이지 변경을 살펴 수집할 대상을 정하는 데 초점을 뒀다. 제품 설명이나 이용 조건이 바뀌었을 때 다시 읽을 주소를 찾는 과정과 연결된다.
링크가 적은 상세 안내에도 기회가 생길까?
Cloudflare는 다른 사이트의 링크가 적어도 유용한 페이지가 있다고 설명했다. 특정 모델의 사용설명서나 현재 영업시간처럼 질문에 정확히 맞는 자료가 그 예다. 회사는 이런 페이지를 더 효율적으로 발견하는 데 네트워크 정보가 쓰인다고 밝혔다.
이를 사이트 운영에 적용하면 고객이 찾는 세부 안내를 점검하는 일로 이어진다. 예를 들어 제작 서비스의 신청 절차를 설명한다면 필요한 자료와 진행 순서를 해당 페이지에서 읽을 수 있어야 한다. 이런 구성은 독자의 질문에 답하기 위한 편집 제안이며, 특정 순위 상승을 측정한 사례와는 구분한다.
글을 더 자주 읽게 하면 검색에 유리할까?
실험의 목표는 읽을 가치가 있는 페이지와 수정된 내용을 효율적으로 찾는 것이다. Cloudflare는 실제로 없는 주소에 반복 요청이 들어오거나, 여러 주소가 같은 본문으로 이어지는 현상을 설명했다. 이런 요청을 구분하면 검색 수집에 드는 불필요한 작업을 줄인다.
따라서 원고를 그대로 복사해 주소만 늘리는 방식보다 안내가 필요한 페이지를 분명히 두는 편집이 이번 발표의 취지에 가깝다. 아래 단계별 표처럼 수집 여부와 답변 인용, 실제 방문은 각각 따로 살펴야 한다.
검색용 수집과 AI 학습은 어떻게 다를까?
이번 공동 연구는 웹페이지를 찾기 위한 정보를 사용하는 실험이다. Cloudflare는 페이지 본문을 모델 학습용으로 공유하는 작업과 구분하고, 주소에 관한 정보를 얻어도 접근 권한은 사이트 운영자의 선택을 따른다고 설명했다.
운영자는 검색에 자료를 제공할지와 AI 학습에 사용할지를 각각의 목적에 맞춰 살펴야 한다. 사이트의 접근 설정을 바꾸려면 사용하는 서비스가 어떤 수집 목적을 구분하는지 먼저 읽고 적용한다.
이번 발표에서 성과는 어디까지 공개됐나?
공개된 중간 결과는 신규 페이지 발견과 검색 목록 추가 규모다. Cloudflare는 다음 단계에서 페이지가 발견된 뒤 실제 사업 성과로 어떻게 이어지는지 측정할 계획이라고 밝혔다. 사이트별 클릭 증가율이나 매출 변화는 이번 발표의 공개 수치에 포함되지 않았다.
사이트 운영자는 실제 답변에 어떤 안내가 출처로 붙는지, 방문자가 그 페이지에서 무엇을 확인하고 문의하는지를 이어서 살펴볼 수 있다. 다음 기사들은 검색 접근 설정과 AI 유입 측정을 각각 설명한다.