Cloudflare, AI 애플리케이션용 Web Search API 베타 공개

AI 요약

Cloudflare가 AI 에이전트와 애플리케이션을 위한 Web Search API 베타를 공개했습니다. 모델의 학습 시점에 갇히거나 URL을 추측하는 대신, 실시간 웹 정보를 검색해 응답의 근거로 활용하는 서비스입니다.

제공자와 요청 처리

출시 시점에는 Ceramic.ai, Exa, Linkup 세 검색 제공자 중에서 선택합니다. Cloudflare를 거친 요청에 대해 세 제공자는 Zero Data Retention을 지원하며, Cloudflare가 정한 검증된 봇 크롤링 기준도 따르기로 했습니다.

AI Gateway 연동과 과금

검색 요청은 AI Gateway를 거치므로 Gateway 로그에서 확인할 수 있습니다. 요금은 각 제공자의 API 정가로 AI Gateway 크레딧에 청구되며, Cloudflare의 추가 마크업은 없습니다. 원한다면 제공자 API 키를 직접 연결할 수도 있습니다. REST API로 호출하거나 Worker의 AI binding에서 사용할 수 있습니다.

Hacker News 반응

개발자들은 Cloudflare를 중간에 둘 이유로 통합과 결제의 편의성, 제공자 장애 시 대체 경로, 조직의 기존 공급자 승인 절차를 꼽았습니다. 반면 에이전트가 검색 제공자 API를 직접 호출하는 일은 어렵지 않다는 반론도 나왔습니다. 요청이 Gateway 로그에 남는 만큼, 제공자뿐 아니라 Cloudflare의 데이터 보존 정책도 확인해야 한다는 질문이 제기됐습니다.

검색 품질과 비용에 관한 의견도 갈렸습니다. 한 이용자는 Ceramic.ai에서 특정 검색어에 결과가 없거나 엉뚱한 결과만 나왔다고 보고했습니다. 댓글에는 제공자별 요금 차이가 크다는 지적과, 결과를 저장하거나 다시 제공할 수 있는지 이용 약관을 살펴야 한다는 의견도 있었습니다. 검증된 봇 기준을 따르는 제공자가 Cloudflare로 보호된 사이트에 어떻게 접근하는지도 논의됐습니다.

• @binarymax — 왜 이 제공자들을 직접 쓰지 않나요? Cloudflare가 모든 일의 중간에 있어야 하나요?
  • @unified101 — 통합과 결제가 편하고, 장애 시 대체 경로를 둘 수 있으며, 신뢰도도 높일 수 있습니다.
  • @JumpCrisscross — 대규모 조직 전체에서 제대로 적용했는지 검증하기는 매우 어렵습니다.
• @anon373839 — 검색 제공자들이 Cloudflare를 거치는 요청을 보존하지 않는다는 약속은 유용합니다. 하지만 Cloudflare 자체도 데이터 보존을 하지 않겠다고 약속하나요? 그렇지 않다면 큰 의미가 없습니다.
• @freakynit — Ceramic.ai에서 검색어를 넣었더니 결과가 없었습니다. Google과 DuckDuckGo에서는 제대로 나왔습니다. 검색어를 줄이자 결과가 나오긴 했지만 대부분 검색어와 상관없는 논문 링크였습니다.
• @simonw — 검색 API에서 가장 먼저 확인하는 것은 결과를 저장하고 재배포해도 되는지입니다. 에이전트 응답을 저장하거나 공유 기능을 제공할 수 없다면 상당한 제약입니다. 관련 조건이 약관 깊숙이 묻혀 있는 경우가 많습니다.
• @Jeeetendra — 검색 제공자의 데이터 미보존 약속은 유용합니다. 하지만 요청은 Gateway 로그에 남습니다. 실제 검색어는 저장하지 않고 결제 데이터만 보관할 수 있나요?
• @8bite — Ceramic.ai는 요청 1,000건당 0.25달러, Exa는 7달러, Linkup은 5달러입니다. 품질 차이를 아는 분 있나요? AI 에이전트용 웹 검색 API는 비용이 늘 비싸게 느껴지지만, 웹 색인을 운영하는 경제성은 잘 모르겠습니다.
• @tom1337 — 세 검색 엔진은 Cloudflare가 보호하는 사이트에 CAPTCHA나 봇 차단 절차 없이 접근하나요?
  • @dbbk — 원문 두 번째 문단을 읽어보세요. 세 제공자 모두 검증된 봇 기준을 따른다고 나옵니다.

원문: Cloudflare Developers / 번역·요약: Trawling