Cloudflare הציגה Web Search API שמאפשר לסוכנים לחפש באינטרנט

Cloudflare הציגה ב-2 באוקטובר את Web Search API. השירות החדש מאפשר לסוכני AI לחפש מידע עדכני מהאינטרנט ולבסס תשובות על נתונים אמיתיים. המוצר יצא לאור במסגרת Birthday Week של Cloudflare, ושותפי ההשקה הראשונים הם Ceramic.ai, Exa ו-Linkup.

מידע עדכני מהרשת

לפי הצהרת החברה, הסוכן לעיתים קרובות מזהה בעצמו את כתובת הדף ולאחר מכן מנסה להוריד אותו; אם הניחוש שגוי, מוחזרת שגיאת 404 במקום. Web Search API משנה בדיוק גישה זו: הסוכן שולח בקשה דומה לבקשת חיפוש רגילה ומקבל במקום פרגמנטים מובנים שנלקחו מהרשת, אשר נכנסים ישירות להקשר של המודל. מודלים עובדים רק על הנתונים שהיו קיימים ברגע האימון, ולכן קשה להם להבין אירועים אחרונים, תיעוד משתנה וחדשות שמתפתחות במהירות; חיפוש ברשת פותר בעיה זו.

תקן הבוטים וקישור למקור

שותפי החיפוש הסכימו לתנאי לשמור על תקני הבוטים של Cloudflare. הבוטים שלהם חייבים לעמוד בדרישות הפומביות של Cloudflare לבוטים מאומתים („Verified bots"), ובתוצאות החיפוש חייב להיות קישור לדף שממנו המידע נלקח. לפי הסבר של Cloudflare, הכללים מעניקים לבעלי אתרים שקיפות ושליטה רבה יותר על שימוש בתוכן שלהם: בוטים חושפים את זהותם, כבדים את robots.txt ומציגים את מקור תוצאות החיפוש.

חיוב, לוגים וגישה ב-AI Gateway

AI Gateway הוא נקודת השילוב המרכזית של המוצר החדש. בקשות החיפוש ברשת מופיעות בלוגים של AI Gateway בדיוק כמו בקשות AI אחרות, וגורעות מקרדיט של AI Gateway בחשבון; כמו כן מתווגד מי יקבל גישה לאילו ספקים. Cloudflare מסמנת שותפים שתומכים ב-Zero Data Retention (ZDR), כדי שהמשתמש ידע שהנתונים לא נשמרים. החיפוש זמין במחירים הפומביים של השותפים, ללא מרג' נוסף; תומך גם בגישת מפתח עצמי (BYOK).

דרכי אינטגרציה

חיפוש משרתים קיימים, מאפליקציות מובייל או שירותים חיצוניים אפשרי גם בבקשת REST סטנדרטית: מספיקים טוקן של AI Gateway, הבקשה והספק הרצוי. אינטגרציה עם Cloudflare Workers דורשת רק שורת קוד אחת. החברה עובדת על כלי צד שרת ב-AI Gateway וחיפוש ברשת יהיה אחד הראשונים ביניהם; עד אז מפתחים יכולים להשתמש בחיפוש ברשת ככלי עצמאי. את השירות אפשר לנסות ב-AI Playground, ואת הוראות ההתחלה ניתן למצוא בתיעוד המפתחים.