سرویس جدید You.com برای اتصال LLMها به وب

You.com رابط‌های برنامه‌نویسی (APIs) جدیدی را برای اتصال LLMها به وب راه‌اندازی می‌کند. برای استفاده از این سرویس جدید ماهانه ۱۰۰ دلار باید پرداخت کرد.

به‌گزارش تک‌ناک، وقتی OpneAI چت‌بات ChatGPT را به اینترنت متصل کرد، قابلیت‌های آن بسیار زیاد شد. اکنون، موتور جست‌وجوی You.com همان کار را برای هر مدل زبان بزرگ (LLMs) می‌خواهد انجام دهد.

تک‌کرانچ می‌نویسد که امروز You.com (private search engine) اعلام کرد مجموعه‌ای از رابط‌های برنامه‌نویسی (API) را راه‌اندازی کرده است که هدف آن‌ها ارائه‌ی دسترسی به مدل‌های زبان بزرگ مانند Llama 2 شرکت متا به وب باز یا بخش‌های محدودتری از آن است. برای استفاده از این APIها 100 دلار در ماه باید پرداخت کرد. APIهای You.com پاسخ‌های مدل‌های زبان بزرگ به سؤالات کاربران را با متن به‌روز از اینترنت تقویت می‌کند.

مشتریانی از‌جمله LlamaIndex و Anthropic و Cohere این ای‌پی‌آی‌ها را قبلاً با مدل‌های خود یکپارچه کرده‌اند. بیشتر مدل‌های زبان بزرگ (LLMs) بر‌اساس داده‌های عمومی و استاتیکی آموزش می‌بینند که از صفحات وب عمومی و کتاب‌های الکترونیکی و مکان‌های دیگر جمع‌آوری شده‌اند.

این برای وظایفی از‌جمله نوشتن ایمیل و تهیه‌ی نامه‌ها و مقالات کافی است؛ اما این محدودیت دانش LLMها را به محدوده‌ی زمانی داده محدود می‌کند. برای مثال، LLM که قبل از سپتامبر‌۲۰۲۱ آموزش دیده است، از رویدادهایی که اخیرا رخ داده‌اند، آگاه نخواهد بود.

APIهای برنامه‌نویسی جدید You.com امکان برطرف‌کردن این محدودیت را برای LLMها فراهم می‌کنند. شرکت مذکور با ایجاد فهرستی از بخش‌های طولانی وب‌سایت‌ها تفاوت مهمی را در‌مقایسه‌با رابط‌های جست‌وجوی استاندارد ارائه‌شده‌ی بینگ و بارد رقم زده است.

Richard Socher، مدیر‌عامل و بنیان‌گذار You.com، ادعا می‌کند که این رابط‌ها، تنها قطعات بسیار کوتاهی را ارائه می‌دهند؛ به‌طوری‌که انگیزه‌ای برای کلیک روی لینک به کاربر بدهند. LLMها می‌توانند از این فهرست ساخته‌شده به‌صورت سفارشی استفاده کنند تا در پاسخ به پرسش‌ها، قطعه‌ی مرتبط را شناسایی و خلاصه کنند و به پاسخ به‌روزتری برسند.

You.com در زمان راه‌اندازی سه نوع رابط‌ برنامه‌نویسی ارائه می‌کند:

• جست‌وجوی وب: جست‌وجوی وب دسترسی به فهرستی از قطعه‌های طولانی از وب‌سایت‌ها را برای LLMها امکان‌پذیر می‌کند.
• اخبار: بخش اخبار همان‌طور‌که از نامش پیداست، به‌صورت انحصاری نتایج خبری را ارائه می‌دهد.
• RAG: مخفف «بازیابی و تولید تقویت‌شده» است.

این شرکت نتایج جست‌وجوی وب خود را با LLM ترکیب می‌کند تا پاسخ‌هایی را تولید کند که به‌ادعای Richard Socher، پاسخ‌های واقعی‌تری را ارائه می‌دهند. درحال‌حاضر، LLM دارای دسترسی به وب می‌تواند مشکلی پرخطر باشد، بدون توجه به اینکه از کدام رابط‌های برنامه‌نویسی استفاده می‌کند.

وب زنده مجموعه داده‌ی آموزشی استاتیک کمتر سرپرستی و به‌طور ضمنی کمتر فیلتر شده است. سیستم‌ها نتایج جست‌وجو را می‌توانند دست‌کاری کنند و آن‌ها لزوماً نماینده‌ی کل وب نیستند. به‌دلیل اینکه بیشتر الگوریتم‌ها وب‌سایت‌هایی را در اولویت قرار می‌دهند که از فناوری‌های پیشرفته‌ی وب مانند رمزنگاری و پشتیبانی از موبایل و علامت‌گذاری طرح‌واره (Schema Markup) استفاده می‌کنند، وب‌سایت‌هایی با محتوای باکیفیت در‌ بین‌ انواع و اقسام وب‌سایت‌های متنوع ممکن است گم شوند.

Socher اعتراف کرد که رابط برنامه‌نویسی You.com مشکلاتی دارد؛ به‌ویژه در‌زمینه‌ی سؤالات محلی مثل «کجا سوشی خوبی در نزدیکی من وجود دارد؟»؛ زیرا رابط برنامه‌نویسی اطلاعی از مکان کاربران LLM ندارد. بااین‌همه به‌گفته‌ی Socher، بهبودهایی در حال انجام است؛ از‌جمله ارتقاهایی که به رابط برنامه‌نویسی You.com امکان برنامه‌نویسی و «تولید پاسخ‌های بسیار پیچیده‌تر» با ارجاعات ردیابی‌شدنی را می‌دهد. Socher افزود:

به‌زودی اخبار و جست‌وجوی عمومی وب را ترکیب می‌کنیم تا استفاده از رابط‌های برنامه‌نویسی ما برای شرکت‌ها آسان‌تر شود. با یکپارچه‌کردن رابط برنامه‌نویسی ما در هر راه‌حلی که سازندگان ارائه می‌دهند، پاسخ‌های آن‌ها برای کاربران نهایی مرتبط‌تر و مفیدتر خواهد بود. [این راه‌حل می‌تواند] به وب برگردد تا حقایق را تأیید کند.

درپایان، باید به این نکته اشاره کنیم که هیچ رابط برنامه‌نویسی کاملی وجود ندارد و بی‌شک رابط برنامه‌نویسی You.com هم نقص‌هایی دارد. APIهای جدید You.com با قیمت ۱۰۰ دلار در ماه برای ۱۴,۲۰۰ فرا‌خوان API پس از آزمایشی ۶۰‌روزه که شامل ۱,۰۰۰ فرا‌خوان رایگان در ماه است، آغاز می‌شود. همچنین، You.com بسته‌های سفارشی برای معاملات شرکت‌های بزرگ را با اشتراک سالانه و تخفیف‌هایی ارائه می‌دهد.