پژوهش: چت‌جی‌پی‌تی در سه مورد از هر چهار بار، برای یک پرسش تکراری برند متفاوتی را در صدر پیشنهادهایش قرار می‌دهد
بر اساس پژوهشی از آژانس بازاریابی نیویورکی بیزی‌سید (BusySeed)، وقتی پرسشی درباره خرید از چت‌جی‌پی‌تی پرسیده می‌شود، برندی که این هوش مصنوعی در رتبه نخست پیشنهاد می‌کند، معمولاً با تکرار همان پرسش تغییر می‌کند.
در این پژوهش، ۱۷۲٬۶۲۴ جفت پاسخ به پرسش‌های یکسان بررسی شد که از ۲۷ آوریل تا ۱۶ اکتبر ۲۰۲۶، در ۱۷۲ گروه کالایی و خدماتی گردآوری شده بودند. برند معرفی‌شده در رتبه نخست فقط در ۲۵٫۴ درصد از جفت پاسخ‌ها ثابت ماند؛ در ۷۴٫۶ درصد موارد، چت‌جی‌پی‌تی برند دیگری را در صدر فهرست قرار داد.
فاصله زمانی میان دو پاسخ تقریباً هیچ تفاوتی در این نتیجه ایجاد نکرد. در پاسخ‌هایی که کمتر از یک هفته با یکدیگر فاصله داشتند، برند نخست در ۲۳٫۹ درصد موارد یکسان بود. این میزان برای پاسخ‌هایی که بیش از چهار هفته از یکدیگر فاصله داشتند، به ۲۵٫۹ درصد رسید.
این الگو در بخش‌های مختلف بازار مشاهده شد. در ۱۴۳ گروه که داده‌های کافی برای بررسی آن‌ها وجود داشت، سهم پاسخ‌های تکراری با برند نخست متفاوت، از ۳۴٫۳ تا ۹۲٫۸ درصد متغیر بود و میانه این شاخص به ۷۷٫۳ درصد رسید. هیچ گروهی بیش از ۱٫۷ درصد از کل داده‌ها را تشکیل نمی‌داد.
در تمام مقایسه‌ها، پاسخ‌ها از یک نسخه یکسان مدل، با تنظیمات جست‌وجوی وب یکسان و بر اساس متن دقیقاً مشابه پرسش استخراج شده بودند. بنابراین، تغییر برند صدرنشین ناشی از به‌روزرسانی مدل از سوی اوپن‌ای‌آی نبود.
مطالعه جداگانه‌ای که بیزی‌سید طی ۱۵ هفته درباره چت‌جی‌پی‌تی، کلود و جمینای انجام داد نیز نتایج مشابهی را در هر سه دستیار هوش مصنوعی نشان داد. در ۵۶٫۴ درصد از مقایسه‌های هفته‌به‌هفته، نام شرکتی که در رتبه نخست قرار می‌گرفت تغییر کرد. از میان ۴۸۰ مجموعه پرسش که در طول این دوره پیگیری شدند، تنها ۸۵ مجموعه در تمام مدت همان برند پیشتاز را حفظ کردند.
عمر جنبلات، بنیان‌گذار و مدیرعامل بیزی‌سید، گفت: «اگر روز دوشنبه بررسی کنید که برندتان در چت‌جی‌پی‌تی چه رتبه‌ای دارد، فقط درباره وضعیت آن در روز دوشنبه اطلاعات به دست آورده‌اید. آنچه اهمیت دارد، میزان تکرار حضور شما در پاسخ به پرسش‌های متعدد است، نه رتبه‌ای که فقط یک بار کسب کرده‌اید.»
این یافته برای بازار رو به رشد ابزارهایی اهمیت دارد که رتبه یک شرکت را در نتایج هوش مصنوعی به‌صورت یک عدد واحد گزارش می‌کنند. نتایج پژوهش نشان می‌دهد چنین عددی ممکن است صرفاً جایگاه شرکت در یک پاسخ مشخص را منعکس کند، نه موقعیتی پایدار و ماندگار.
بیزی‌سید که در سال ۲۰۱۳ تأسیس شده و دفتر مرکزی آن در شهر نیویورک قرار دارد، خدمات جست‌وجو، تبلیغات و جذب مشتریان بالقوه ارائه می‌دهد. این شرکت پژوهش‌های خود را به همراه داده‌های زیربنایی آن‌ها در وب‌سایتش منتشر می‌کند.
در این مطالعه، به‌جای اپلیکیشن چت‌جی‌پی‌تی برای کاربران واردشده به حساب کاربری، از رابط برنامه‌نویسی توسعه‌دهندگان اوپن‌ای‌آی استفاده شد؛ زیرا اپلیکیشن ممکن است پاسخ‌ها را بر اساس اطلاعات شخصی‌سازی کند. همچنین، این روش امکان تفکیک تصادفی‌بودن درونی مدل از تغییرات واقعی در صفحات وبی را که مدل می‌خواند، فراهم نمی‌کند. روش‌شناسی و داده‌های پژوهش در صفحه پژوهش بیزی‌سید در دسترس است.