تم تحديث ChatGPT لدعم المحادثات الصوتية والتعرف على الصور، حسبما أعلنت OpenAI يوم الاثنين. سيتمكن روبوت الدردشة المدعوم بالذكاء الاصطناعي الخاص بالشركة قريبًا من فهم الصور التي تم التقاطها أو مشاركتها من قبل المستخدمين وتقديم التفاصيل أو المعلومات ذات الصلة عبر الأنظمة الأساسية التي يتوفر فيها برنامج الدردشة الآلي. سيكون أيضًا قادرًا على إجراء محادثة ذهابًا وإيابًا باستخدام أداة التعرف على الكلام Whisper من OpenAI وتقنية تحويل النص إلى كلام (TTS) الجديدة من الشركة التي يُزعم أنها تقدم صوتًا “يشبه الإنسان” على تطبيق ChatGPT الخاص بالشركة لـ الهواتف الذكية.
كشفت OpenAI في منشور بالمدونة أن قدرة الشركة الجديدة على التعرف على الصور لـ ChatGPT ستكون متاحة على جميع الأنظمة الأساسية، بينما ستكون ميزة المحادثات الصوتية متاحة على iOS وAndroid من خلال إعداد الاشتراك. ستكون هذه الميزات متاحة لمشتركي ChatGPT Plus وEnterprise، ولا توجد معلومات حول ما إذا كان سيتم طرحها للمستخدمين في المستوى المجاني في المستقبل.
يمكن تمكين المحادثات الصوتية القادمة إلى ChatGPT من خلال الذهاب إلى إعدادات > ميزات جديدة وتبديل خيار تمكين المحادثات الصوتية. يمكنك بعد ذلك الاختيار من بين خمسة أصوات – تقول OpenAI إنها عملت مع ممثلين صوتيين محترفين لتقديم الميزة الجديدة. سيكون تطبيق ChatGPT قادرًا على الإجابة على الأسئلة عن طريق تحويل استفساراتك المنطوقة إلى نص يمكن أن يفهمه برنامج chatbot، وسيتم تحويل الردود إلى صوت باستخدام تقنية TTS الجديدة للشركة.
ChatGPT ليست الخدمة الوحيدة التي ستستخدم تقنية TTS الجديدة من OpenAI – أعلنت Spotify يوم الاثنين عن أداة ترجمة صوتية جديدة تعتمد على الذكاء الاصطناعي لمنشئي البودكاست والتي يمكنها ترجمة البودكاست تلقائيًا من الإنجليزية إلى الفرنسية والألمانية والإسبانية. يتم اختبار الأداة مع عدد قليل من مضيفي البودكاست وستكون الحلقات المترجمة متاحة لجميع المستخدمين أينما يتوفر Spotify، وفقًا لمنصة البث المباشر.
تقول OpenAI إن أداة التعرف على الصور الجديدة تعمل على طرازي GPT-3.5 وGPT-4 متعدد الوسائط الخاصين بالشركة، وهي قادرة على تحليل الصور والنصوص الموجودة في الصور الفوتوغرافية ولقطات الشاشة والمستندات. يمكن للمستخدمين إما التقاط صورة أو مشاركة صورة موجودة على هواتفهم باستخدام ChatGPT للحصول على رؤى من برنامج chatbot.
سيسمح ChatGPT أيضًا للمستخدمين بمشاركة صور متعددة يمكن مناقشتها مع chatbot، وفقًا لـ OpenAI. إذا كنت تريد التركيز على منطقة معينة، فستسمح لك أداة الرسم المدمجة بوضع علامة على جزء من الصورة. على سبيل المثال، قد يسمح التجول حول سلسلة دراجات تم إزاحتها في صورة تمت مشاركتها مع ChatGPT لبرنامج الدردشة الآلية بإظهار طرق لإصلاح المشكلة.