أداة HappyOyster من علي بابا تتيح إنشاء عوالم ثلاثية الأبعاد قابلة للاستكشاف من صورة واحدة

أصدرت مجموعة أبحاث ATH التابعة لعلي بابا الإصدار 1.0 من HappyOyster، والذي تصفه بأنه "أول نموذج عوالم مفتوحة تفاعلي في الوقت الفعلي في العالم". الفكرة مباشرة: أعطه نصًا أو صورة، فيعيد عالمًا ثلاثي الأبعاد يمكنك السير فيه والقيادة عبره واستكشافه لأكثر من دقيقة مع صوت ومرئيات متزامنة.

يقسم وضعان التجربة. وضع المغامرة يُنشئ عالمًا مفتوحًا كاملاً بشخصيات مخصصة، ثم يستجيب لأوامر المستخدم في الوقت الفعلي. يظهر السيناريو التجريبي الموصوف في إعلان علي بابا منظرًا صحراويًا مع فيزياء قيادة، لكن النموذج يمكنه التعامل مع أي بيئة موصوفة في الطلب. وضع الإخراج يحول المستخدم إلى مخرج أفلام افتراضي: أوامر نصية تتحكم في زوايا الكاميرا وحركة الشخصيات وتطور الحبكة، مع إمكانية الإيقاف المؤقت أو العودة أو إعادة كتابة المشهد في أي لحظة.

لم يتم تفصيل البنية الأساسية في الإصدار، لكن النموذج نفسه هو نظام توليدي مُدرَّب على مدخلات متعددة الوسائط وليس محرك ألعاب ذا حالة محدودة. هذا يعني أن كل تفاعل يُحتمل أن يُولد محتوى جديدًا بدلاً من الاختيار من مكتبة مبنية مسبقًا من الاستجابات. ما إذا كان ذلك سينجح تحت الاستخدام المطول هو أمر ستؤكده اختبارات الجهات الخارجية.

الإصدار 1.0 من HappyOyster هو الآن في مرحلة الاختبار الرمادي، مما يعني أن الوصول محدود لمطورين وشركاء مؤسسيين مختارين. نشرت علي بابا حزم تطوير برمجيات (SDKs) لأنظمة Android وiOS والويب، بالإضافة إلى واجهات برمجة تطبيقات مفتوحة من جانب الخادم لإدارة العوالم الافتراضية. تتعامل حزمة تطوير العميل مع اتصالات RTC وعرض الفيديو وكل من وضعي المغامرة والإخراج. يمكن للمستخدمين تصدير اللقطات بعد انتهاء الجلسة.

وقعت Reactor كأول شريك تكامل رسمي. دخلت الشركتان في شراكة استراتيجية تركز على تنفيذ المنتج والابتكار التقني المبني حول نموذج العالم المفتوح. لم يُحدد دور Reactor بدقة أكثر من ذلك، لكن الشراكة تشير إلى مسار تجاري يتجاوز مجرد أداة عرض توضيحي.

يذكر الإصدار العديد من حالات الاستخدام المستهدفة. يمكن لمطوري الألعاب استخدام HappyOyster لبناء نماذج أولية لعوالم مفتوحة وتفاعلات الشخصيات وتسلسلات القتال من الصور والنصوص بدلاً من بنائها من الصفر في محرك ألعاب. الدراما القصيرة التفاعلية والمرافقون الرقميون بالذكاء الاصطناعي هم فئة أخرى: حيث يبني المستخدمون الشخصيات وخطوط القصة من خلال اللغة الطبيعية، ويتولى النموذج الباقي. تُدرج السياحة الثقافية كتطبيق محتمل أيضًا، مع تجارب افتراضية غامرة للزوار.

لم تثبت أي من حالات الاستخدام هذه بالكامل بعد. النموذج في مرحلة الاختبار الرمادي تحديدًا لأن الحواف الخشنة تحتاج إلى تنعيم. التوليد التفاعلي في الوقت الفعلي بهذا الحجم مكلف حسابيًا، وتعتمد جودة المخرجات بشكل كبير على وضوح الطلب وفهم النموذج للفيزياء وتكوين المشهد. إعلان علي بابا يخلو من مقاييس ملموسة مثل وقت التوليد أو الدقة أو زمن الاستجابة التفاعلية.

مع ذلك، الاتجاه مهم. معظم نماذج التوليد ثلاثية الأبعاد اليوم تُنتج مشاهد ثابتة أو مقاطع فيديو قصيرة. يهدف HappyOyster إلى الاستمرارية والتفاعلية، وهما مشكلة أصعب. إذا نجح الاختبار الرمادي في التحقق من النهج، فقد يصبح نظام حزم التطوير البرمجيات أداة مفيدة للنمذجة الأولية المبكرة في الألعاب والوسائط التفاعلية. إذا تعثر، سيكون السؤال الرئيسي ما إذا كان التوليد في الوقت الفعلي يستطيع مواكبة توقعات المستخدمين للاتساق والتماسك.

في الوقت الحالي، يمكن للمطورين الذين لديهم إمكانية الوصول إلى الاختبار الرمادي التجربة. النموذج هو محاولة حقيقية لدفع الذكاء الاصطناعي التوليدي إلى ما هو أبعد من المخرجات لمرة واحدة وإلى شيء يبدو وكأنه فضاء معاش. ما إذا كان سيرقى إلى هذا الطموح هو القصة التي سترويها فترة الاختبار الرمادي.