تستخدم NVIDIA Apple Vision Pro لالتقاط العروض التوضيحية التي يتم تشغيلها عن بعد والتحكم في الروبوتات البشرية

قد لا يكون لدى Apple فائدة كبيرة لـ NVIDIA، لكن هذا لا يعني أن NVIDIA ليس لها أي فائدة لـ Apple. وعلى وجه التحديد، تستخدم سماعة الرأس Apple Vision Pro لتطوير الروبوت الذي يشبه الإنسان. انظر كيف أدناه:

يعد الفيديو جزءًا من حملة للترويج لعمل NVIDIA في مجال الروبوتات.

في البيان الصحفي، تظهر Apple Vision Pro مرتين كأداة للتحكم في روبوتات NVIDIA فيما يتعلق بخدمة MimicGen NIM الصغيرة:

تتطلب نماذج التدريب الأساسية للروبوتات البشرية كمية لا تصدق من البيانات. تتمثل إحدى طرق التقاط بيانات العرض البشري في استخدام التشغيل عن بعد، لكن هذه العملية أصبحت مكلفة وطويلة بشكل متزايد.

يسمح سير العمل المرجعي للعمليات عن بعد الممكّن بواسطة NVIDIA AI وOmniverse، والذي تم عرضه في مؤتمر رسومات الكمبيوتر SIGGRAPH، للباحثين ومطوري الذكاء الاصطناعي بتوليد كميات هائلة من بيانات الحركة والإدراك الاصطناعية من الحد الأدنى من العروض البشرية التي تم التقاطها عن بعد.

أولاً، يستخدم المطورون Apple Vision Pro لالتقاط عدد صغير من العروض التوضيحية التي يتم تشغيلها عن بعد. بعد ذلك، يقومون بمحاكاة التسجيلات في NVIDIA Isaac Sim ويستخدمون خدمة MimicGen NIM الصغيرة لإنشاء مجموعات بيانات تركيبية من التسجيلات.

يقوم المطورون بتدريب مشروع GR00T نموذج أساس بشري ببيانات حقيقية وصناعية، مما يمكّن المطورين من توفير الوقت وخفض التكاليف. ثم يستخدمون خدمة Robocasa NIM الصغيرة في مختبر إسحاق، إطار عمل لتعلم الروبوت، لتوليد تجارب لإعادة تدريب نموذج الروبوت. طوال سير العمل، تقوم NVIDIA OSMO بتعيين مهام الحوسبة بسلاسة لموارد مختلفة، مما يوفر للمطورين أسابيع من المهام الإدارية.

اقرأ الإصدار الكامل هنا للغوص العميق.

ح/ت @ناثيفر