Introduction to Real-Time Graphics AI
اليوم، أريد أن أريكم شيئًا جديدًا
كنا نعمل عليه.
إنه ساحر حقًا، ونطلق عليه اسم الرسومات الفورية.
في غضون ثوانٍ قليلة فقط، يمكننا بالفعل إنشاء صور مرئية معقدة
مباشرةً على شاشتك باستخدام سياق كل ما تنظر إليه، و
كل ما عليك فعله هو استخدام صوتك. دعوني أريكم.
لنفترض أنني أحاول معرفة المزيد عن كيفية عمل نموذج لغوي كبير بالفعل.
مرحبًا يا Clicky، أشاهد هذا الفيديو، لكنني ما زلت لا أفهم كيف يقوم هذا
الشيء المسمى موتر بإعداد بيانات التدريب لنموذج ذكاء اصطناعي.
يحتوي الموتر على أرقام. يستخدم Karpathy هذه الأرقام لـ—
لاحظوا هنا، أنه يستخدم سياق ما هو موجود بالفعل
على شاشتي لكي
ينشئ مثالًا ويساعدني على تصوره استنادًا إلى ما هو موجود بالفعل في
الفيديو. فهل يمكنك شرح هذا لي أكثر؟
يعني، كيف يؤدي هذا إلى إنشاء ChatGPT
هذا جنوني.
لعبة التخمين نفسها هذه، بعد توسيعها بشكل هائل، تشكل أساسًا
لـChatGPT.
ومجددًا، أحصل على هذا التصور المرئي الكامل مباشرةً على
شاشتي، كما
لو كان لديّ، مثلًا، معلّم بجانبي مباشرةً.
أو لنفترض أنني لا أتعلم حقًا أي شيء على الإطلاق، لكنني أصادف
هذه التغريدة الجنونية، آه، التي نشرها صديقي Hubert عن طائرة F-35
تحوم، ولا أعرف إن كانت حقيقية أم لا.
يمكنني أن أقول ببساطة: "مرحبًا يا Clicky، هل هذا حقيقي؟
هل يمكن لطائرة أن تحوم فعلًا هكذا في الهواء؟"
نعم. يمكن لطائرة F-35B أن تحوم. دفع الهواء
إلى الأسفل يدفع الطائرة النفاثة إلى الأعلى. والتحويم الثابت يعني أن قوة الرفع
توازن وزنها.
حسنًا، هذا رائع جدًا. لكن لنأخذ الأمر خطوة أبعد.
هل يمكنك أن ترسم لي الطائرة النفاثة كاملةً ثلاثية الأبعاد وتشرح حقًا كيف تعمل المحركات؟
لدى طائرة F-35B واحد—
وفي النهاية، أحصل على هذا المخطط الجميل.
ومجددًا، يمكنني أن أطلب أي شيء حرفيًا،
لأن هذا ليس
مُصَيَّرًا مسبقًا. كل ذلك يتم فورًا باستخدام محرّك تصيير
بنيناه
داخليًا. رائع جدًا. لنفترض أنني أحاول التعمق أكثر في
العتاد، لكنني لا
أفهم تمامًا كيف يعمل Raspberry Pi.
الـPi حاسوب صغير جدًا. هذه تتصل—
وما هو رائع في هذا أنني أستطيع بالفعل الاستمرار في طرح أسئلة
إضافية عليه.
انظروا إلى هذا. كيف أوصل كاميرا بـRaspberry
Pi؟
هل يمكنك أن تريني بالضبط كيف؟
استخدم كابل كاميرا من 22 دبوسًا إلى 15 دبوسًا. ارفع المزلاج برفق،
وأدخل الطرف الضيق—
وهو يريني حرفيًا بالضبط كيف أرفع حتى المزلاج برفق
على Raspberry Pi وأوصل الكاميرا.
لذا فإن حالات استخدام هذا تكاد لا تنتهي،
ونرى مستخدمينا يفعلون أشياء
سحرية حقًا به. بالنسبة لنا، هذه حقًا واجهة بصرية جديدة لـ
الذكاء الاصطناعي، لا تتطلب دردشة أو طرفية.
وهكذا، نعم، كل هذا جديد جدًا. إنه قيد التشغيل الآن.
وهو متاح لنظامي Mac وWindows.
إن أردت تجربته، فسأضع الرابط أدناه،
وآمل أن تستمتع. رائع.
هذا كل شيء. إلى اللقاء.
End of transcript · 432 words · machine translated
Original transcript (English)
Today, I wanna show you guys something new that we've been working on. It's really magical, and we're calling it Real-Time Graphics. Within just a couple of seconds, we can actually generate complex visuals directly on your screen using the context of whatever you're looking at, and
all you have to do is use your voice. Let me show you. So let's say I'm trying to learn more about how an LLM actually works. Hey, Clicky, I'm watching this video, but I'm still not understanding how this tensor thing makes training data for an AI model. A tensor holds numbers. Karpathy uses these numbers to make-
Notice here, it's using the context of what's already on my screen to create and help me visualize an example based on what's actually already on the video. So can you explain this to me more? Like, how does this lead to ChatGPT being
created? That's crazy. This same guessing game, scaled enormously, is a foundation of ChatGPT. Again, I get this full kind of visual directly on my screen as
if I have, like, a tutor right next to me. Or let's say that I'm not really learning about anything at all, but I come across this crazy tweet, uh, that my friend Hubert posted about an F-35 hovering, and I don't know if it's real or not. I can just say, "Hey, Clicky, is this real?
Can an airplane actually hover like this in midair?" Yes. The F-35B can hover. Pushing air downward pushes the jet upward. Steady hovering means lift balances its weight. Okay, this is pretty cool. But let's take it a step further.
Can you draw the full jet for me in 3D and really explain how the engines work? The F-35B has one- And so yeah, at the end, I get this beautiful diagram. And again, I can ask for literally anything, 'cause this is not
pre-rendered. It's all done on the fly using a rendering engine that we built in-house. Pretty cool. Let's say I'm trying to get more into hardware, but I don't really quite understand how a Raspberry Pi works.
The Pi is a tiny computer. These connect- So what's cool about this is I can actually keep following up with it. Check this out. How do I attach a camera to a Raspberry Pi?
Can you show me exactly how? Use a 22 to 15 pin camera cable. Gently lift the latch, insert the narrow- And it's literally showing me exactly how to even just gently lift the latch on the Raspberry Pi and plug in the camera.
So the use cases for this are kinda endless, and we're seeing our users doing some really magical things with it. To us, this is truly a new visual interface for AI, one that doesn't require a chat or a terminal. And so yeah, this is all very new. It's in production right now.
It's available for Mac and for Windows. If you wanna try it, I'll drop the link below, and I hope you enjoy. Cool. That's it. Bye.