LEARN, CONNECT, BUILD

Microsoft Reactor

Csatlakozzon a Microsoft Reactorhoz, és vegye fel a kapcsolatot a fejlesztőkkel élőben

Készen áll az AI és a legújabb technológiák használatának megkezdésére? A Microsoft Reactor eseményeket, képzéseket és közösségi erőforrásokat biztosít a fejlesztőknek, vállalkozóknak és startupoknak az AI-technológiákra és egyebekre való támaszkodásához. Csatlakozzon Ön is!

LEARN, CONNECT, BUILD

Microsoft Reactor

Csatlakozzon a Microsoft Reactorhoz, és vegye fel a kapcsolatot a fejlesztőkkel élőben

Készen áll az AI és a legújabb technológiák használatának megkezdésére? A Microsoft Reactor eseményeket, képzéseket és közösségi erőforrásokat biztosít a fejlesztőknek, vállalkozóknak és startupoknak az AI-technológiákra és egyebekre való támaszkodásához. Csatlakozzon Ön is!

Visszalépés

The Art of AI Embodiment: Real-Time Interactive Experiences with Azure OpenAI GPT-4o

29 április, 2025 | 7:00 du. - 8:00 du. (UTC) Koordinált egyetemes idő

  • Formátum:
  • alt##LivestreamÉlő közvetítés

Téma: Ügynökök

Nyelv: Angol

In this new era of AI agents and nascent robotics interactions, creating truly engaging and intelligent experiences requires real-time, low-latency communication, adaptive behavior, and seamless multimodal integration across text, speech, and vision. The GPT-4o real-time API in Azure OpenAI Service unlocks new possibilities for robotics developers, enabling robots to process natural language and speech, interpret images and context, and generate dynamic responses with minimal latency.

This session dives into crafting AI experiences that feel truly alive across both physical and virtual environments. Attendees will explore how to infuse AI with personality, speech, animations, and facial expressions—transforming it into an interactive agent capable of engaging its surroundings with dynamic, lifelike qualities. Additionally, we'll discuss using virtual 3D bodies as a test bed for robotics applications.

In this talk, we’ll explore how real-time capabilities can power interactive backends for robotic and immersive applications, highlighting both their strengths and limitations. We’ll discuss the challenges encountered along the way, the feasibility of using this technology today, and whether it meets the demands of real-world applications or still needs additional capabilities.

Through live demos and practical examples, you’ll see how AI combined with 3D embodiments can revolutionize entertainment, education, customer service, and beyond. Whether you’re an AI engineer, innovator looking to push the boundaries of human-AI interaction, or a roboticist interested in bringing robots to life with LLMs, this session will provide actionable insights to take your projects to the next level.

We'll cover two technology stacks:

Three.js, React, Ready Player Me, Blender, Azure GPT-4o Realtime API
Unity, SALSA LipSync Suite, Eleven Labs Text-to-Speech, Ready Player Me

Join us to discover how Azure OpenAI is shaping the future of real-time, interactive AI experiences!

Join us to discover how Azure OpenAI is shaping the future of real-time, interactive robotic experiences!

Check out some resources:

Előfeltételek

Előadók

  • April Gittens

    • Principal Cloud Advocate, AI

    Microsoft

  • Cedric Vidal

    • Principal AI Advocate for Startups

    Microsoft

Kapcsolódó események

Az alábbi események önt is érdekelhetik. Mindenképpen látogasson el a A Reactor kezdőlapja az összes elérhető esemény megtekintéséhez.

Az oldal egyes részei gépi vagy AI fordításúak lehetnek.