Certaines parties de cette page peuvent être traduites par machine ou IA.

DÉCOUVRIR, ÉTABLIR DES RELATION ET GRANDIR

Microsoft Reactor

Rejoignez Microsoft Reactor et collaborez avec les start-ups et les développeurs en direct

Êtes-vous prêt à démarrer avec l’IA ?  Microsoft Reactor propose des événements, des formations et des ressources communautaires pour aider les start-ups, les entrepreneurs et les développeurs à fonder leurs futures activités sur la technologie de l’IA. Rejoignez-nous !

DÉCOUVRIR, ÉTABLIR DES RELATION ET GRANDIR

Microsoft Reactor

Rejoignez Microsoft Reactor et collaborez avec les start-ups et les développeurs en direct

Êtes-vous prêt à démarrer avec l’IA ?  Microsoft Reactor propose des événements, des formations et des ressources communautaires pour aider les start-ups, les entrepreneurs et les développeurs à fonder leurs futures activités sur la technologie de l’IA. Rejoignez-nous !

Retourner

AI Factory Platform: AI Infrastructure as a service

27 mai, 2025 | 8:00 PM - 9:00 PM (UTC) Temps universel coordonné

  • Format:
  • alt##LivestreamStream en direct

Thème: Utilisation des produits d'IA

Langage: À l’aide de la langue anglaise

As organizations move from AI experimentation to AI Operationalization, they are hit with several realizations around optimum Token utilization of the Azure Open AI Instances, how to scale and how many AOAI instances to maintain, calculation of chargeback for Azure AI services utilization, rate limiting, observability and monitoring. Also, for large organizations, while experimenting with AI Usecases, there is an overhead cost for creating the required infrastructure and ensuring its compliance with the internal security policies etc.

The AI Factory Platform is a scalable and secure environment designed to support the development, deployment, and management of AI solutions across our client's organization. This platform enables application developers to request approved AI services, look at shared dashboards for utilization metrics, rate limits and application chargeback costs.

There are also routing mechanisms implemented to ensure graceful failover from PTU to PAYG instances, retry with backoff of certain limited Azure Open AI deployments, priority-based routing and weight-based routing with the APIM policies. We also demonstrate how to handle instances scaling, load and traffic management via APIM for busy workloads and how to prevent throttling of Azure OPEN AI instances by chatty applications.

We essentially build an AI control tower for organizations to easily and securely scale and manage their GEN AI workloads in different environments.

Intervenants

  • Priyanka Shah

    • Senior AI Architect

    Avanade Australia

Événements connexes

Les événements ci-dessous peuvent également vous intéresser. N’oubliez pas de visiter notre page d’accueil Reactor pour voir tous les événements proposés.

Pour toute question, contactez-nous à l’adresse reactor@microsoft.com