Akmel Syed
Wallaroo.AI
LEARN, CONNECT, BUILD
Microsoft Reactor
Gå med i Microsoft Reactor och interagera med utvecklare live
Är du redo att komma igång med AI och de senaste teknikerna? Microsoft Reactor tillhandahåller evenemang, utbildning och communityresurser som hjälper utvecklare, entreprenörer och nystartade företag att bygga vidare på AI-teknik med mera. Följ med!
LEARN, CONNECT, BUILD
Microsoft Reactor
Gå med i Microsoft Reactor och interagera med utvecklare live
Är du redo att komma igång med AI och de senaste teknikerna? Microsoft Reactor tillhandahåller evenemang, utbildning och communityresurser som hjälper utvecklare, entreprenörer och nystartade företag att bygga vidare på AI-teknik med mera. Följ med!
返回
Deploying and Monitoring LLM Inference Endpoints
16 七月, 2024 | 6:00 下午 - 7:00 下午 (UTC) Samordnad universell tid
- 形式:
Livestream
主题: Datavetenskap & Machine Learning
语言: Engelska
In this session we will dive into deploying LLMs to Production Inference Endpoints and then putting in place automated monitoring metrics and alerts to help track model performance and suppress potential output issues such as toxicity.
We will also cover the process of optimizing LLMs using RAG, for relevant, accurate, and useful outputs.
You will leave this session with a comprehensive understanding about deploying LLMs to production and monitoring the models for issues such as Toxicity, relevance, and accuracy.
Try this other common AI use cases using the Wallaroo.AI Azure Inference Server Freemium Offer on Azure Marketplace and also try the Free Wallaroo.AI Community Edition
主讲人
-
Martin Bald
Wallaroo.AI
-
Younes Amar
Wallaroo.AI
此活动属于 Wallaroo.AI: Techniques for Faster, Easier AI Series.
单击此处 访问“系列”页 可在此处查看所有即将举办的活动和点播活动。