Akmel Syed
Wallaroo.AI
Deploying and Monitoring LLM Inference Endpoints
กรกฎาคม 16, 2567 | 6:00 - 7:00 หลังเที่ยง (UTC) เวลาสากลเชิงพิกัด
พร้อมที่จะเริ่มต้นใช้งาน AI และเทคโนโลยีล่าสุดหรือไม่ Microsoft Reactor มีกิจกรรม การฝึกอบรม และทรัพยากรของชุมชนเพื่อช่วยเหลือนักพัฒนา ผู้ประกอบการ และสตาร์ทอัพที่สร้างขึ้นบนเทคโนโลยี AI และอื่น ๆ เข้าร่วมกับเรา!
Deploying and Monitoring LLM Inference Endpoints
กรกฎาคม 16, 2567 | 6:00 - 7:00 หลังเที่ยง (UTC) เวลาสากลเชิงพิกัด
พร้อมที่จะเริ่มต้นใช้งาน AI และเทคโนโลยีล่าสุดหรือไม่ Microsoft Reactor มีกิจกรรม การฝึกอบรม และทรัพยากรของชุมชนเพื่อช่วยเหลือนักพัฒนา ผู้ประกอบการ และสตาร์ทอัพที่สร้างขึ้นบนเทคโนโลยี AI และอื่น ๆ เข้าร่วมกับเรา!
กลับไป
Deploying and Monitoring LLM Inference Endpoints
กรกฎาคม 16, 2567 | 6:00 - 7:00 หลังเที่ยง (UTC) เวลาสากลเชิงพิกัด
- รูปแบบ:
สตรีมสด
หัวข้อ: วิทยาศาสตร์ข้อมูลและการเรียนรู้ของเครื่อง
ภาษา: ภาษาอังกฤษ
In this session we will dive into deploying LLMs to Production Inference Endpoints and then putting in place automated monitoring metrics and alerts to help track model performance and suppress potential output issues such as toxicity.
We will also cover the process of optimizing LLMs using RAG, for relevant, accurate, and useful outputs.
You will leave this session with a comprehensive understanding about deploying LLMs to production and monitoring the models for issues such as Toxicity, relevance, and accuracy.
Try this other common AI use cases using the Wallaroo.AI Azure Inference Server Freemium Offer on Azure Marketplace and also try the Free Wallaroo.AI Community Edition
ผู้พูด
-
Martin Bald
Wallaroo.AI
-
Younes Amar
Wallaroo.AI
เหตุการณ์นี้เป็นส่วนหนึ่งของ Wallaroo.AI: Techniques for Faster, Easier AI Series.
คลิกที่นี่เพื่อ เยี่ยมชมหน้าชุดข้อมูล ซึ่งคุณสามารถดูเหตุการณ์ที่จะเกิดขึ้นและตามความต้องการทั้งหมด