Tack för att du skickade din fråga! En av våra teammedlemmar kontaktar dig snart.
Tack för att du skickade din bokning! En av våra teammedlemmar kontaktar dig snart.
Kursplan
Introduktion till multimodala LLM i Vertex AI
- Översikt över multimodala funktioner i Vertex AI
- Gemini-modeller och stødda modaliteter
- Användningsområden inom företag och forskning
Installera utvecklingsmiljön
- Konfigurera Vertex AI för multimodala arbetsflöden
- Arbeta med dataset över flera modaliteter
- Praktisk labb: miljöinstallation och förberedelse av dataset
Långa kontextfönster och avancerat resonemang
- Förståelse för arbetsflöden med lång kontext
- Användningsområden inom planering och beslutsfattande
- Praktisk labb: implementering av långkontextsanalys
Design av övermodala arbetsflöden
- Kombinera analys av text, ljud och bild
- Kedja ihop multimodala steg i pipelines
- Praktisk labb: designa ett multimodalt flöde
Arbeta med parametrar i Gemini API
- Konfigurera multimodala indata och utdata
- Optimera inferens och effektivitet
- Praktisk labb: finjustera parametrar i Gemini API
Avancerade applikationer och integrationer
- Interaktiva multimodala agenter och assistenter
- Integrera externa API och verktyg
- Praktisk labb: bygga en multimodal applikation
Utvärdering och iteration
- Testa multimodal prestanda
- Mått för noggrannhet, samstämmighet och drift
- Praktisk labb: utvärdera multimodala arbetsflöden
Sammanfattning och nästa steg
Krav
- Förkunskaper i Python-programmering
- Erfarenhet av utveckling av maskininlärningsmodeller
- Kännedom om multimodala data (text, ljud, bild)
Målgrupp
- AI-forskare
- Avancerade utvecklare
- ML-ingenjörer
14 Timmar
