聯繫我們

課程簡介

Vertex AI多模态LLM简介

  • Vertex AI多模态能力概览
  • Gemini模型及支持的模式
  • 企业与研究中的应用案例

开发环境设置

  • 配置Vertex AI以支持多模态工作流
  • 处理跨模态数据集
  • 动手实验:环境设置与数据集准备

长上下文窗口与高级推理

  • 理解长上下文工作流
  • 规划与决策中的应用案例
  • 动手实验:实现长上下文分析

跨模态工作流设计

  • 结合文本、音频和图像分析
  • 在流程中串联多模态步骤
  • 动手实验:设计多模态流程

使用Gemini API参数

  • 配置多模态输入和输出
  • 优化推理与效率
  • 动手实验:调整Gemini API参数

高级应用与集成

  • 交互式多模态代理与助手
  • 集成外部API与工具
  • 动手实验:构建多模态应用

评估与迭代

  • 测试多模态性能
  • 准确性、一致性与漂移的度量指标
  • 动手实验:评估多模态工作流

总结与后续步骤

最低要求

  • 熟练掌握Python编程
  • 具备机器学习模型开发经验
  • 熟悉多模态数据(文本、音频、图像)

目标受众

  • AI研究人员
  • 高级开发人员
  • 机器学习科学家
 14 小時

人數


每位參與者的報價

即將到來的課程

課程分類