課程簡介

多模態學習導論

  • 多模態 AI 概述
  • 多模態數據處理的挑戰
  • 多模態 LLM 的好處

瞭解大型語言模型

  • 最先進的 LLM 架構
  • 使用多模態數據訓練 LLM
  • 案例研究:成功的多模態 LLM 應用

處理多模態數據

  • 文本、圖像和音訊的數據預處理技術
  • 特徵提取和表示學習
  • 在 LLM 中整合多模態數據

開發多模態 LLM 應用程式

  • 設計用於多模態交互的用戶介面
  • 虛擬助手和聊天機器人中的 LLM
  • 使用 LLM 建立身臨其境的體驗

評估和優化多式聯運系統

  • 多模態 LLM 的性能指標
  • 優化策略,提高準確性和效率
  • 解決多式聯運系統中的偏見和公平性

動手實驗室:構建多模態 LLM 專案

  • 設置多模態數據集
  • 為特定用例實施多模態 LLM
  • 測試和完善系統

摘要和後續步驟

最低要求

  • 了解機器學習和神經網路
  • 具有 Python 程式設計經驗
  • 熟悉各種數據類型(文字、圖像、音訊)的數據預處理

觀眾

  • 數據科學家
  • 機器學習工程師
  • 軟體開發人員
  • 專注於人工智慧和自然語言處理的研究人員
 14 時間:

人數


每位參與者的報價

Provisional Upcoming Courses (Require 5+ participants)

課程分類