多模態應用中的LLMs培訓
文本、圖像和音訊等不同類型數據的集成代表了 LLM 應用程式的最前沿,可實現更全面和上下文感知的 AI 系統。
這種由講師指導的現場培訓(在線或現場)面向希望將 Large Language Models (LLMs) 應用於高級 AI 應用程式的多模態數據的中級數據科學家、機器學習工程師和軟體開發人員。
在培訓結束時,參與者將能夠:
- 瞭解使用LLM進行多模態學習的原理。
- 實現 LLM 以處理和分析文字、圖像和音訊數據。
- 開發利用多模態數據集成優勢的應用程式。
- 評估多模式 LLM 系統的性能。
課程形式
- 互動講座和討論。
- 大量的練習和練習。
- 在現場實驗室環境中動手實施。
課程自定義選項
- 如需申請本課程的定製培訓,請聯繫我們進行安排。
課程簡介
多模態學習導論
- 多模態 AI 概述
- 多模態數據處理的挑戰
- 多模態 LLM 的好處
瞭解大型語言模型
- 最先進的 LLM 架構
- 使用多模態數據訓練 LLM
- 案例研究:成功的多模態 LLM 應用
處理多模態數據
- 文本、圖像和音訊的數據預處理技術
- 特徵提取和表示學習
- 在 LLM 中整合多模態數據
開發多模態 LLM 應用程式
- 設計用於多模態交互的用戶介面
- 虛擬助手和聊天機器人中的 LLM
- 使用 LLM 建立身臨其境的體驗
評估和優化多式聯運系統
- 多模態 LLM 的性能指標
- 優化策略,提高準確性和效率
- 解決多式聯運系統中的偏見和公平性
動手實驗室:構建多模態 LLM 專案
- 設置多模態數據集
- 為特定用例實施多模態 LLM
- 測試和完善系統
摘要和後續步驟
最低要求
- 了解機器學習和神經網路
- 具有 Python 程式設計經驗
- 熟悉各種數據類型(文字、圖像、音訊)的數據預處理
觀眾
- 數據科學家
- 機器學習工程師
- 軟體開發人員
- 專注於人工智慧和自然語言處理的研究人員
公開培訓課程需要5名以上參與者。
多模態應用中的LLMs培訓 - 訂單
多模態應用中的LLMs培訓 - 詢問
多模態應用中的LLMs - 咨詢詢問
即將到來的課程
相關課程
進階LangGraph:最佳化、除錯與監控複雜圖形
35 小時使用 Devstral 建構編碼代理:從代理設計到工具鏈
14 小時在 香港 的實時培訓中掌握 Devstral。課程涵蓋架構、代理工作流設計及工具整合。此課程適合高級工程師,透過實操實驗室建構編碼代理,以提升現代開發環境中的生產力與安全性。
開源模型運作:使用Devstral與Mistral模型進行自我託管、微調與治理
14 小時此授課者主導的香港培訓針對希望掌握自我託管和微調Devstral與Mistral模型的ML工程師。參與者學習實用的治理、監控和合規技術,以在生產環境中自信地部署開源AI。
LangGraph在金融领域的应用
35 小時LangGraph基础:基于图的LLM提示与链式调用
14 小時LangGraph在医疗保健中的应用:受监管环境下的工作流编排
35 小時適用於法律應用的 LangGraph
35 小時使用LangGraph与LLM智能体构建动态工作流
14 小時LangGraph 行銷自動化
14 小時Le Chat Enterprise:私密ChatOps、整合與管理控制
14 小時本課程在 香港 提供直播訓練。內容涵蓋Le Chat Enterprise。這是一款針對安全、受治理會話式AI的私密ChatOps解決方案。學員將學習部署、配置,並將其與企業應用整合。啟用RBAC、SSO及合規驅動控制,以建立可擴展且安全的AI工作流。
成本效益高的LLM架構:Mistral規模化(效能/成本工程)
14 小時通過在香港進行的14小時現場培訓,掌握成本效益高的Mistral LLM架構。學習部署、優化並擴展Mistral Medium 3,以實現最大吞吐量並最小化成本,使用批量處理、量化和高效服務策略應對企業級工作負載。
利用Mistral連接器與整合功能實現對話式助理的產品化
14 小時本課程在 香港 地區提供,內容涵蓋將Mistral對話式助理整合至企業工作流。參與者將學習如何連接SaaS工具、實施檢索增強生成(RAG),並為面向客戶及內部的聊天介面設計高效的用戶體驗模式。
Mistral Medium 3 的企業級部署
14 小時此香港導師帶領的培訓協助進階 AI 工程師部署並保護 Mistral Medium 3。內容涵蓋推理成本優化、多模態用例實作及企業合規實務。包含 API 與自託管設定的實作實驗。
Mistral負責任AI:隱私、資料居留與企業控制
14 小時在香港進行的這場Mistral負責任AI培訓,專為合規與安全主管設計。您將掌握隱私保護技術、資料居留策略,以及RBAC與SSO等企業控制機制,確保AI部署的安全與合規。
使用Mistral模型构建多模态应用(视觉、OCR与文件理解)
14 小時学习使用Mistral模型构建多模态应用。聚焦OCR、文件理解及视觉文本搜索。本课程为动手实践培训。涵盖管道实施、NLP集成及企业级设计。提供线上或香港授课。