多模態應用中的大型語言模型培訓
整合文字、影像和音訊等不同類型的資料，代表著大型語言模型（LLM）應用的最前沿，能夠實現更全面且具情境感知能力的 AI 系統。
此為講師主導的實作培訓（線上或線下），目標受眾為希望將大型語言模型應用於多模態資料以開發進階 AI 應用的初級至中級資料科學家、機器學習工程師和軟體開發人員。
完成本培訓後，學員將能夠：
- 理解使用 LLM 進行多模態學習的原理。
- 實作 LLM 以處理和分析文字、影像及音訊資料。
- 開發利用多模態資料整合優勢的應用程式。
- 評估多模態 LLM 系統的效能。
課程格式
- 互動式講座與討論。
- 大量練習與實作。
- 在即時實驗室環境中進行動手實作。
課程客製化選項
- 如需此課程的客製化培訓，請聯繫我們以安排。
感謝您提交詢問！我們的一位團隊成員將在短時間內與您聯繫。
感謝您提交預訂！我們的一位團隊成員將在短時間內與您聯繫。
課程時長 14 時間：
課程簡介
多模態學習簡介
- 多模態 AI 概覽
- 多模態資料處理的挑戰
- 多模態 LLM 的優勢
理解大型語言模型
- 最新一代 LLM 的架構
- 使用多模態資料訓練 LLM
- 案例研究：成功的多模態 LLM 應用
處理多模態資料
- 文字、影像和音訊的資料前置處理技術
- 特徵提取與表示學習
- 在多模態 LLM 中整合多模態資料
開發多模態 LLM 應用程式
- 設計多模態互動的使用者介面
- LLM 在虛擬助理和聊天機器人中的應用
- 使用 LLM 創造沉浸式體驗
評估與優化多模態系統
- 多模態 LLM 的效能指標
- 提升準確性和效率的優化策略
- 處理多模態系統中的偏見與公平性問題
實作實驗室：建構多模態 LLM 專案
- 設定多模態資料集
- 為特定用例實作多模態 LLM
- 測試並微調系統
總結與後續步驟
最低要求
- 理解機器學習和神經網路
- 具備 Python 程式設計經驗
- 熟悉各類資料（文字、影像、音訊）的資料前置處理
受眾對象
- 資料科學家
- 機器學習工程師
- 軟體開發人員
- 專注於 AI 和自然語言處理的研究人員
需要幫助選擇合適的課程嗎？
macao@nobleprog.com 或 +852 81990613
多模態應用中的大型語言模型培訓 - 詢問
多模態應用中的大型語言模型 - 咨詢詢問
相關課程
進階 LangGraph：優化、除錯與監控複雜圖
35 小時
本講師指導的實地培訓在 澳門 舉行，針對高級 AI 平台工程師、AI DevOps 專員及 ML 架構師，旨在優化、除錯、監控並運維用於有狀態、多參與者 LLM 應用（作為組合式圖）的生產級 LangGraph 系統。
更多...
運用 Devstral 建構編碼智能體：從智能體設計到工具整合
14 小時
在 澳門 舉行的這場實時培訓中，深入掌握 Devstral。課程涵蓋架構、智能體工作流設計及工具整合。該課程適合高級工程師，透過動手實驗，建構能提升現代開發環境中生產力與安全性的編碼智能體。
更多...
開源模型運營：使用 Devstral 與 Mistral 模型實現自我託管、微調與治理
14 小時
這門由講師主導的 澳門 培訓面向希望掌握 Devstral 和 Mistral 模型自我託管和微調的機器學習工程師。參與者將學習實踐性的治理、監控和合規技術，以信心十足地在生產環境中部署開源人工智能。
更多...
金融領域的 LangGraph 應用
35 小時
這門關於 澳門 的講師主導培訓課程，幫助專業人士設計基於 LangGraph 的金融解決方案。參與者將學習實施符合監管要求的工作流、整合數據標準，並部署具備強大治理、可觀察性及合規控制的系統。
更多...
LangGraph 基礎：基於圖的 LLM 提示與鏈接
14 小時
這門由講師帶領的 LangGraph 基礎課程在 澳門 為開發人員配備構建基於圖的 LLM 應用的技能。學習節點和邊、狀態管理和分支邏輯等核心概念。集成工具、檢索和外部 API，然後通過實操實驗室測試和部署可靠的工作流。
更多...
LangGraph 在醫療領域的應用：受監管環境下的工作流程編排
35 小時
通過這門在 澳門 進行的實時培訓，探索 LangGraph 在醫療領域的應用，專為中級至高級專業人士設計。學習設計狀態化、合規的工作流程，集成 FHIR 和 SNOMED CT 等標準，並應對受監管環境中的倫理和運營挑戰。
更多...
LangGraph 在法務應用程式中的應用
35 小時
透過這門 35 小時的講師主導培訓掌握用於法務應用程式的 LangGraph。澳門。此課程旨在幫助中高級專業人員，涵蓋工作流設計、合規控制和人在環審批。自信地構建可審計、生產就緒的 LLM 解決方案。
更多...
利用 LangGraph 與 LLM 智能體構建動態工作流程
14 小時
這門在 澳門 舉行的線上或現場實地課程，指引中級工程師使用 LangGraph 構建動態 LLM 工作流程。學習設計有狀態圖、實施分支邏輯，並整合檢索、API 及記憶，以打造穩健且具情境感知能力的应用程序。
更多...
LangGraph 用於營銷自動化
14 小時
這是由導師帶領的 澳門 培訓課程，介紹 LangGraph 在營銷自動化中的應用。參與者將學習如何設計條件式內容工作流程、整合大型語言模型（LLM）以實現個性化電子郵件營銷活動，並管理跨多步驟管道的狀態，從而獲得現代營銷所需的實戰技能。
更多...
Le Chat Enterprise：私有 ChatOps、整合及管理控制
14 小時
本澳門實時培訓涵蓋 Le Chat Enterprise，這是一項用於安全、受管治對話式 AI 的私有 ChatOps 解決方案。學員將學習其部署、配置及與企業應用程式的整合，並啟用 RBAC、SSO 及基於合規要求的控制措施，以實現可擴展且安全的 AI 工作流程。
更多...
高性價比 LLM 架構：大規模部署 Mistral（效能與成本工程）
14 小時
透過這門 14 小時的實時培訓課程，掌握高性價比的 Mistral LLM 架構 澳門。學習如何部署、優化並擴展 Mistral Medium 3，以實現最大吞吐量並最小化成本，利用批處理、量化及高效服務策略滿足企業級工作負載需求。
更多...
透過 Mistral 連接器與集成實現對話式助理的產品化
14 小時
這項在 澳門 進行的實地培訓涵蓋了將 Mistral 對話式助理集成到企業工作流程的內容。參與者將學習如何連接 SaaS 工具，實施檢索增強生成技術，並為面向客戶及內部的聊天界面設計有效的用戶體驗模式。
更多...
企業級部署：Mistral Medium 3
14 小時
這門在 澳門 舉行的講師帶頭培訓課程，協助高級 AI 工程師部署並保護 Mistral Medium 3。您將學習如何優化推論成本、實現多模態應用場景，並落實企業合規實踐。課程包含針對 API 及自託管設置的動手實驗。
更多...
Mistral 負責任的 AI：隱私、資料 residency 及企業控制
14 小時
這是在 澳門 舉行的 Mistral 負責任 AI 實時培訓，專為合規及安全負責人設計。您將掌握隱私保護技術、數據駐留策略，以及 RBAC 和 SSO 等企業級控制機制，以確保 AI 部署的安全與合規。
更多...
使用Mistral模型構建多模態應用程式（視覺、OCR及文件理解）
14 小時
學習如何使用Mistral模型構建多模態應用程式，重點關注OCR、文件理解及視覺-文本搜索。此實戰培訓涵蓋管道實現、NLP集成及企業級設計，透過線上或澳門方式提供。
更多...
