培訓時長：6 天（36 課時）

課程介紹：

本課程采用實戰(zhàn)案例驅(qū)動的教學模式，與傳統(tǒng)的先講授知識再進行項目實踐的教

學方法截然不同。通過真實項目讓學員參與從需求分析到產(chǎn)品部署的全流程，快

速將知識轉(zhuǎn)化為實際問題解決能力。

課程深度結(jié)合 DeepSeek 大模型，讓學員掌握其在 AI Agent 開發(fā)中的應用技

巧。同時，課后贈送拓展課程，進一步加深學員對相關(guān)技術(shù)的理解和應用能力。

學員基礎(chǔ)：

? 熟悉掌握 Python 編程語言

? 對人工智能和機器學習的基本概念有所了解

? 具備一定的邏輯思維能力和解決問題的能力

? 對 AI 和大模型有一定的興趣和探索欲望

學后收獲：

? 掌握大模型的基本概念、工作原理和應用場景

? 學會如何與大模型進行有效溝通，掌握提示工程的技巧

? 能夠基于大模型云服務平臺快速搭建專屬 AI Agent

? 掌握基于 RAG 的問答系統(tǒng)的開發(fā)

? 掌握基于多模態(tài)大模型的應用開發(fā)

? 了解如何評估和保證 AI Agent 的內(nèi)容安全和合規(guī)性

課程優(yōu)勢：

實戰(zhàn)案例教學：通過真實項目案例，讓學員在實戰(zhàn)中學習

多模態(tài)技術(shù)融合：涵蓋文本、圖像、語音等多模態(tài)大模型應用

安全合規(guī)重視：專門講解 AI Agent 的內(nèi)容安全與合規(guī)性

動手練習豐富：每個環(huán)節(jié)配有動手練習，強化實踐能力

行業(yè)專家指導：由領(lǐng)域?qū)＜沂谡n，分享最新行業(yè)動態(tài)

項目導向?qū)W習：以項目為導向，完整體驗開發(fā)流程

互動與反饋：學員項目展示、互評、教師點評等互動環(huán)節(jié)

課程內(nèi)容

模塊 章節(jié) 主講知識

基于阿里云百煉平臺構(gòu)

建智能體應用

快速搞定 AI Agent ? 在網(wǎng)站上增加一個 AI 助手

? 構(gòu)建能主動提問的智能導購

? 在釘釘上增加一個 AI 機器人

? 讓微信公眾號成為智能客服

? 在企業(yè)微信集成 AI 助手

Multi-Agent，玩轉(zhuǎn)流程編

排

? 工作流應用和智能體編排應用功能介紹

? 如何創(chuàng)建工作流應用

? 如何創(chuàng)建智能體編排應用

項目 1：智能答疑機器人

開發(fā)實戰(zhàn)

項目背景及需求分析 ? 智能答疑機器人的應用場景

? 技術(shù)選型與實現(xiàn)路徑

開發(fā)環(huán)境搭建 ? 開發(fā)環(huán)境準備

? DeekSeek API Key 開通

? 百煉平臺 API KEY 準備

DeekSeek API 詳解 ? DeepSeek-V3 大模型 API

? DeepSeek-R1 推理大模型 API

? DeepSeek Tokens 用量計算

Step 1：用大模型構(gòu)建新

人答疑機器人

? 通過 API 調(diào)用 DeepSeek

? 加載百煉 API Key

? 簡單會話實現(xiàn)

? 流式輸出實現(xiàn)

? 大模型是如何工作的

? 大模型的問答工作流程

? 輸入文本分詞化

? token 向量化

? 大模型推理

? 輸出 Token

? 輸出文本

? 影響大模型內(nèi)容生成的隨機性參數(shù)

? temperature

? top_p/top_k

? 讓大模型能夠回答私域知識問題

? 通過提示詞傳遞私域知識

? 該方法的缺點及更好的解決方案

Step 2：基于 RAG 擴展答

疑機器人的知識范圍

? RAG 的工作原理

? 建立索引

? 檢索生成

? 創(chuàng)建 RAG 應用

? 基于 LlamaIndex 創(chuàng)建 RAG 應用

? 保存與加載索引

? RAG 多輪對話實現(xiàn)

Step 改善答疑機器人回

答質(zhì)量及能力

? 優(yōu)化提示詞以改善大模型回答質(zhì)量

? 使用提示詞框架

? 使用提示詞自動優(yōu)化工具

? 提示詞模板

? 構(gòu)建有效提示詞的技巧

? 通過意圖分類讓大模型處理多種不同類

型的任務

? 問題引入

? 改進思路

? 實現(xiàn)簡單路由模塊

? 優(yōu)化分類提示詞

? 將意圖識別應用到答疑機器人中

Step 4：自動化評測答疑

機器人的表現(xiàn)及優(yōu)化

? 評估 RAG 應用表現(xiàn)

? 查看答疑機器人存在的問題

? 查看 RAG 檢索結(jié)果排查問題

? 自動化測試機制初步嘗試

? 使用 Ragas 來評估應用表現(xiàn)

? Ragas 評估指標解析

? 評估 RAG 應用回答質(zhì)量

? 評估檢索召回效果

? 如何根據(jù) Ragas 指標進行優(yōu)化

Step 5：用插件擴展答疑 ? 機器人的局限性與解決方案

機器人的能力邊界 ? AI Agent 核心能力

? 基于 Assistant API 快速構(gòu)建 Agent

? 定義工具函數(shù)

? 查詢員工信息

? 發(fā)送請假申請

? 查詢公司規(guī)章制度

? 將工具函數(shù)與大模型集成進 Agent 中

? 創(chuàng)建 Agent 并集成工具函數(shù)

? 讀取回復消息

? Multi-Agent（多智能體）

? 問題引入

? 多智能體結(jié)構(gòu)概覽

◆ Planner Agent 規(guī)劃智能體

◆ 執(zhí)行工具函數(shù)的 Agent 智能

◆ Summary Agent 總結(jié)智能

體

? Planner Agent 實現(xiàn)

? 執(zhí)行工具函數(shù)的 Agent 實現(xiàn)

? Summary Agent 實現(xiàn)

? 擴展：使用多智能體系統(tǒng)來處理復雜任務

Step 6：大模型 RAG 內(nèi)容

安全與合規(guī)檢查

? 內(nèi)容安全合規(guī)涉及的范圍

? 內(nèi)容合規(guī)檢查

? 方案概覽

? 輸入輸出合規(guī)檢查

◆ 文本合規(guī)檢查

◆ 圖片合規(guī)檢查

◆ 音頻合規(guī)檢查

◆ 視頻合規(guī)檢查

? 知識庫訪問控制

? 應用服務安全

? 大模型應用備案

項目 2：短視頻自動生成

系統(tǒng)開發(fā)實戰(zhàn)

項目背景介紹

Step 1：生成視頻相關(guān)內(nèi)

容

? 原理介紹

? 代碼實踐

? 環(huán)境準備

? 設(shè)置 API 客戶端

? 基于 DeepSeek 生成課程腳本

? 基于 DeepSeek 生成插畫提示詞

? 生成插畫

? 合并課程和插圖

Step 2：文案翻譯（國際

化）

? 原理介紹

? 基于 DeepSeek 代碼實踐

? 環(huán)境準備

? 設(shè)置 API 客戶端

? 初步翻譯

? 反思翻譯

? 優(yōu)化翻譯

Step 3：將課程內(nèi)容轉(zhuǎn)為

PPT

? 原理介紹

? 基于 DeepSeek 代碼實踐

? 環(huán)境準備

? 設(shè)置 API 客戶端

? 從課程內(nèi)容中提煉出 PPT 腳本

? 將 PPT 腳本轉(zhuǎn)換為 Marp 格式

? 導出為 PPT

Step 4：生成講解語音與

字幕

? 原理介紹

? 代碼實踐

? 環(huán)境準備

? 設(shè)置 API 客戶端

? 基于 DeepSeek 將課程內(nèi)容轉(zhuǎn)換為

錄音稿

? 基于 CosyVoice 轉(zhuǎn)換為音頻

? 生成 SRT 字幕

Step 5：合成完整視頻 ? 原理介紹

? 代碼實踐

? 環(huán)境準備

? 剪輯視頻

◆ 計算每一張演示文稿在視頻

中的持續(xù)時間

◆ 將所有輸入演示文稿按順序

剪輯為視頻

? 嵌入音頻和字幕

◆ 使用 moviepy 合并視頻和音

頻

◆ 使用 ffmpeg 嵌入字幕

◆ 播放生成好的視頻

Step 6：項目整合 ? 基于 Gradio 開發(fā)前端頁面

? 項目部署

多模態(tài)拓展篇 基于開源大模型應用項目

二次開發(fā)（持續(xù)更新）

? CosyVoice（實時聲音處理大模型）

? EchoMimicV2（開源數(shù)字人）

? VI****.5（實時視覺與語音交互）

課后贈送拓展課程（錄播）

? 《基于 Dify 的 Agent 落地實戰(zhàn)》

? 《深度學習框架 Pytorch 快速入門》

? 《OpenAl API 操作》

? 《LlamaIndex 快速入門》

? 《Langchain 快速入門》

? 《向量數(shù)據(jù)庫》

? 《GraphRAG 解析與實戰(zhàn)》

? 《基于 Gradio 的 AI 應用搭建實戰(zhàn)》