在人工智能時代，如何利用大模型能力和數據分析技術，打造AI驅動下的原生交互軟件，釋放人-機協同共創的巨大潛能，服務特定場景下的用戶體驗和功能價值，是軟件工程師和產品經理都需要關注的重要行業趨勢。
產業的鉅變之下，天津大學未來技術學院聯合百度飛槳，共同設計了《從AI賦能到AI原生：探索“大模型+軟件產品”的建構之路》的項目制工作坊。工作坊爲期兩週，在百度Jungle老師的帶領下，同學們通過學習多模態數據分析與大模型技術，以影視片爲多模態信息源，逐步從圖像、聲音和文本中開展數據驅動的設計分析，最終將任一電影的多模態信息和概念轉化爲引人入勝的大模型原生交互產品。
課程培養目標
- 多模態人工智能技術綜述與多模態數據可視分析
瞭解多模態人工智能技術的原理、算法和應用，掌握如何利用這些AI技術來分析一個系列的紀錄片中文本、圖像和聲音等多模態信息，並將AI分析結果，轉化爲文心大模型的微調數據、軟件開發的設計理念和素材。
- 大模型開發工作流
掌握從數據標註、提示詞工程、數據調優、基於人類反饋的強化學習（RLHF）訓練、模型測評和部署上線的大模型開發全流程，並最終基於AI Studio星河社區及文心大模型各平臺能力進行實踐，構建大模型時代的技能全圖譜。
- 交互產品設計與開發
利用產品原型設計工具、數據可視化技術、前後端開發技術和遊戲設計引擎，逐步將產品設計理念，轉化爲可實時交互的上線應用，有效地塑造產品的信息價值、功能價值和用戶體驗。
- 團隊協作與項目管理能力
與其他參與者組成團隊，共同合作開發一個軟件產品。學會有效的團隊協作，包括任務分配、溝通和協調。獲得項目管理的實踐經驗，學會規劃、執行和監控項目進展。
部分課程內容
工作坊的內容設置上，課程包括了導論模塊、多模態數據分析模塊、大模型設計與調優模塊、AI原生軟件開發模塊和大作業實踐模塊，共5大模塊21小節內容，涵蓋大模型絕大部分的知識點和適合不同階段學生實操的開發技能點。更詳細的課程安排，歡迎發送工作坊合作需求至郵箱Paddle[email protected]。
部分項目成果
爲期兩週的工作坊，時間十分緊張，任務量也不小，在這麼短的時間內，要求同學們不僅要學習和消化全部的課程內容，還需要高質量完成課題項目——這對他們的學習力、創造力，特別是爆發力，都提出了巨大的考驗。
工作坊的同學，大部分來自於天津大學未來技術學院和智算學部。作爲全國首批12家未來技術學院建設單位之一，天津大學未來技術學院在培養具有創新精神和創造能力的人才方面卓有成效，二年級以上學生參與競賽率超過80%，在校期間半數以上學生獲得高水平國際、國家級學科競賽獎項，學生深造率常年保持全校第一位。
- 項目示例一：《神原》
如何辯證地進行思考、如何多視角地做出判斷與決策——在一些現實場景下，用戶對於一套科學化的決策工具，有較明顯的需求。在這個項目中，團隊創造了一個自由的AI世界，AI智能體小人們在其中以對話的方式相互交流，用戶能夠以外部觀察者的身份進入這個世界，透過上帝視角，審視這個充滿辯證主義和多元主義的AI世界，在見證語言邏輯的演變和不同觀點之間衝突的過程中，汲取啓發性的思考與決策。
值得一提的是，這個AI世界的主題完全由用戶自行決定，所有對立立場的AI智能體都源於文心大模型，因此，研究人員也有望在產品的自由世界中探索大模型之間的自我對話及多重心智系統。
團隊成員陳昊昆和李登科，與Jungle老師一起，不斷進行創意碰撞和方案迭代，最終確定了這一充滿挑戰性的主題，並在Jungle老師的引導之下，基於文心大模型LLMOps流程，結合Unity遊戲引擎，實現了這款《神原》的開放世界的V1.0版本，在這個世界中，用戶可以自由移動並通過行爲影響不同AI Agent的對話主題與進程，並遊戲化地呈現與追蹤該邏輯演繹過程。
除了打造該獨立應用，該團隊還基於文心一言插件能力，開發了《兩小兒辯日》的配套插件，引入各類邏輯技巧和結構，使得用戶可以在對話式界面中快速進行特定辯題和對話的生成。
未來，百度將繼續對該項目進行孵化，進一步延展項目的場景空間、端側類型和生態影響，讓該項目成爲探索大語言模型多重心智、觀點博弈和邏輯演繹的人人可參與的開放世界。
- 項目示例二：蜘蛛人生
如何讓電影與粉絲羣體，產生更強烈的心智關聯？在該項目中，電影運營方可以基於產品功能和角色分析體系，生成完整的觀衆調研問卷與評測能力，使得觀衆能夠在Web⽹⻚上，只需回答一系列簡單的問題，就能獲得AI自動分析得到的電影⻆⾊卡，即“我是電影中的誰”——以性格爲橋樑，連接電影角色與用戶心智，探索AI生成-分析-再生成的“AI原生”邏輯。
團隊成員何洋、唐千驊和黃純竹，正是基於市場營銷需求洞察、心理學和大模型的AIGC和分析能力，以《蜘蛛俠》這部電影爲例，建立了觀衆與蜘蛛俠之間的角色關聯體系。
通過對文心一言Prompt的設計與Streamlit Web開發工具，團隊開發了一個初版Web平臺，對上述用戶旅程圖進行了產品化實現。
除了該產品，團隊還打造了一個“人生模擬器”的一言插件，能夠輔助劇作家開展情節輔助設計。
未來，該產品也將在工作坊以外繼續完善，不斷提升該產品在場景下的通用化和一站式解決能力，並結合用戶的數據反饋，不斷迭代性格問卷的生成效果和分析能力。
在本次校企融合的實訓工作坊中，同學們與Jungle老師一起，開展了大模型技術及其應用開發探索，邁出了大模型應用開發的第一步。當前，大模型正在驅動一大批成熟應用的智能化升級與新AI原生應用的湧現，在這個創新浪潮之中，我們相信，來自高校的年輕力量，將大有可爲。