崗位職責:
1. AI智能體算法研發與系統設計
1)主導基于大模型的自主決策、環境交互、多模態感知、長期記憶、工具調用(Function Calling)與持續學習等核心模塊研發,構建可進化的智能體系統。
2) 使用 Dify / LangGraph / LangChain / AutoGen 等框架搭建高可用AI Agent工作流,支持多智能體協作(Multi-Agent Collaboration)與動態任務調度。
3) 研發多模態智能體(文本+圖像+語音+視頻),實現跨模態對齊(如CLIP-style embedding)與聯合生成(如LLaVA、Flamingo等架構)。 優化工具調用(API/函數調用)機制,支持復雜任務自動化(如數據分析+報告生成+可視化)。
2. 知識庫與智能體增強系統
1) 構建行業級多模態知識庫,融合稠密檢索(DPR)+ 知識圖譜 + 語義路由技術,支持復雜QA任務。
2) 開發自定義RAG系統,優化文檔/表格/公式/視頻幀的聯合檢索與推理能力。
3) 設計記憶管理模塊(如向量數據庫+時序數據庫混合存儲),實現長期上下文保持與動態更新。
3. 大模型訓練與優化
1) 基于LLaMA、CLIP、Whisper等架構,實施多模態聯合訓練與領域適配。
2) 使用PyTorch/TensorFlow/JAX框架,結合Megatron-LM/DeepSpeed進行千億參數模型分布式訓練。
3) 通過LoRA/P-Tuning等高效微調技術,適配垂直場景需求。
4. 工程化落地與性能優化
1) 使用FastAPI/Flask構建低延遲API服務(P99延遲<200ms),支持流式響應與異步任務。
2) 部署推理加速方案(vLLM/TensorRT-LLM),優化GPU資源利用率。
3) 構建多模態數據處理Pipeline(OpenCV/FFmpeg/Librosa),實現跨模態特征對齊。
崗位要求:
1. 熟悉大模型架構和算法,具備自主決策、環境交互、多模態感知等研發經驗。
2. 熟練使用Dify / LangGraph / LangChain / AutoGen 等框架。
3. 具備多模態智能體研發經驗,掌握跨模態對齊和聯合生成技術。
4. 熟悉工具調用機制,有復雜任務自動化經驗。
5. 精通知識庫構建和增強系統開發。
6. 熟練使用PyTorch/TensorFlow/JAX等框架進行模型訓練。
7. 掌握Megatron-LM/DeepSpeed等分布式訓練技術。
8. 熟悉LoRA/P-Tuning等微調技術。
9. 有FastAPI/Flask等后端框架開發經驗。
10. 熟悉推理加速方案和GPU資源優化。
11. 具備多模態數據處理Pipeline構建經驗。