在全球人工智能技術(shù)飛速發(fā)展的今天，模型的快速迭代與高效部署成為各大科技企業(yè)競相追逐的焦點。華為DCS AI全棧解決方案中的重要產(chǎn)品—ModelEngine AI平臺，全面支持DeepSeek大模型R1&V3和蒸餾系列模型的本地部署與優(yōu)化，加速客戶AI應用快速落地。

ModelEngine作為大模型訓練、推理和應用開發(fā)的AI平臺，提供從數(shù)據(jù)預處理到模型訓練、優(yōu)化及部署的一站式服務。此次ModelEngine基于昇騰AI芯片，通過推理框架優(yōu)化和MoE存算協(xié)同，提供動態(tài)換入換出和全局統(tǒng)一緩存，實現(xiàn)推理高并發(fā)和低時延，用戶通過ModelEngine體驗DeepSeek更加快速高效的推理能力。

靈活部署：ModelEngine全面支持DeepSeek系列模型R1&V3 671B以及蒸餾系列模型，開發(fā)者可通過ModelEngine實現(xiàn)“一鍵部署”，省去硬件選型、兼容性驗證和環(huán)境配置等繁瑣步驟，大幅降低企業(yè)AI應用門檻。此外，ModelEngine通過其高度的開放性和模塊化設計，極大地縮短了DeepSeek的本地部署時間。

企業(yè)級穩(wěn)定性：ModelEngine提供負載均衡、模型安全接入、多用戶配額管理等高階特性，支持大規(guī)模生產(chǎn)環(huán)境下的穩(wěn)定運行。某證券公司引入DCS AI全棧解決方案后，運維成本降低42%。

DCS AI全棧解決方案近期將上線DeepSeek體驗環(huán)境，敬請期待。

下面以DeepSeek-R1為例，基于ModelEngine 3步快速完成部署模型

1. 登錄ModelEngine模型管理頁面，上傳DeepSeek-R1 FP8權(quán)重，然后進行模型權(quán)重格式轉(zhuǎn)換，將FP8精度模型權(quán)重轉(zhuǎn)換為BF16精度模型權(quán)重；

2. 在模型服務頁面，選擇BF16精度的模型權(quán)重版本，下發(fā)推理服務，啟動任務部署；

3. ModelEngine使用MindIE推理框架啟動DeepSeek-R1推理服務后，支持OpenAI API 調(diào)用風格的推理服務接口和訪問方式；

4. ModelEngine 啟動 DeepSeek-R1 推理服務后，平臺支持 OpenAI API 調(diào)用風格的推理服務接口和訪問方式，用戶可以將該 API 集成到對話、RAG 以及 Agent 應用。

到這里，基于ModelEngine私有化本地部署的DeepSeek-R1完整版推理服務API已經(jīng)就緒了，可以將推理服務API集成到對話應用、RAG或者Agent應用中，在保證數(shù)據(jù)安全的前提下，讓DeepSeek-R1媲美世界頭部頂流閉源大模型服務智能的能力，助力客戶AI業(yè)務升級。