這個春節(jié)，科技界熱鬧非凡，DeepSeek的橫空出世猶如一顆重磅炸彈，迅速引爆全球AI市場。

DeepSeek憑借其V3和新推出的R1兩款模型，實現(xiàn)了與OpenAI 4o和o1比肩的性能，同時成本僅為十分之一，為AI技術(shù)的普及提供了經(jīng)濟高效的解決方案。DeepSeek的崛起，不僅標志著中國AI技術(shù)的突破，更預(yù)示著全球AI市場將迎來一場新革命。

將其部署在望獲實時Linux與瑞芯微RK3588平臺上，能夠充分釋放其在邊緣計算和工業(yè)控制領(lǐng)域的巨大潛力，為智能化轉(zhuǎn)型提供強有力的技術(shù)支撐。

以下是詳細的部署步驟，幫助您快速實現(xiàn)這一國產(chǎn)技術(shù)組合的落地應(yīng)用。

硬件準備：

RK3588開發(fā)板：京博航友善NanoPC-T6（預(yù)裝望獲實時Linux）

工作主機：ubuntu筆記本電腦

軟件準備：

瑞芯微rkllm-toolkit工具

部署步驟

一、拉取模型

從Hugging Face拉取DeepSeek-R1的1.5B蒸餾模型到x86平臺：

二、配置模型轉(zhuǎn)換腳本

在rknn-llm/rkllm-toolkit/examples/test.py中，修改如下內(nèi)容：

三、模型轉(zhuǎn)換

執(zhí)行模型轉(zhuǎn)換腳本，等待轉(zhuǎn)換完成：

四、部署模型

使用scp命令將轉(zhuǎn)換得到的DeepSeek-R1-Distill-Qwen-1.5B.rkllm文件拷貝到RK3588平臺：

五、生成運行文件

在RK3588平臺，進入rknn-llm/rkllm-runtime/examples/rkllm_api_demo目錄，生成llm_demo運行文件：

六、運行模型

運行l(wèi)lm_demo，并指定DeepSeek-R1-Distill-Qwen-1.5B.rkllm的路徑。

七、對話測試

在user : 后輸入對話內(nèi)容，測試模型的運行效果。

通過將DeepSeek部署在望獲實時Linux與RK3588的平臺上，您可以輕松實現(xiàn)邊緣智能的高效落地。這一技術(shù)組合提升了工業(yè)控制與邊緣計算的智能化水平，為未來的工業(yè)應(yīng)用開辟了新的可能性。如果您在部署過程中遇到任何問題，歡迎隨時與我們聯(lián)系！

關(guān)于望獲實時Linux系統(tǒng)

望獲實時Linux系統(tǒng)是國科環(huán)宇重點研發(fā)的嵌入式實時操作系統(tǒng)，具備強實時、高可靠、功能安全、智能化、兼容性強和國產(chǎn)生態(tài)的特性。不同于傳統(tǒng)的微內(nèi)核實時操作系統(tǒng)，完整兼容Linux生態(tài)環(huán)境的同時，提供強大的行業(yè)中間件支持，助力客戶快速完成行業(yè)解決方案的構(gòu)建。望獲實時Linux系統(tǒng)致力于國產(chǎn)基礎(chǔ)軟硬件的產(chǎn)業(yè)鏈構(gòu)建，與國產(chǎn)主流芯片及硬件平臺適配，提供完整的國產(chǎn)化解決方案，保證功能和性能的同時，避免關(guān)鍵領(lǐng)域的卡脖子問題。

審核編輯 黃宇