中华网数码

设为书签Ctrl+D将本页面保存为书签,全面了解最新资讯,方便快捷。
业 界/ 互联网/ 行 业/ 通 信/ 数 码/ 手 机/ 平 板/ 笔记本/ 相 机
当前位置:滚动新闻>

德承工控机GP-3100与DeepSeek:在Windows系统下实现高效边缘运算AI部署

德承工控机GP-3100与DeepSeek:在Windows系统下实现高效边缘运算AI部署
2025-02-12 12:19:44 来源:今日热点网

2025年春节前夕,中国人工智能企业深度求索(DeepSeek)发布其开源AI模型DeepSeek-R1,性能对标OpenAI开发的GPT-o1正式版,一时之间各类相关的话题引爆国内外。除了可以在手机上安装APP或在其官网线上体验之外,由于其模型开源,近期也有许多家科技巨头陆续宣布接入DeepSeek,多款第三方的应用也如雨后春笋般涌现。

当然,我们也可以在工控机上进行私有化部署,推进边缘运算的AI应用,所有数据都保存在本地,隐私更安全,也可避免由于官网访问量大造成的卡顿及延迟问题,响应速度更快。紧接着让我们来看看如何在本地进行部署吧!

GP-3100私有化部署DeepSeek-R1 AI模型教程‌

一、硬件配置

德承工控机型号:GP-3100

CPU:Intel® Core® i7-14700

GPU:NVIDIA® GeForce RTX 4090

内存:DDR5 5600 MHz 64GB

存储:SSD 2TB

系统:Windows 10

二、安装Ollama

Ollama是一款可在本地电脑部署大模型(LLM)的开源工具,支持多种LLM,并提供跨平台支持,可通过命令行或API来运行模型,可用于文本生成、问答系统和代码生成等多个应用场景。

访问Ollama的官网:https://ollama.com/download

下载适配系统的软件,本篇以Windows 10系统为例,或可直接复制链接下载:

https://github.xzc888.top/ollama/ollama/releases/latest/download/OllamaSetup.exe

2. 运行下载的档案OllamaSetup.exe,点击Install进行安装

3. 安装好之后,按Win+R键,输入cmd,打开Windows系统的命令提示符

4. 输入命令可查看是否已安装完成,安装完成会显示版本号

ollama --version

三、安装DeepSeek-R1

安装好Ollama之后,接着部署AI模型

可参考Ollama 提供的模型下载地址:https://ollama.com/library/deepseek-r1

版本配置需求:

我们可以看到DeepSeek-R1提供很多个版本,版本越高配置需求也越高,可依照实际应用的情况来选择对应的版本,整理配置需求如下表供参考

2. 本篇以安装1.5B版本为例,按Win+R键,输入cmd,打开Windows系统的命令提示符,

输入命令安装

ollama run deepseek-r1:1.5b

如要安装7B版本,则命令最后的1.5b改为对应版本7b即可,其他版本以此类推

ollama run deepseek-r1:7b

3. 接着会自动进行下载,1.5B版本的模型容量1.1GB,下载时间较久需耐心等待

4. 下载完成后,提示success,此时已经可以在此界面直接进行操作

四、安装UI可视化界面

由于在命令提示符里面使用DeepSeek-R1还是不够直观,我们可以安装UI可视化界面,在此采用的是Chatbox软件

访问Chatbox官网:https://chatboxai.app/zh

下载适配系统的软件

运行下载的档案Chatbox-1.9.8-Setup.exe,进行安装

选择安装档案存放位置

安装完成

运行Chatbox,选择:使用自己的API Key或本地模型

选择:Ollama API

选择模型:deepseek-r1:1.5b,点击保存

完成部署,现在可以在本地使用可视化的DeepSeek-R1了,问问TA~你是谁

五、结语

通过以上的教程,我们在德承工控机GP-3100上完成了DeepSeek-R1 AI模型的私有化部署,机器搭载的RTX 4090显存24G,可安装到DeepSeek-R1-14B这个版本,如果需要安装更高阶的DeepSeek-R1,则需要更高的显卡配置,GP-3100可搭载2张高性能显卡,充分凸显了GPU运算电脑的优势,为AI应用提供了更多的可能性。

关于德承

强固型嵌入式电脑品牌 – Cincoze德承,致力提供多元且贴近市场需求的嵌入式电脑解决方案。旗下产品线包括强固型嵌入式电脑、工业平板电脑、工业显示器及强固型GPU电脑,能快速满足垂直市场的应用需求,尤其以工厂自动化、机械自动化、机器视觉、AIoT、机器人、无人车、自驾车、智能交通、智能仓储物流为最。多年来推出多款创新性的产品,荣获多项专利、奖项与国际认证的肯定。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

责任编辑:kj005

文章投诉热线:157 3889 8464  投诉邮箱:7983347 16@qq.com
关键词:

力量与速度的完美诠释:雷克沙THOR OC DRR5 6000内存条

2024-10-17 16:59:25力量与速度的完美诠释:雷克沙THOR OC DRR5 6000内存条

双11购物狂欢盛大开启!三款ROG键盘值得入手

2024-10-17 15:09:00双11购物狂欢盛大开启!三款ROG键盘值得入手

个保法颁布一周年:个性化广告发展需平衡隐私保护与用户体验

2022-11-14 11:53:20个保法颁布一周年:个性化广告发展需平衡隐私保护与用户体验

2022年全球折叠手机总销量将首度超过千万部大关

2022-02-09 11:40:212022年全球折叠手机总销量将首度超过千万部大关

印度市场智能手机出货量出炉:vivo占比排名第三

2022-02-08 11:19:13印度市场智能手机出货量出炉:vivo占比排名第三

平板电脑进入新的竞争阶段 重新夺回市场主导权

2022-02-07 16:52:08平板电脑进入新的竞争阶段 重新夺回市场主导权

相关新闻