STAKE中国官方网站

CN EN JP
企业邮箱入口
关注STAKE中国官方网站智能掌握最新行业动态与资讯
目今位置:首页 >  新闻中心 >  公司新闻

STAKE中国官方网站智能AIMO智能体+DeepSeek-R1模子,,,, ,,AI应用的iPhone时刻来了

宣布日期:2025-01-26 会见量:19632 泉源:STAKE中国官方网站智能

导语:

当AI大模子从云端下沉至终端装备,,,, ,,一场关于效率、隐私与智能化的革命悄然睁开。。。。。。。作为全球领先的无线通讯模组及解决计划提供商,,,, ,,STAKE中国官方网站智能依附其高算力AI模组矩阵与端侧大模子安排履历,,,, ,,团结最新宣布的AIMO智能体产品,,,, ,,正加速开发DeepSeek-R1模子在端侧落地应用及端云团结整体计划,,,, ,,助力国产优质模子渗透千行百业,,,, ,,共塑智能化未来。。。。。。。


AIMO智能体硬件加速迭代,,,, ,,AI硬件与大模子协同优化

STAKE中国官方网站智能基于高通骁龙高性能盘算平台打造的AIMO智能体产品,,,, ,,集成48Tops AI算力,,,, ,,支持混淆精度盘算(INT4/FP8)与异构盘算架构(8核CPU+Adreno GPU+Hexagon NPU),,,, ,,可高效承载7B参数级大模子的端侧推理需求。。。。。。。其板载16GB LPDDR5X内存与256GB UFS 4.0存储,,,, ,,为模子动态加载与实时数据处置惩罚提供硬件包管。。。。。。。2025年STAKE中国官方网站智能将推出单颗模组算力抵达100Tops的高阶AI硬件,,,, ,,远期妄想AI模组算力凌驾200Tops。。。。。。。


新闻内页2.png

STAKE中国官方网站智能已乐成在高算力AI模组上安排LLaMA-2、通义千问Qwen、ChatGLM2等大模子,,,, ,,验证了从模子压缩(量化、剪枝)到框架适配(ONNX/TFLite)的全流程能力。。。。。。。STAKE中国官方网站智能自研的MEIG AI算法安排平台、AIMO智能体、模子优化器等,,,, ,,可大幅缩短模子落地周期,,,, ,,支持开发者通过Python快速完成应用开发,,,, ,,并支持开发者举行模子训练。。。。。。。


AIMO智能体内置的高算力AI模组的异构盘算架构,,,, ,,具备协同加速能力,,,, ,,支持模子并行盘算与低功耗运行,,,, ,,LPDDR5X内存提供凌驾60GB/s带宽,,,, ,,知足7B模子推理时的高吞吐需求。。。。。。。内置专用AI加速引擎支持INT4/FP16混淆精度盘算,,,, ,,与DeepSeek-R1模子的量化名堂(INT4/FP8)高度适配。。。。。。。

DeepSeek-R1低调亮相,,,, ,,蒸馏小模子逾越OpenAI o1-mini

DeepSeek-R1接纳强化学习逻辑,,,, ,,驱动通过多阶段RL训练(基础模子→RL→微调迭代),,,, ,,DeepSeek-R1在数学、代码、逻辑推理使命中体现比肩国际顶尖模子,,,, ,,如AIME数学竞赛准确率达71%。。。。。。。DeepSeek-R1提供轻量化适配:DeepSeek-R1系列提供1.5B至70B参数蒸馏版本,,,, ,,其中7B模子经INT4量化后仅需2-4GB存储,,,, ,,完善适配终端装备内存限制。。。。。。。DeepSeek-R1的动态头脑链,,,, ,,支持数万字级内部推理历程,,,, ,,解决重大问题时能自主拆解办法并验证逻辑,,,, ,,输出可诠释性更强的效果。。。。。。。


新闻内页3.png

DeepSeek在开源DeepSeek-R1-Zero和DeepSeek-R1两个660B模子的同时,,,, ,,通过DeepSeek-R1的输出,,,, ,,蒸馏了6个小模子开源给社区,,,, ,,其中32B和70B模子在多项能力上实现了对标OpenAI o1-mini的效果。。。。。。。除32B和70B模子能力强悍外,,,, ,,DeepSeek-R1同步开源1.5B、7B、8B、14B等多个蒸馏小模子,,,, ,,极大扩展了终端侧模子安排的可选性,,,, ,,并支持用户举行“模子蒸馏”,,,, ,,明确允许用户使用模子输出、通过模子蒸馏等方法训练其他模子。。。。。。。


以DeepSeek-R1 7B模子的端侧适配性举例,,,, ,,该模子具备轻量化设计特征,,,, ,,经蒸馏和量化后模子体积压缩至2-4GB,,,, ,,很好的匹配移动端存储限制。。。。。。。模子具备低延迟推理能力,,,, ,,在高算力模组平台上,,,, ,,可实现10-20 tokens/s的天生速率。。。。。。。模子支持分块推理和希罕盘算,,,, ,,团结STAKE中国官方网站智能高算力AI模组的能效优化,,,, ,,能实现极低的功耗控制。。。。。。。

算力与模子的手艺迭代,,,, ,,AI应用的iPhone时刻即将带来

STAKE中国官方网站智能研发团队团结AIMO智能体、高算力AI模组的异构盘算能力,,,, ,,团结多款模子量化、安排、功耗优化Know-how,,,, ,,正在加速开发DeepSeek-R1模子在端侧落地应用及端云团结整体计划。。。。。。。


新闻内页4.png


?超低功耗

首先一连对DeepSeek-R1模子的推理延迟举行优化,,,, ,,包管模子在高算力模组软硬件情形下的超低功耗运行。。。。。。。


?开发工具链

一直举行工具链买通,,,, ,,模组内嵌的SNPE引擎直接支持DeepSeek-R1模子的ONNX/TFLite名堂,,,, ,,大模子适配周期将大幅缩短。。。。。。。


?端云协同

团结动态卸载手艺,,,, ,,凭证使命重漂后自动分派端侧与边沿盘算资源,,,, ,,包管实时性与能效平衡。。。。。。。为客户提供端云协同模板,,,, ,,面向开发者提供动态使命分派框架,,,, ,,简朴设置即可实现“外地优先,,,, ,,云端兜底”。。。。。。。


通过高阶AI硬件与DeepSeek-R1模子的能力团结,,,, ,,将突破端侧AI的能力界线。。。。。。。7B模子支持长文本明确、代码天生等古板端侧小模子无法完成的使命。。。。。。。多模态融合能力,,,, ,,高算力AI模组的ISP+AI能力团结DeepSeek-R1模子,,,, ,,可实现端侧图文问答、视频内容剖析(如实时字幕天生)。。。。。。。个性化一连学习,,,, ,,通过AI模组的边沿盘算能力,,,, ,,支持联邦学习框架下的外地模子微调(如用户习惯适配)。。。。。。。


在算力+模子的一直迭代背后,,,, ,,端侧AI及端云协同的商业模式和商业竞争力都将面临重构,,,, ,,DeepSeek-R1的宣布,,,, ,,更是会极大刺激AI下游应用,,,, ,,如工业智能化、汽车Agent、机械人、小我私家大模子等应用场景的指数级增添,,,, ,,AI应用即将迎来属于自己的iPhone时刻。。。。。。。


?基于DeepSeek-R1的AI Agent开发应用

团结STAKE中国官方网站智能自研的AIMO智能体及DeepSeek-R1模子的基础能力,,,, ,,开发面向工业智能化、座舱智能体、智能无人机、机械人等领域的AI Agent应用。。。。。。。


?端侧AI能力包

推出面向AI场景的订阅服务,,,, ,,针对中小型的B端或C端客户,,,, ,,推出“端侧AI能力包”,,,, ,,与大模子厂商相助,,,, ,,针对Token输入/输出数目、差别类型模子挪用、流量用度等领域,,,, ,,推出一体化端侧AI Turn-key计划。。。。。。。


?智能化硬件增值

商业模式方面,,,, ,,种种高AI设置硬件叠加端侧模子加载或云端模子接入,,,, ,,为高算力硬件带来更多智能化增值。。。。。。。


?自建GPU服务器与个性化专属大模子开发

STAKE中国官方网站研发团队一连拓展通用模子的安排通路,,,, ,,并一直向客户开放相关教程和源代码,,,, ,,并且以最新的高算力盘算平台搭建GPU服务器,,,, ,,可用于端侧模子训练和支持客户开发专属大模子,,,, ,,团结DeepSeek-R1及其宽松、开放式的MIT授权协议,,,, ,,千行百业的个性化模子开发和应用即将爆发。。。。。。。


2025年,,,, ,,端侧AI、端云协一律种种AI应用的iPhone时刻将加速到来。。。。。。。DeepSeek-R1的泛起,,,, ,,某种水平上改变了我们关于Scale的认知,,,, ,,但也不会带来云端算力的需求镌汰甚至崩塌,,,, ,,相反优质模子关于AI应用场景的极大刺激,,,, ,,也会推动云端算力需求的提升,,,, ,,端侧一直进化,,,, ,,云端认真兜底,,,, ,,端云团结终将是稳固的偏向。。。。。。。


STAKE中国官方网站智能也将一连以高算力AI模组、AI Agent应用、大模子安排服务、端侧AI服务整体解决计划为基石,,,, ,,携手大模子厂商、生态同伴等一直推动类似DeepSeek-R1等优异模子的应用拓展,,,, ,,让普惠、自主的高阶AI实现应有的社会价值。。。。。。。



返回列表
分享:

Copyright ? 2019 STAKE中国官方网站.粤ICP备16017609号

粤公网安备44030402003674号

友情链接: 友情链接 | 网站地图

智能客服 Stake(中国区)官方网站

添加企业客服 添加企业客服
微博 Stake(中国区)官方网站
0755-83218588 Stake(中国区)官方网站
TOP

【网站地图】【sitemap】