AI大模型端侧部署正当时:移远端侧AI大模型解决方案,激活场景智能新范式

2025-04-26 03:48:52 围观 : 280 次 0 评论
图片
在AI技术飞速发展的当下,AI大模型的应用正从云端向端侧加速渗透。


作为全球领先的物联网整体解决方案供应商,移远通信凭借深厚的技术积累与前瞻性的战略布局,在AI大模型端侧部署的赛道上率先发力,其端侧AI大模型解决方案备受瞩目,为AI设备的革新注入了澎湃动力。




万亿级市场蓝海显现,端侧AI大模型加速落地


近年来,端侧AI市场呈现出惊人的增长态势。据头豹研究院发布的《2024 年中国端侧 AI 场景应用分析:智能终端与边缘计算的融合创新》报告预测,2023年中国端侧 AI 市场规模达1,939亿元,预计2028年将增至19,071亿元,年均复合增长率高达58%。


从千亿级迈向万亿级,这一数据背后,是端侧设备对智能化、实时性需求的爆发式增长。然而,端侧AI的崛起并非偶然。通过将AI大模型部署在端侧,不仅解决了云端部署在网络延迟、隐私安全、算力成本等方面的问题,更释放了设备端的算力潜力,为AI应用的深度拓展提供了可能。


在应用方面,端侧AI大模型的落地速度远超预期。在CES 2025上,AI PC、AI手机、AI眼镜、AI智能家电等一系列具备AI能力的终端设备纷纷亮相,充分展示了端侧AI的无限可能。 



三大核心驱动力, 端侧AI部署正当时


当前,端侧AI的部署正以前所未有的速度推进。这背后离不开以下三大核心驱动力的支撑。



端侧AI算力的提升。面向端侧AI应用,移远通信打造了丰富的AI算力模组,其中,SG885G基于高通QCS8550平台开发,AI综合算力高达48 TOPS,能够轻松满足复杂模型本地化推理的算力需求。


AI模型小型化发展。DeepSeek的出现,以及量化和蒸馏技术的应用,推动了AI模型的小型化发展。现阶段,3B或4B参数级别的AI模型已等效于之前的7B参数AI模型,这使得小算力芯片、小容量存储以及小BOM设计就能实现高性能的端侧AI方案。


客户需求的拉动。AI大模型的端侧部署方式具备诸多优势,不仅确保了终端设备的实时响应和隐私安全,还能在无网环境下保持稳定运行,同时显著降低推理成本,这极大地激发了客户在端侧部署AI的积极性。



移远端侧大模型解决方案:技术三角重构智能逻辑


在AI大模型领域,移远通信率先布局,于2024年8月份便推出了AI大模型解决方案,为AI大模型技术在端侧的落地做好了充分准备。


移远通信端侧AI大模型解决方案以“LLM(大语言模型)+ RAG(检索增强生成)+ Agent(智能体)”技术三角为核心,通过对AI模型的深度优化与增强,重新定义了 AI 端侧设备的智能化逻辑。



该方案基于移远高算力AI模组SG885G-WF,其48 TOPS的AI综合算力可为方案功能的实现提供充足的算力支持。同时,方案在全语音链路上实现了无缝衔接与高效运行,从KWS语音唤醒到VAD人声检测,再到ASR语音识别,最后通过TTS语音播报,能够为用户带来更自然的语音交互以及更加个性化的服务体验。


得益于移远通信全方位的工程能力,其端侧AI大模型解决方案可广泛应用于机器人、医疗诊断、教育学习机、智能座舱、智能客服、智能点单机、PDA、对讲机、陪伴玩具、智能网关、广告机等众多场景。


4.jpg


日前,移远通信联合德壹发布的AI具身理疗机器人,便是基于其端侧AI大模型解决方案打造的。该机器人在无需理疗师介入、无网络连接的环境下,能够快速且准确地理解用户指令和意图,高效完成通用聊天、医疗领域RAG问答、指令控制等任务,充分展现了移远端侧AI大模型解决方案的实用价值。


AI大模型端侧部署的时代已全面开启。接下来,移远通信将持续深化AI算力平台迭代,推出具备更高算力的AI模组,将 AI 大模型的能力拓展至更多的端侧场景,为推动端侧AI技术的发展和应用贡献更多力量。


END




往期精彩回顾


图片

▐ 座舱网联融合新旗舰!移远通信48 TOPS座舱方案携AI大模型能力,赋能多域融合



图片

▐ 移远通信×扣子:AI与硬件深度融合,加速AI智能体高效开发新生态



图片
图片
图片
图片
图片
图片
图片
图片


图片


 ↓ 点击“阅读原文”,了解移远AI模组



相关文章

  • 技术 | 当背包侠邂逅3D高斯,数字孪生迎来“瞬时”革命
    技术 | 当背包侠邂逅3D高斯,数字孪生迎来“瞬时”革命

    在数字化的浪潮中,我们渴望在数字虚拟的世界中复刻出现实的每一个细节。然而,对于仓库、地下工事、码头等结构复杂且无GNSS信号的“信息孤岛”,传统的三维重建技术往往面临效率低下、模型笨重、真实感不足的困境。其生成的数字孪生模型,常常只是空有点...

    2025-07-28 13:01:06 立得空间
  • 携手越南BW Industrial集团,共建高标准TPO屋面系统
    携手越南BW Industrial集团,共建高标准TPO屋面系统

    近年来,东方雨虹以产业基础、科创平台、资源优势及实践探索经验为支撑,积极抢抓国际发展新机遇、探索全球发展新路径、加速全球化布局,陆续在美国、加拿大、马来西亚、越南、菲律宾等多国开设海外分公司及办事处,为夯实海外发展基础、拓展海外发展空间奠定...

    2025-07-28 11:09:19 东方雨虹
  • SNEC2025开展首日| 利珀科技在2.1H-D110展位等你
    SNEC2025开展首日| 利珀科技在2.1H-D110展位等你

    6月11日,SNEC第十八届国际太阳能光伏与智慧能源(上海)大会暨展览会在上海盛大开幕,利珀科技携光伏电池端通用解决方案,BC电池与组件端视觉解决方案亮相。利珀展位 2.1H-D110 leapers合影展会现场,利珀科技的技术团...

    2025-07-27 21:02:52 新能源杭州利珀科技
  • 用友BIP:打造企业数智化的战略级“操作系统”
    用友BIP:打造企业数智化的战略级“操作系统”

    来源:新华网客户端yonyou在新一代信息技术持续突破、人工智能加速应用落地、产业体系深度重构的时代背景下,软件已从传统的“辅助工具”跃升为“新型生产力”。国家持续推进《“十四五”数字经济发展规划》《数字中国建设整体布局规划》等顶层设计落地...

    2025-07-23 10:31:02 用友
  • 捷昌驱动:以科技重构适老化生活,赋能银发经济新未来
    捷昌驱动:以科技重构适老化生活,赋能银发经济新未来

    在人口老龄化趋势加速的当下,如何让老年群体享有更有尊严、更具品质的生活,已成为社会发展的重要命题。2025年6月11日至13日,上海国际养老、辅具及康复医疗博览会(AID)上,线性驱动领域领军企业捷昌驱动(展位号:W5F32)以"从零部件供...

    2025-07-22 22:16:10 捷昌驱动
  • 数智服务·智慧运营——用友四川用户企业报表赋能培训圆满结束!
    数智服务·智慧运营——用友四川用户企业报表赋能培训圆满结束!

    yonyou为助力客户企业加速财务数字化转型,深化数智应用能力,用友网络科技股份有限公司四川分公司于6月13日在蓉成功举办“数智服务·智慧运营——四川用户系统操作与价值提升培训会”。本次培训聚焦企业报表核心场景,通过系统化赋能,助力客户高效...

    2025-07-22 11:48:19 软件用友四川
  • 正式介绍美团闪购,欢迎10亿消费者来购物!
    正式介绍美团闪购,欢迎10亿消费者来购物!

    正式向大家介绍新一代购物平台——美团闪购!我们把“等快递”升级为“30分钟送达”海量商品,吃的用的,应有尽有24小时随时随地陪伴大家更有每日神价,就是便宜就是快为大家打造下一代购物体验诚邀全国10亿消费者,随时来美团闪购逛逛我们特地准备了开...

    2025-07-20 18:16:00 美团Meituan
  • 数智焕新进行时,用友BIP助力企业跨越周期、迈向高质量发展
    数智焕新进行时,用友BIP助力企业跨越周期、迈向高质量发展

    用友BIP全球经济波动加剧、技术迭代加速,当关税战如迷雾般笼罩全球贸易航道、AI 大模型开始重塑整个行业生态,全球范围内的企业都面临着关税壁垒、政策合规、AI技术落地难以及全球化运营复杂性等多重挑战。加速推进数智化转型成为企业突破困境、实现...

    2025-07-19 15:46:37 用友
  • 国际权威认证!凌云光通过CMMI四级评估
    国际权威认证!凌云光通过CMMI四级评估

    近期,凌云光成功通过国际公认最权威的软件研发管理体系认证——CMMI(软件能力成熟度模型集成)DEV四级评估,这标志着公司在软件研发过程管理能力、项目交付质量等方面持续进阶,目前已具备高成熟度的量化管理能力,将为客户提供更高确定性的交付保障...

    2025-07-19 07:17:55 软件凌云光技术
  • 北京市科委报道双鹤创新平台:AI驱动药物研发全链条  塑造医药创新“国家队”新范式
    北京市科委报道双鹤创新平台:AI驱动药物研发全链条 塑造医药创新“国家队”新范式

          在创新药物研发领域,面对漫长的周期、高昂的成本以及巨大的风险,北京双鹤润创科技有限公司(以下简称“双鹤润创”),作为华润双鹤旗下的科技创新平台,提出了一种创新的解决方案。该平台以“人工智能...

    2025-07-18 21:33:57 药品华润双鹤药业
发表评论