官方网站-首页
【导语】2023年，边缘计算领域迎来新变革，大模型的开源化为规模化应用提供了重要支撑。视觉物联在《2025边缘计算市场调研报告》中发现，大模型一体机成为热门产品，但边缘设备算力等限制使得纯大模型部署面临挑战。业内共识是大小模型结合，以实现成本与效率的平衡。本次调研将深入探讨边缘计算的技术发展与落地应用，为企业战略决策提供参考。欢迎相关企业报名参加，共同探索边缘计算的未来趋势。
如果说今年边缘计算有什么新变化，那无疑是大模型的开源化，为规模化落地提供重要支撑。
视觉物联在《2025边缘计算市场调研报告》的(de)企(qǐ)业(yè)走(zǒu)访中发现，大模型一体机成为了今年炙手可热的明星产品，各大企业纷纷推出用于本地端的大模型一体机。
凭借强大的泛化能力与语义理解优势，大模型在众多领域展现出独特价值。例如在安防行业，它能够精准理解“可疑人员徘徊”等复杂语义，无需依赖大量人工标注样本。
然而，边缘设备自身存在的算力、存储及实时性等方面的限制，使得纯大模型部署困难重重，面临着算力成本高昂、实时性欠佳以及数据适配性差三大严峻挑战。
例如，一个7b参数的大模型在边缘端运行时，处理单路视频就需要数秒时间，难以满足多路并发处理的需求；在工业质检等对响应速度要求极高的场景中，大模型每秒仅能处理1帧的速度，远远无法达到毫秒级响应的标准；此外，边缘场景数据呈现碎(suì)片(piàn)化(huà)特点，通用大模型的准确度仅为75%，需针对性优化。
小模型则凭借“小而精”的特性，在边缘端占据着传统优势，其训练数据量需求少、推理速度快（可达毫秒级）、硬件兼容性强。
但小模型也存在明显的短板，其语义理解能力相对薄弱，面对未训练过的复杂场景，如“识别戴安全帽且携带工具的工人”时往往束手无策；而且不同行业需求差异巨大，针对不同场景开发小模型需要重复投入，开发成本高达数十万级门槛。
业内的普遍共识是大小模型结合，小模型用于前置过滤，大模型进行深度理解，二者相辅相成，实现成本与效率的平衡。
例如，小模型先对视频流进行初筛，过滤99%的常规画面，大模型则补充小模型算法精度问题。以烟火检测为例，大模型可以将误报从15次降至1次，将95%的误报过滤掉。
对于无历史数据的新场景，如宠物行为识别，大模型可基于少量样本快速生成1.0版本算法，再通过小模型持续数据投喂提升精度，形成“0到1快速验证+1到100持(chí)续(xù)迭(dié)代(dài)”的(de)闭(bì)环(huán)。
与(yǔ)过(guò)去(qù)传(chuán)统(tǒng)方(fāng)案(àn)动(dòng)辄(zhé)50万(wàn)开(kāi)发(fā)费(fèi)及(jí)大(dà)量(liàng)标(biāo)注(zhù)数(shù)据(jù)的(de)投(tóu)入(rù)相(xiāng)比(bǐ)，大(dà)小(xiǎo)模(mó)型(xíng)结(jié)合(hé)后(hòu)，5万(wàn)元(yuán)即(jí)可启动项目，极大地降低了开发门槛；同时，小模型运行于低功耗边缘盒子，大模型部署于算力稍强的边缘服务器，避免“杀鸡用牛刀”的资源浪费。
以智慧交通应用场景为例，小模型实时抓拍车牌、车型，大模型分析“多车连续变道”、“行人横穿马路”等复杂事件，为交通调度提供决策支持。
但不容忽视的是，目前国产化芯片还无法支持大模型运行，企业需通过模型轻量化（如量化、剪枝）与异构计算（CPU+NPU协同）缓解；在实际应用中，大部分企(qǐ)业(yè)仍(réng)不(bù)得(de)不(bù)选(xuǎn)择(zé)英(yīng)伟(wěi)达(dá)芯(xīn)片(piàn)。
小(xiǎo)结(jié)
边(biān)缘(yuán)计(jì)算(suàn)的(de)智(zhì)能(néng)化(huà)变(biàn)革(gé)，绝(jué)非(fēi)大(dà)模(mó)型(xíng)对(duì)小(xiǎo)模(mó)型(xíng)的(de)替(tì)代(dài)，而(ér)是(shì)二(èr)者(zhě)在(zài)算(suàn)力(lì)、成(chéng)本(běn)、精(jīng)度(dù)间(jiān)寻(xún)找(zhǎo)最(zuì)优(yōu)解(jiě)的(de)过(guò)程(chéng)。对(duì)于(yú)企(qǐ)业(yè)而(ér)言(yán)，需(xū)以(yǐ)场(chǎng)景(jǐng)需(xū)求(qiú)为(wèi)导(dǎo)向(xiàng)，若(ruò)追(zhuī)求(qiú)极(jí)致(zhì)实(shí)时(shí)性(xìng)与(yǔ)成(chéng)本(běn)控(kòng)制(zhì)，小(xiǎo)模(mó)型(xíng)仍(réng)是(shì)首(shǒu)选(xuǎn)；若面临复杂语义理解与创新场景开拓，大模型则是破局关键。
视觉物联联合AIoT星图研究院已经启动《2025边缘计算市场调研报告》，将从技术发展与落地应用等方面展开深度调研，揭示行业基本面，洞察竞争格局，为企业战略制定、投资决策、市场拓展等提供结构化的参考依据。
我们拟将调研更多深耕边缘计算领域发展方向的企业，并(bìng)从(cóng)中(zhōng)总(zǒng)结(jié)行(xíng)业(yè)发(fā)展(zhǎn)现(xiàn)状(zhuàng)以(yǐ)及未来发展趋势，供其他企业参考，欢迎企业踊跃报名参加。
