智东西(公众号:zhidxcom)
作者 | 三北
编辑 | 漠影

视觉智能正为AIoT行业带来「新故事」,也对通信连接技术提出「新要求」。

当下,视频(pin)信息占据了互联网信息超82%,大模(mo)型、泛智能(neng)(neng)的(de)深(shen)化应用让视频(pin)场景变(bian)得(de)更多(duo)元复杂,AIoT产业关(guan)注(zhu)的(de)焦点(dian)也不再是为摄像机、智慧屏幕(mu)、边缘(yuan)盒子(zi)等终端(duan)和(he)边缘(yuan)设备装上「智能(neng)(neng)大脑」,而是如何让「智能(neng)(neng)大脑」发挥效果(guo)。

用于支撑智能业务的底层网络连接系统,正是迫切需要升级的一环。

大模型又改变一个行业!解构AIoT巨头大华股份研发体系,技术大进化

10月24日,2023大华股份“星河璀璨 万象新生”年度峰会在深圳圆满结束。大华股份中央研究院、未来通信研究院院长邓志吉在会上以《智融升级,视连未来》为主题发表演讲,正式宣布未来通信研究院成立,并发布「3+N」融合连接能力体系,从端、云、网、智、生态全维度布局视觉智能新时代。

邓志吉(ji)告诉智东(dong)西,在(zai)传统(tong)的视频应用中(zhong),连(lian)接只需要保证设备在(zai)线、数据可连(lian)接就行了;但(dan)现在(zai),面向(xiang)大(da)规模(mo)视觉物联的大(da)算力、大(da)模(mo)型(xing)应用,对网络(luo)、数据获取提出了更多需求,推动全(quan)连(lian)接技(ji)术实现跨代升级。

大模型时代,视觉智能对AIoT产业带来了什么新变化?面向大规模视觉物联的智能应用,又对通信技术提出哪些新需求?对此,大华股份有哪些独特洞察和深远布局?通过对(dui)话邓志吉,本文对(dui)这些问题进(jin)行(xing)了深入探(tan)讨。

一、视觉智能带来AIoT新故事,驱动未来网络发展

AIoT行业的「新故事」在于视觉智能,视觉智能的进化正驱动未来网络的发展。

邓志吉告诉智东西,大模型等新技术已经在改变AIoT行业。在一些涉及较不规则行为和事件的场(chang)(chang)景(jing)、素材缺(que)乏的识别场(chang)(chang)景(jing)、偏(pian)动态的复杂场(chang)(chang)景(jing)等,聚焦较强推(tui)理能力(li)和泛化性的大模(mo)型(xing)已经发挥很多作用。大模(mo)型(xing)会大大提(ti)高(gao)数据的价值转化率(lv),形成(cheng)一个远大于(yu)原本(ben)视频监控(kong)市场(chang)(chang)的数千亿元级别新蓝海。

回顾以(yi)前的视(shi)觉智能(neng),更多(duo)(duo)是(shi)识(shi)别(bie)性应(ying)用。早期的视(shi)觉智能(neng)难以(yi)应(ying)对各种碎片化(hua)场景,多(duo)(duo)用于替代人的一些观(guan)测性的决策,智能(neng)化(hua)程度(du)有限。进(jin)入(ru)大模型阶段,更多(duo)(duo)的能(neng)力(li)承(cheng)载(zai)不是(shi)在识(shi)别(bie),而(er)是(shi)在认(ren)知,可以(yi)用来解决很(hen)多(duo)(duo)难做的精准(zhun)判断,行业价值不言而(er)喻(yu)。

“连接能力重要性此刻已经变得更强。”邓志吉说:“机器决(jue)策的(de)(de)自(zi)主性增强(qiang),要求(qiu)数据在不同系统间动态交互的(de)(de)时效更强(qiang)、可靠性更高,它就(jiu)需要网络体(ti)系要有一个新(xin)的(de)(de)能力架构(gou)。”

具体来看,面向大规模视觉物联的智能应用,网络需求至少发生了以下三大变化:

1、满足海量和多种类数据连接需求。大规(gui)模数据量(liang)无需赘述,而(er)大量(liang)的视觉(jue)内(nei)容(rong)通过边(bian)缘端(duan)智能(neng)化识别之后,会(hui)产生很多结构(gou)化的感知数据,比如“读表(biao)场景”中(zhong)不是一(yi)个视频(pin)传(chuan)回(hui)来,而(er)是表(biao)的数值,也要(yao)基于视觉(jue)网络(luo)通路传(chuan)输,要(yao)求连接能(neng)力(li)增强。

2、需要它算得更快。因为(wei)智能化应用很(hen)难(nan)去建立完整的边缘(yuan)计(ji)算,更多(duo)(duo)还是云边端协(xie)同的分布式(shi)算力应用,就需要数(shu)据在网络中(zhong)进行多(duo)(duo)次(ci)转发。多(duo)(duo)次(ci)转发,就会导致数(shu)据延迟、丢包重传(chuan)概率增(zeng)大(da),导致数(shu)据传(chuan)输延迟变大(da)。

“你不知道给一个结果,它什(shen)么时(shi)(shi)候能(neng)算出来,有(you)可能(neng)是0.1秒,也有(you)可能(neng)是2秒。所以它的波动会导致很多应用无法保证(zheng)实时(shi)(shi)性。”邓志吉说(shuo)。

3、要用得更好。这其实是涉及到打破「数据孤岛」的问题。不同网络系统的网络协议是不同的,网络数据格式也不同,需要网络在处理数据时打通他们之间的信息解析力、互联互通性和兼容性。所以,我们需要面向大规模视觉连接的大模型应用,打造所需要的「基础承载网络」。

值得一提的是,这里提到的「基础承载网络」,与我们常见的通用ICT网络有所区别。传(chuan)(chuan)统网络系统主要(yao)的(de)(de)功能(neng)是数据传(chuan)(chuan)输(shu),对(dui)数据内容及数据应用意图(tu)的(de)(de)理解(jie)是没有的(de)(de)。所以大华股(gu)份认为(wei),其(qi)需要(yao)在(zai)ICT的(de)(de)基(ji)础设施(shi)网络之上,对(dui)专用的(de)(de)网络系统做(zuo)研(yan)究。

为此,大华股份面向大模型时代对网络的特殊要求,通过创立未来通信研究院,以及构建体系化的全连接能力底座,来支撑未来的大规模视觉下的智能化应用。

大模型又改变一个行业!解构AIoT巨头大华股份研发体系,技术大进化

▲大华股份中央研究院、未来通信研究院院长邓志(zhi)吉

二、从全连接到融合连接,「3+N」补齐视觉智能落地短板

构(gou)建未来智能网络,是推动AI发展的重大需求。

“我(wo)们要(yao)让网络(luo)理解数(shu)据,让数(shu)据跟随(sui)网络(luo)进行动态地(di)适应。”邓志吉谈及大华股份未来通信研究院的研究重点时说,“以前是适应不同的网络,现在是要跟不同的网络进行融合增强。”

适应跟融合最大的区别是什么?

邓志吉告诉智东西,流媒体过去的传输模式,对网络的适用性极差。“发一(yi)(yi)个数(shu)据,等网络(luo)确认一(yi)(yi)下(xia),你没有收到就给说(shuo)一(yi)(yi)下(xia),或者是超(chao)时了,然后(hou)就再重(zhong)发一(yi)(yi)个。”

进入AIoT时代,大华股份推出的感知系统首先能够“适应网络”,简单说,就是去根据对网络的预测来调整收发策略。比如,当发现网(wang)络的(de)带(dai)宽已经开始下降(jiang),系(xi)统就(jiu)会调(diao)整发送(song)序列及时发出;如果(guo)网(wang)络丢包(bao)率变高了,这(zhei)时就(jiu)不进行(xing)重传而是进行(xing)纠错,把它恢复。这(zhei)样(yang)就(jiu)可以让数据传递过程更具(ju)有适应能力,让数据对网(wang)络有一定的(de)抗性。

进入新的视觉智能时代,在适应网络的基础上,我们则需要进一步寻求融合连接。视(shi)觉类(lei)智(zhi)(zhi)能(neng)应用对数据传输提出了一(yi)些特殊的网络性(xing)能(neng)要求,邓志(zhi)吉告诉(su)智(zhi)(zhi)东西,大(da)华股份团队在研发过(guo)程中发现(xian),它不(bu)能(neng)按照功能(neng)性(xing)的开发来作(zuo)为能(neng)力承载,而是需要系统(tong)级(ji)的云-边-端-网”的协(xie)同能(neng)力提升,这就是融合连接。

比如大华股(gu)份重构(gou)了交换设备的(de)底层系统平(ping)台,以此支持数据在网络中做预处理(li),交换机能理(li)解传(chuan)入的(de)数据是什(shen)么并进行一些(xie)处置,就能避免数据因(yin)为网络传(chuan)递不(bu)好而(er)出现大量的(de)丢包(bao)、重传(chuan)等故障。通(tong)过这样的(de)融合连接,我们能实现传(chuan)输速(su)度和算力(li)平(ping)台压力(li)纾解。

那么如何实现从适应网络到融合增强的跨越?

大华股份推出了一个全新的「3+N」能力架构。邓志吉(ji)谈道,这是一个(ge)承载各种(zhong)网络基础设施的能力(li)底座。

这一能力底座(zuo)可以用于交换机(ji)、网(wang)关(guan)、边缘(yuan)计(ji)算甚至是摄像机(ji)产品,让这些网(wang)络基础设施就有很强的视觉适应性(xing)和智能增(zeng)强性(xing)。

具体来说,「3+N」中的「3」是指3个用于融合连接的重要技术基座:第一大技(ji)(ji)术底(di)(di)座是“多(duo)网(wang)融合,一网(wang)统(tong)管”,让复杂(za)的(de)网(wang)络更简单(dan)化的(de)管理:第二(er)个技(ji)(ji)术底(di)(di)座是打造(zao)了大华(hua)股份专(zhuan)用(yong)的(de)网(wang)络操作系(xi)统(tong);第三是构建了专(zhuan)用(yong)的(de)视网(wang)融合协议,使(shi)云边端网(wang)实现贯通互联。

「3+N」中的「N」是指N个面向视频视觉智能应用的增强特性。通过在(zai)视(shi)(shi)频(pin)领域的(de)(de)多年积累和对视(shi)(shi)频(pin)的(de)(de)深(shen)入理解,大华股份构建了N项的(de)(de)视(shi)(shi)频(pin)增(zeng)强(qiang)特性,让整个网络系统,在(zai)传递(di)视(shi)(shi)频(pin)数据的(de)(de)时候更(geng)加的(de)(de)高效。

2021年,大华股份提出了全感知、全计算、全智能、全连接、全生态“五全”能力战略定位。时隔一年,大华股份对「五全」进行了全新思考,使得“全连接”能力进一步升级为“融合连接”。

对于大(da)华(hua)股(gu)份来(lai)(lai)说(shuo),全感知(zhi)一直(zhi)都是(shi)(shi)其长(zhang)板,是(shi)(shi)立身之本。全计算和(he)全智(zhi)能,是(shi)(shi)其在发(fa)展过程中很重(zhong)要(yao)的(de)能力增强的(de)地方,是(shi)(shi)主(zhu)要(yao)投入点。全连(lian)接(jie)的(de)升级,其实是(shi)(shi)随着智(zhi)能和(he)计算的(de)发(fa)展而提出(chu)来(lai)(lai)的(de),这个就(jiu)是(shi)(shi)新的(de)要(yao)求,大(da)华(hua)股(gu)份要(yao)在它变成(cheng)短(duan)板之前就(jiu)把(ba)它补(bu)上去。

邓志吉告诉智东西,随时间变迁,大华股份始终坚持“五全”能力底座,同时具体内容填充发生了变化。“五个碗,以前我装的是米,现在装的是肉,以前是求饱,现在要吃的好。”「五全」的升级是木桶的短板和长板两个效应的并发。

三、布局未来通信:业随网动,网随业优

大华股份未来通信研究院积极布局“融合连接”,是要用最懂视频的网络,让数据连得更多、算得更快、用得更好。

按照大华股份的布局,融合连接主要在以下三个层次进行融合:

1、业网融合。要(yao)让(rang)网络理解(jie)当(dang)(dang)前的(de)业(ye)(ye)务(wu)意图(tu)。比如当(dang)(dang)前的(de)业(ye)(ye)务(wu)意图(tu)是决(jue)策(ce)性(xing)业(ye)(ye)务(wu),要(yao)时(shi)效(xiao)性(xing),网络传递数(shu)据(ju)(ju)的(de)时(shi)候要(yao)进行优(you)先(xian)级的(de)调度,保(bao)证决(jue)策(ce)数(shu)据(ju)(ju)的(de)优(you)先(xian)传输。业(ye)(ye)务(wu)要(yao)实时(shi)根(gen)据(ju)(ju)网络的(de)动(dong)态性(xing)调整数(shu)据(ju)(ju)传递的(de)一种(zhong)策(ce)略,从而保(bao)证在(zai)动(dong)态网络当(dang)(dang)中(zhong)有确定性(xing)的(de)业(ye)(ye)务(wu)延(yan)迟,做到「业(ye)(ye)随网动(dong),网随业(ye)(ye)优(you)」。

2、数网融合。因为我(wo)们大(da)部分复(fu)杂动态的(de)分布式智(zhi)能计算,都需要将(jiang)数据(ju)(ju)进行(xing)不同网(wang)(wang)(wang)(wang)(wang)络路(lu)径(jing)的(de)传输(shu),对于网(wang)(wang)(wang)(wang)(wang)络系统来(lai)说(shuo)造成(cheng)了很大(da)的(de)数据(ju)(ju)传送压(ya)力(li),并(bing)且因为网(wang)(wang)(wang)(wang)(wang)络的(de)拥堵网(wang)(wang)(wang)(wang)(wang)络状态的(de)某一段不好,导(dao)致整个网(wang)(wang)(wang)(wang)(wang)络出(chu)现重传,因此在(zai)网(wang)(wang)(wang)(wang)(wang)络当中(zhong)会出(chu)现很大(da)的(de)数据(ju)(ju)压(ya)力(li)。所(suo)以我(wo)们在(zai)网(wang)(wang)(wang)(wang)(wang)络当中(zhong)数网(wang)(wang)(wang)(wang)(wang)融(rong)合就是做网(wang)(wang)(wang)(wang)(wang)络计算,让网(wang)(wang)(wang)(wang)(wang)络进行(xing)标准(zhun)化(hua)的(de)处理。

大华股份前段时间发布了很核(he)心的(de)(de)新(xin)技术,在网络设备内置了流(liu)媒(mei)(mei)体(ti)(ti)调度(du)引擎,可(ke)以监(jian)测网络设备连接的(de)(de)数据(ju)(ju)到底是不是流(liu)媒(mei)(mei)体(ti)(ti)的(de)(de)数据(ju)(ju),并且根据(ju)(ju)流(liu)媒(mei)(mei)体(ti)(ti)数据(ju)(ju)的(de)(de)持续特征(zheng),对(dui)连接的(de)(de)视(shi)频终端持续调整。

3、网网融合。在同(tong)一(yi)个场景当中,智能化(hua)(hua)会催生多样化(hua)(hua)的(de)业务,在同(tong)一(yi)个场景有不同(tong)物理(li)场景的(de)网(wang)络(luo)同(tong)时部(bu)(bu)署,像(xiang)对(dui)低功耗的(de)大(da)概率用蓝牙(ya),对(dui)于低延(yan)迟的(de)网(wang)络(luo)可能选择5G,大(da)带(dai)宽的(de)网(wang)络(luo)可能选择无(wu)线,这些(xie)不同(tong)的(de)网(wang)络(luo)如何进(jin)行统一(yi)的(de)管(guan)理(li)、统一(yi)的(de)部(bu)(bu)署和(he)统一(yi)的(de)运维,在未来的(de)复(fu)杂(za)网(wang)络(luo)当中对(dui)工程(cheng)化(hua)(hua)实施和(he)极简化(hua)(hua)管(guan)理(li)提出了重大(da)挑战。

构(gou)(gou)建网(wang)网(wang)融合(he)(he)的统(tong)一管理架构(gou)(gou),是大(da)华(hua)股份(fen)在融合(he)(he)连(lian)(lian)接能力很(hen)重要(yao)的核(he)心。通过构(gou)(gou)建融合(he)(he)连(lian)(lian)接的新能力,可以让(rang)业务系统(tong)更精简(jian),业务应用更稳定,这就是大(da)华(hua)股份(fen)最核(he)心的全(quan)连(lian)(lian)接网(wang)网(wang)融合(he)(he)的能力。

沿着融合连接的三大层次,大华股份未来通信研究院主要有三大研究主线:

第一条是连接能力研究,主要是面向新的网络类型去构建所需的连接系统。第二条是在数据交换,主要从物理层、数据层和应用层,构建云边端网的一体化交换能力。第三条是研究更前沿的新一代通信技术,比如(ru)说通(tong)感(gan)一体(ti)化(hua)语(yu)义通(tong)信(xin)等。这(zhei)块是为(wei)了让连接(jie)促进整个数字化(hua)系统的(de)颠覆式发展(zhan),它是螺旋(xuan)上升的(de)一个关键(jian)。

邓志(zhi)吉谈道,在大(da)模(mo)型时代做通信研究,大(da)华股份(fen)是(shi)最(zui)懂AIoT数(shu)据的团队(dui)。

“这(zhei)么多年以来,我们积(ji)累了对视(shi)频数据(ju)(ju)和(he)智(zhi)能(neng)(neng)化应用的(de)理解(jie)(jie),所(suo)以对网络传(chuan)输业(ye)务的(de)意图有一定(ding)的(de)理解(jie)(jie)力。在做通信能(neng)(neng)力构(gou)建的(de)时候,我们更能(neng)(neng)让通信能(neng)(neng)力适用于(yu)业(ye)务所(suo)需的(de)数据(ju)(ju)传(chuan)输要求。所(suo)以我们是最懂AIoT数据(ju)(ju)的(de)连接系统构(gou)建厂家。”

可以看到,大华股份不仅要做大模型时代的智能感知龙头,还要亲自上阵做大模型时代的「水管工」,促进像水一样的海量数据实现融合连接,打造视觉智能落地的「新管道」。

结语:从全连接到融合连接,推动视觉智能加速落地

随着大模(mo)型掀起AI新(xin)浪(lang)潮(chao),作为(wei)AI落地一(yi)大最佳场景的(de)(de)AIoT领域(yu)也有了「新(xin)故(gu)(gu)事(shi)」。「新(xin)故(gu)(gu)事(shi)」怎么讲,这不(bu)仅涉(she)(she)及行(xing)业大模(mo)型算法(fa)的(de)(de)研发,还涉(she)(she)及端、边、网、云、生态等(deng)各个维度(du)能力的(de)(de)配(pei)合,是一(yi)件长板(ban)和短(duan)板(ban)效应(ying)并发的(de)(de)事(shi)。

作为AIoT领(ling)域的(de)(de)行业龙(long)头,大(da)华(hua)股(gu)(gu)份从系统(tong)全面的(de)(de)视(shi)(shi)角(jiao),更(geng)新(xin)(xin)其“五(wu)全”能力(li)底座(zuo)(zuo)和五(wu)大(da)研(yan)(yan)究院体系,为大(da)模(mo)型落地提供了制度(du)保(bao)障。大(da)华(hua)股(gu)(gu)份未来通信研(yan)(yan)究院通过「3+N」架构打造融(rong)合连接的(de)(de)底座(zuo)(zuo)能力(li),有望成为其在视(shi)(shi)觉智能时代一(yi)道(dao)新(xin)(xin)的(de)(de)技术(shu)护(hu)城(cheng)河。与此同时,这一(yi)领(ling)域当下尚且(qie)没有更(geng)多的(de)(de)技术(shu)参(can)考(kao),需要大(da)华(hua)股(gu)(gu)份克服更(geng)多未知的(de)(de)挑战。