产品
同一套端侧能力,做成四种形态给你用:算法与 SDK、平台、业务客户端、配套硬件。要集成、要整场、要开箱能用,都能对上。
形态一
算法与 SDK
认得准,才谈得上后面。四个能力包都跑在设备本地,离线可用,不把画面传出去。
端侧识别 SDK
一套 SDK,认非标、无条码的商品。烘焙、生鲜、食材、菜品、小碗菜、卤味、标品都在这一套里,换场景换模型,不改集成方式。Android 与 Linux 双端,模型和商品库放在设备上,断网也能认。
交付:SDK + 集成说明 + 商品库维护流程。状态:已上线。
人脸识别 SDK
认人,但只留特征,不留照片。双目摄像头加红外判断是不是活人;抓拍先过质量关——俯仰、偏航角度不合格的不进入比对;人脸以特征向量存在机器侧,原始画面不落地。
底层的自研向量库在 RK3576 单机上做十万级向量检索是 30 毫秒级,适用于十万级向量以内的现场。
交付:能力包 + 阈值配置 + 现场校准。状态:已上线。
语音多模态算法包
听得清,也知道该什么时候开始听。声学前端是完整的四件:波束成形、回声消除、去混响、环境噪声消除。少哪一件现场都会出问题——缺回声消除,机器播报时把自己收回去;缺去混响,大厅里远场就废了。
唤醒、识别、播报都在本地;起句要同时满足唇动、正脸朝向和有人声。
交付:算法包(可配套阵列麦克风);Android 与 Linux 双平台,Linux 侧交付 bin 与 so 库。状态:已上线。
条码批量识别
手机拍一次,读多个码。用于批量盘点这类活:不用一件一件对准扫。算法已就绪,SDK 封装中。状态:进行中。
形态二
平台
把能力编排成场景的那一层。同样的盒子、同样的摄像头,换场景要改的是编排,不是重做一套系统。
LingtaiEdge(灵台方寸山)· 端侧运行时
名字取自“悟空悟道之地”:算法在这里编排,场景方案也在这里成形。盒内运行时从云端拉模型与规则,在本地处理视频流、执行编排,结果上报业务系统;断网继续跑,恢复补传。
交付:盒内运行时 + 编排配置。状态:已上线。
筋斗云 · 云端管理平台
管设备、管算法、在线编排。哪台盒子在线、跑的哪个版本、哪个点位指标掉了,云端能看见;编排规则云端改完下发,不用到现场。
交付:云端服务(可按客户要求独立部署)。状态:已上线。
八卦炉 · 训练平台
上传现场视频、在线标注、训练出针对这个场景的模型,下发到盒子,盒内验证通过再启用。八卦炉对外开放,任何注册用户都能用,按训练的模型计费;训练好的模型可以上架到模型市场。
交付:在线训练与标注服务。状态:已上线(计费方案待公布)。
安防 PaaS · 中心侧
把视频流变成可以查的事件:算法与算力服务器把画面做成结构化事件与特征,入库后秒级查到——不是翻录像,是筛条件。单厂区 8,000+ 路摄像头是我们现在在跑的量级。
独立销售给集成商,可嵌进你自己的平台。交付:PaaS 服务(API 与网关)+ 部署实施。状态:已上线。
形态三
业务客户端(开源)
五个客户端,代码是公开的。前端业务客户端全部开源(MIT),各场景独立仓库。不是先信我们,是先看代码。
烘焙识别自助端
识别与计数,下游对接 MES / ERP / KDS,按甲方的系统来。
智能餐厅食材管理系统
食材的入库、出库、盘点。
餐厅业务端
菜品识别与小碗菜识别共用同一个客户端。
卤味计数端
卤味、新鲜零食的计数。
人脸消费终端
先储值、刷脸消费,不用饭卡,也就没有丢卡。
形态四
硬件
配套的东西,不神秘。按项目选型,我们给型号与规格,也接受客户自采。
算法盒子
跑 LingtaiEdge 运行时,接现有摄像头与网络。
算力服务器
承载中心侧的平台与大库。
标准硬件
盒子与一体机,出厂预置运行环境,接上相机就能出结果。
阵列麦克风
语音方案的配套,可选。