物联网音视频产品助力客户硬件产品革新

物联网音视频产品助力客户硬件产品革新 打造经典服务未来 Powered by Tencent Cloud 01.实时互动物联版简介 02.IoTVideo产品介绍 03.IoTVideo客户与合作伙伴 实时互动物联版简介 CSIG：产业数字化助手 CSIG定位成为产业数字化助手，以云服务为主体为产业输送数字化时代的水电煤。 实时互动物联网版（RTC-IoT）产品简介：物的连接与通信、智能分析、应用开发 为设备连接通信，智能分析、应用开发提供一站式数字化服务 应用服务微信小程序插件& APP SDK 增值产品服务云端录制/智能分析服务等 统一内容服务接口，提供腾讯音乐，腾讯医疗，微信支付，微信开放服务等应用快速集成 IoTVideo产品介绍 物联网音视频（IoTVideo）-应用场景 物联网音视频（IoTVideo）-核心能力 IoTVideo核心优势–视频连接可靠性的关键指标 •自研传输XNTP，稳定、低延迟•多路径并发连接（P2P与转发同时进行），快速优选最优通讯链路•业界领先打洞成功率80%，音视频传输成本平均可降低50% IoTVideo核心优势–视频连接可靠性的保障策略 应用多路径快速可靠传输技术，构建端到端之间的多路径、多协议快速稳定的数据传输链路 l各终端之间同时建立UDP/TCP/直连/中继多路径传输通道 l系统动态测量和评估各个传输通道的质量，优选和调度质量较好的路径进行动态分流数据传输 IoTVideo云存方案 有效将云存存储空间压缩50%以上，预计综合存储成本节省20+%。 解决方案：设备端SDK内部切片上传到IoTVideo平台，IoTVideo提供有竞争力的端到端云存方案。 应用场景：新客户或采用三方平台PaaS云存方案客户，设备端可以集成腾讯SDK IoTVideo产品能力：腾讯云微通话（TWeCall）能力 IoTVideo产品能力：腾讯云微通话（TWeCall）能力应用案例 单向视频通话 双向音频通话 双向视频通话 IoTVideo核心优势：微信小程序介绍 社交分享 便捷性 用户无需额外下载APP即可实现视频观看、视频回看、语音通话和云台控制等功能。 一键分享视频给微信朋友、微信群和朋友圈，共享快乐视频。 高触达率 增值运营 借用微信的入口，可以让告警信息和重要的通知信息有效触达用户，有效控制损失和减少危害。 借助微信的流量，可以让产品的日活率更高，便于客户做后期增值运营。 IoTVideo核心优势：与微信小程序打通，无需额外付费可在小程序中实现视频监控 •出图时间：1s，延迟：300ms-500ms•P2P打洞成功率达80%•开发工作量：一周左右 •出图时间：1-2s，延迟：1-3s•无法进行P2P打洞，与APP P2P相比接入成本增加66.7%•开发工作量：一周左右 •出图时间：2s，延迟：500ms•P2P打洞成功率小于20%•开发工作量：超过一个月 IoTVideo增值服务：Turn-key小程序零代码打造客户专属小程序 全套视频连接能力服务 一键实现自有品牌小程序 支持微信强提醒和分享 通过微信小程序可实现设备消息“微信强提醒”和“一键分享”给微信朋友，从而有效控制损失并提高用户黏性 支持秒内出图、双向可视对讲、回音消除、图片和视频存储等视频连接全套能力 通过零代码、免开发快速实现客户自有小程序，并支持全托管、代运营实现客户免运维 产品能力 TWeSee（微见）为IoT Video面向消费电子行业推出的全新能力，基于长视频的语义理解，为客户提供视频浓缩、视频摘要、视频搜索三大能力。 TWeSee基于对长视频的语义理解，自主识别分析安防场景关键事件，用户订阅或者搜索的感兴趣内容，高效处理海量云端录像。 TWeSee-消费电子行业云端录像现状 在当前消费电子行业的安防场景中，摄像头会根据移动侦测上传事件录像，1天内产生的视频长度平均达到2小时+，且移动侦测存在很多误报的情况，导致用户很难从这些冗长的视频中快速找到自己关心的视频和有价值内容。 TWeSee功能介绍-视频浓缩 功能介绍 根据用户感兴趣的目标条件（人、车辆、宠物等），从海量云存内容中，提取出所有目标相关的视频片段，并进行拼接、倍数，将2小时+的长视频浓缩做成1-2分钟的短视频，节约用户的观看用时。 特点 •提高效率：用户可以快速查看重要内容，节省了大量时间。•精准筛选：精准筛选视频内容，提高视频查找的准确性和相关性。 TWeSee功能介绍-视频摘要 功能介绍 事件摘要 2024-08-10 12:30“婴儿在床上爬行” 基于对长视频的语义理解，根据设备所处的场景（入户场景、室内场景、户外场景等）提取安防相关的重点事件信息，以文本的方式提供给客户。 用户无需繁琐的观看每一个事件视频，通过事件视频文字摘要，快速掌握视频内容 2024-08-10 13:30“黑白相间的猫跑过” 事件提醒/预警 重点事件推送给用户，用户及时获取提醒/预警。（用户可自定义感兴趣事件） 2024-08-10 20:30“家庭成员在聚会。” 精彩片段 为用户推荐视频中精彩片段，不漏掉生活中的美好回忆 TWeSee功能介绍-视频搜索 功能介绍 目标查找 TWeSee支持用户通过自然语言进行视频搜索，帮助用户从大量长视频中，快速找到自己感兴趣的视频内容，大大提升视频管理效率。 根据查询目标，找到含有目标的视频片段。 今天我的门口有出现黑色衣服的男人吗 2024-08-10 12:30 2024-08-10 14:50 TWeSee功能介绍-精彩视频 TWeSee应用案例-智能门锁包裹事件提醒 24年智能门锁的行业趋势上看，带双目或者三目摄像头的门锁会成为主要的新增品类。双目摄像头有一颗摄像头拍摄门前正前方的视频，有一颗摄像头拍摄门前正下方的视频，相比之前单目摄像头可以获得更多的视频信息，在此基础上对视频语义进行解析，就能为用户提供更多有价值的信息。 Ø产品能力： •快递员进行识别：包括京东、顺丰、美团、盒马等快递公司的快递员进行识别•对包裹进行识别：外卖袋、快递盒、快递袋、文件袋•消息推动：当包裹放到家门口或者被拿走时提醒用户（xx时间xx快递公司的快递员将包裹放到了你家门口）。 TWeSee应用案例-IPC事件语义摘要、目标检测 某IPC厂商通过TWeSee视频摘要、目标检测、搜索能力为IPC用户提供智能化视频分析体验，用户可通过TWeSee摘要后的文字立刻了解视频内容，并可按目标分类以及用户感兴趣的关键词进行视频搜索，改变用户原来只能人工查看所有事件视频及无法按需获取信息的问题。 。产品能力： •视频摘要：对每个事件进行实时语义摘要理解，输出事件中最关键信息，并适合App展示的精简摘要文本•目标检测：对人、车、宠物、包裹、是否有无车牌、火焰、烟雾等进行目标检测，便于App按类别搜索感兴趣事件•实时消息推动：通过TWeSee的实时语义摘要，更精准的为用户推送每个事件发生了什么，用户可根据摘要内容决定是否查看对应事件•视频搜索：用户可基于搜索快速找到关注的视频进行观看 TencentRTC AI智能对话服务-物联场景 现有的AI语聊场景主要是基于IM场景的离线文字聊天或者语音聊天，GPT-4o的发布，把多模态大模型的应用场景提升到了实时的语音或者视频交互。 使用Tencent RTC，结合混元大语言模型和TTS等，您可以轻松创建一个媲美GPT-4o所演示的AI实时交互体验，应用到您的业务场景内。 IoTVideo3A音频增强 •在APP端完成设备侧3A算法，设备运算资源消耗低 •腾讯自研IoTVideo AEC算法，客观指标优于其他AEC算法，在各场景已广泛应用 IoTVideoAEC回声抑制能力明显强于第三方，相比第三方，回声抑制提升大约30% TencentRTC AI智能对话服务-物联场景-离线语音唤醒词&离线命令字 在智能硬件场景，设备会由于低功耗的需求处于离线状态，AI对话前需要先通过离线语音唤醒词将设备唤醒进入活跃状态，或者在离线状态下支持部分简单的命令子提高设备响应速度。RTC-IoT提供TVoiceWake，支持离线语音唤醒词和离线命令字。 Ø个性化定制：支持自定义唤醒词Ø全平台支持：支持Android/Linux/RTOS系统Ø高识别率：识别率已到到实用标准 TencentRTC AI智能对话服务-物联场景-内容服务 RTC-IoT芯片平台覆盖介绍 目前RTC-IoT设备端SDK可以全平台支持（Linux/RTOS/Android），并且已覆盖5大场景的26个主流芯片平台的上百款芯片，特别针对一些低功耗、轻资源的芯片也能很好的支持，同时对于新出的芯片也会不断跟进适配。 IoTVideo客户&合作伙伴 IoT Video客户案例-凯迪仕 客户简介 •专注于智能锁领域，是一家集产品研发、制造、销售、安装、售后于一体的全球领先的智能门锁产品及服务提供商 客户需求及痛点 •消费者有免安装APP、家庭分享音视频等诉求•设备常处于弱网环境，音视频实时通话效果不佳•告警通知触达率不及时，如：门铃呼叫时，APP难实现强响铃提醒•音视频成本太高，希望降低产品运营成本 使用腾讯云产品 •业界首家提供小程序P2P直播能力，用户可免安装并通过微信小程序实现设备实时音视频连接、设备分享和有趣视频分享等功能•调优采集传输播放策略，提升抗弱网性能；并在Wi-Fi芯片上做P2P预处理，缩短首出图时间•支持微信强提醒，满足C端用户对消息触达的及时的需求•通过P2P和云存降低产品成本 项目成果 •便捷的小程序体验助力凯迪仕旗舰型号K20ProMax快速上线并在半年内出货50万台•凯迪仕全系产品全面从友商切换到腾讯云平台，产品运营成本平均下降35%•凯迪仕通过微信强提醒功能构建的产品能力形成智能门锁行业标杆 IoTVideo整体优势 稳定性优势 增值内容优势 低成本优势 微信生态优势 •提供TWecall增值服务；•提供视频AI分析增值服务；•提供多种云存套餐服务；•... •微信原始支持X-P2P能力；•TWecall支持设备和微信之间双向拨打；•强提醒功能设备向微信发送消息；•... •P2P降低音视频传输成本50%；•MPS降低云存成本30%；•3A算法降低设备端成本80%；•... •腾讯云音视频PaaS亚太地区排名第一；•为千万级设备提供音视频服务；•... 感谢聆听