MetaInsight数据智理解决方案

Tencent Cloud Data Platform 提供全面的解决方案，核心组件包括 COS 对象存储、数据万象（Data Engine 和 MetaInsight）以及 GooseFS 缓存服务。

1. COS 对象存储：作为 Data Platform 的存储底座，具备功能全面、高可靠性和高性价比的特点，单集群可管理百 EB 级别数据，提供 99.995% 高可用性和 12 个 9 的高可靠性，成本仅为 0.01 元/GB。

2. 数据万象：构建 Data Platform 的数据处理和管理双引擎。

   • Data Engine：提供一站式数据处理及内容审核服务。
   • MetaInsight：数据管理引擎，支持全媒体跨模态检索服务，进一步释放内容价值。
     • 核心功能：
       • 支持文搜图、图搜图、文搜视频、视频搜视频、文本搜音频、音频搜音频等多种数据检索手段。
       • 支持对象元信息的高效查询和统计分析。
       • 采用视觉-语言大模型 V-LLM，实现图文、文本与视频的多模态语义理解和特征抽取，建模相似度，支持图文检索、图像标签等任务。
       • 通过定制化标签和特征向量建立索引，支持全媒体类型跨模态检索。
       • 支持业务场景自定义标签，为数据集自动打标。
     • 性能指标：
       • 高性能：千亿查询/毫秒延迟，95%+ 高召回率。
       • 高压缩：提升 20%+ 压缩率。
       • 低延迟：降低 50% 延迟。

3. GooseFS：近计算端缓存，为 AI 和大数据业务提供数据加速服务。

   • 通过查询 MetaInsight 从 COS Data Store 提取数据并缓存到 GooseFS，高效投递到计算节点，实现数据接近计算端，进行更智能、更高效地计算。
   • 提供 Tbps 带宽、亚毫秒延迟和百万级 IOPS 的性能。

4. Data Engine + MetaInsight：自动识别标签，建立标签索引，高效管理数据。

5. Tencent Cloud Data Platform 核心优势：

   • 自研分布式存储引擎，高可用、高可靠、低成本。
   • 自研近存储端数据治理引擎，保障数据计算和内容合规。
   • 自研元数据和多模态检索引擎，持续释放内容价值。
   • 自研数据湖 GooseFS 加速服务，提供近计算端数据缓存。

研究结论：Tencent Cloud Data Platform 通过整合 COS、数据万象和 GooseFS，助力企业实现数据驱动智能，提供全媒体语义特征提取、高性能、高召回率、全能力支持、高压缩率和低延迟等优势，满足企业数据管理和智能分析需求。