如何轻松实现云端数据存储、管理及智能化处理？

腾讯云对象存储产品团队 目录 •对象存储产品特性解读•对象存储核心能力及使用场景•客户案例分享•Global Storage新品预告：适合中小企业的融合存储方案 对象存储简介 对象存储（Cloud Object Storage，COS）是由腾讯云推出的无目录层次结构、无数据格式限制，可容纳海量数据且支持HTTP/HTTPS协议访问的分布式存储服务。通过控制台、API、SDK和工具等多样化方式，用户可简单、快速地接入COS，进行多格式文件的上传、下载和管理，实现海量数据存储和管理。 存储可靠性 高性能 开放兼容 提供全兼容AWS S3的接口，以及多种生态工具支持。 高达30,000QPS的请求性能；保障客户业务在高并发情况下稳定运行。 提供多副本或者纠删码冗余存储，最高可达12个9的数据持久性。 数据安全 低成本 高可用 提供具有竞争力的产品定价，支持数据生命周期管理，进一步降低云存储成本。 提供多租户权限隔离，支持HTTPS加密传输，支持SSE-KMS加密等多种数据加密方式。 提供高达99.95%的服务可用性，为您的业务保驾护航。 高可靠性及高可用性架构 网络接入 •多运营商多线路接入•攻击流量清洗•负载均衡结构 应用接入 •应用层无状态管理•集群横向无限扩展 数据层 •数据跨机架、跨交换机部署•索引分级存储•数据自动均衡、弹性扩展•冷热数据手动、自动沉降 容灾设计 •内外网负载均衡•请求高可用、可迁移•模块心跳检测，秒级切换•故障自愈机制 全产品矩阵支持 全生命周期管理，满足热、温、冷分层存储需求 长期保存的离线存档数据 离线存档数据 •支持标准、低频、归档、深度归档•根据访问模式自动转换层级 数据处理能力介绍 针对用户普遍的需要面对多个服务的场景，提供【存+用】一站式处理平台，加强黏性，降低用户使用成本，帮助用户挖掘数据价值 国内首家提供AVIF图片压缩的云厂商(相比JPEG，WebP等格式，缩小50%+)目前处理能力最丰富的存储+处理平台 数据湖存储：三级加速体系，让数据流动更高效 Tstor私有云存储产品介绍 云边协同 •数据在云上云下无缝流动•云备份与回源、云分层、云复制•一致的使用体验 安全可靠 •部件、节点、机柜、数据中心、云等多级可靠性设计，系统可用性99.9999%•端到端数据加密，完善的鉴权管理，保证数据的安全访问 融合高效 •一套存储同时支持对象、文件、块•开箱即用，简化部署，可视化管理•大比例EC，自研硬件，TCO节省20%以上 TStor是腾讯云面向私有云与混合云场景推出的软硬一体的分布式存储产品。 对象存储核心能力及使用场景 基于跨地域复制功能的高可用性架构 通过跨地域复制功能将数据拷贝到备桶，同时通过高可用层保障主备存储桶处于双活状态，在写故障时可实现容灾链路切换；通过CDN的方式将COS主备存储桶分别作为回源源站，在故障时可实现自动读自动切换。 UGC场景安全：精细化权限管理+多种数据防覆盖方案 精细化权限管理 数据防覆盖 对象锁定功能•通过CA认证。满足美国证券交易委员会（SEC）、美国金融业监管局（FINRA）和美国商品期货交易（CFTC）相关合规要求。•对象级别worm，灵活管理锁定状态。 已支持17个PolicyCondition，用于限制请求来源、https协议、文件类型、文件大小、存储类型、对象版本等。 x-cos-forbid-overwrite头部•同名文件检测，结合条件键使用，进一步加强安全。版本控制•保护历史版本，覆盖及时追回。 生命周期结合智能分层存储，更加灵活、智能的成本优化方案 智能分层存储 生命周期 智能分层存储适合访问模式不固定的数据，近期新增冷存储层、归档存储层、深度归档存储层 生命周期功能支持基于最后修改时间和最后访问时间设置规则。 数据上云方案：多端上传、全球加速、CDN分发 高吞吐，高性能。通过专线、全球加速等多种方式将数据上云，保障网络带宽稳定性；提供云上视频处理图片处理能力；通过CDN加速内容分发速率和稳定性。 客户案例 存算分离客户案例 方案描述 基于GooseFS+COS的存算分离方案，通过COS降低存储成本，通过GooseFS缓存层提升数据访问性能，开启COS元数据加速进一步优化rename、list性能大量使用基于AMD的SA2低成本机型，仅部分节点部署GooseFSServer，进一步降低方案总体成本GooseFS可100%兼容原有HDFS语义，通过透明加速能力随时启停，简化业务迁移 方案价值 计算集群总核数从7000+降低到5000+，叠加AMD机型和COS对象存储带来的成本降低，月销降低40%以上90%以上作业的数据读取通过GooseFSNVMe高速缓存完成，相比原来的SATA本地盘读取效率大幅提升，整体作业执行时间缩短20%架构变更对上层业务透明，无需业务代码适配改造，仅2个月时间就完成业务切换，较用户预期缩短33% 自动驾驶客户案例 客户痛点 视频文件原本放主机侧，本地硬盘存储成本高数据孤岛，EKS集群数据无法共享 方案描述 数据预处理：GooseFS单独集群根据客户Airflow调度算法加载提前预热需要的COS上视频文件后给EKS Pod做图片处理（截帧，脱敏）后存放到COS自动驾驶训练：上海训练预处理服务产生图片库用COS跨区域复制到北京，由蔚来北京算法部门通过GooseFS提前预热图片进GPU进行自动驾驶训练和推理平台使用 方案价值 GooseFS作为统一数据中台进行数据预热加速训练预处理和自动驾驶训练业务，90%+以上数据命中在Cache，训练速度提高30% 智能处理客户案例 •案例简介： 某社交平台每日有大量的UGC视频上传，平台主要传播途径为PC网页和手机app，需要有针对性的对视频进行转码处理。同时在瀑布流形式的信息展示界面，需要有足够吸引人的视频封面。 •案例详情： 1、客户使用H.265编码能力，在保证相同的视频质量下输出更小的视频。2、使用智能封面和视频转动图能力，为应用程序提供了精彩丰富的视频封面。3、通过工作流的方式，绑定了一个业务存储桶，视频上传至该存储桶后进行自动处理。4、通过接收处理结果通知，进行后续的视频发布等流程。 •案例优势&客户收益： 1、视频上传自动处理；释放人力审核资源 2、转码类型覆盖全面，自定义参数丰富；全方位兼容多终端，相比于普通转码，265编码 让视频码流减少约40% Global Storage新品预告 全局融合存储Global Storage新品预告 全局融合存储（GlobalStorage）是什么？ 安全可靠、简单易用、分发加速的无地域存储服务，为客户提供云原生的存储+分发融合解决方案。产品功能更加简单易用，存储+分发一体解决方案，支持缓存自动刷新、无回源流量费用，适合中小企业使用。 更轻 无地域、无存储类型，极简体验，轻松上手，开箱即用的存储服务 更快 存储+分发一体解决方案，支持自动流量调度、自动缓存刷新、无回源流量。 更省 计费更加简单，支持自定义套餐，按需自由设定存储容量、流量规格；套餐内容量价低至5折，流量低至7折。 分发加速，更轻更快 COS：多个产品，配置复杂 Global：一站闭环，省心加速 需要额外开通CDN加速服务 仅下行流量费用 加速流量费用+回源流量费用+https请求费用…… 缓存自动刷新 缓存刷新依赖SCF函数，需要额外收费 三个控制台四个产品五个步骤 结合静态网站能力，一键加速您的个人博客、官网门户 计费套餐，更省更好 COS：计费项多，套餐包管理复杂 Global：自定义容量套餐 •计费项种类过多：标准存储容量、低频存储容量、外网下行流量、请求次数费用、全球加速流量…… •仅收取存储容量、外网下行流量费用 •支持自定义套餐规格，一键升级•套餐折扣更低，容量低至5折，流量低至7折 •多种套餐包叠加，管理复杂 Thank you感谢观看！ 腾讯云「数据万象CI」智能存储一站式处理平台 目录Menu •产品简介•功能概览•客户案例 数据万象介绍 腾讯云数据万象（CloudInfinite，CI）是专注于数据处理的一站式智能平台，提供图片处理、媒体处理、内容审核、文件处理、AI内容识别、文档服务等全品类多媒体数据的处理能力。 腾讯云对象存储（CloudObjectStorage，COS）则基于数据万象为客户提供专业一体化存储+处理的智能存储解决方案，数据万象作为存储底层智能化处理引擎，满足客户多种场景维度的需求。降低用户COS使用成本，提升用户使用体验，帮助用户挖掘数据价值。 数据万象定位 数据处理智能平台 覆盖全类型的数据处理能力，同时支持COS源以及第三方源。结合AI，贴近应用，提升业务效率，作为业务工具百宝箱。 结合COS的智能存储 从“为了存而存”到“为了用而存”，帮助COS做智能化升级，专注易用性，提供开箱即用的智能处理能力。 数据万象新能力-智能检索MetaInsight •支持语义检索•支持文搜图，图搜图、文搜视频，视频搜视频，文本搜音频，音频搜音频等多种数据检索手段•支持对象元信息的高效查询、统计分析 •已覆盖1000+细分场景，用户可根据业务场景挑选预置模版，快速搭建检索应用，最大化释放内容价值 智能检索MetaInsight，助力客户释放内容价值 数据万象新能力-边转边播 边转边播是和预转码不同的即时处理同步转码功能。用户将视频上传至对象存储COS后，通过边转边播功能即可实现在不同终端和网络环境下播放视频。同时，用户也无需将视频进行提前转码，边转边播功能会在视频被第一次播放时按需转码视频分片。使用边转边播功能可以帮您节约较大的存储和转码成本，同时由于按需转码，用户可以实现原视频文件上传完成后立即播放，从而获得很好的播放体验。 适用场景 网盘 匹配场景为网盘素材浏览，网盘、在线相册类场景，存储内容数量繁多，但实际播放观看的内容占比却很少，为了保证客户的观看效果，为全量视频都转码存储导致业务成本巨大 匹配场景为视频传输即时播放，用户间传输高码率视频时，如果直接播放原视频，流量费用较高且有兼容性问题，如预处理则用户需要等待体验感降低 匹配场景为网课播放，在分发时为满足不同终端观众播放流畅度与高清化诉求，需要预先对录制文件二次转码为标清、高清、超高清等多个分辨率，存储成本和转码成本居高不下 使用即时转码可以只需存储一份源文件，无需进行多阶梯分辨率预转码处理，降低存储和转码成本也削减了用户等待转码完成的时间。 数据万象新能力-边转边播 •标准化：支持标准HLS协议、支持和预转码保持一致添加字幕、水印、加密视频 •低成本：对视频按需分片转码，只有在播放时才会进行转码；使用COS生命周期对转码生成的视频文件定期回收或对冷视频删除，以减少存储成本；预处理方案为了保证客户的观看效果，全量视频都转码存储导致业务成本巨大，边转边播只需存储一份原始视频 •高效率：0等待时间，无需等待转码完成，生成播放列表后即可播放；智能预转设置，提升开播体验； 客户案例—在线教育 在线网课 场景特性 普通预转码方案的用户痛点 •源视频可能是高码率、H265，上网课时播放会出现卡顿或兼容性不佳问题•大量网课长期处于闲置状态，用户不需要观看，观看时有拖拽跳转动作•用户使用终端丰富，根据终端与网络状态需要各阶梯码率视频适配 •需存储源文件和全部转码后的文件，存储费用⬆•为保证播放体验，需匹配用户使用终端提前转码所有文件，转码费用⬆ 边转边播方案的优势 •仅需存储原始素材，存储费用⬇•按用户播放需求发起转码任务，转码费用⬇•实时返回每个结果并可控制ts分片长度，实现大素材快速起播与跳播，播放体验⬆ 智能工具箱：https://console.cl