分层命名空间
发布时间：2022-11-03 11:27:58 所属栏目：云计算 来源：
导读： 功能概述：
分层命名空间（namespace）是百度智能云推出的元数据管理功能。通过分层命名空间，可以很好的支持目录级别的mv与rename操作，同时优化常见读操作List、Head，提升数据处理效率与性能，能很好
分层命名空间（namespace）是百度智能云推出的元数据管理功能。通过分层命名空间，可以很好的支持目录级别的mv与rename操作，同时优化常见读操作List、Head，提升数据处理效率与性能，能很好
|
功能概述： 分层命名空间（namespace）是百度智能云推出的元数据管理功能。通过分层命名空间，可以很好的支持目录级别的mv与rename操作，同时优化常见读操作List、Head，提升数据处理效率与性能，能很好的满足大数据领域的数据湖计算场景。 功能开通： 功能架构： 系统架构图 (2).png 优势：大数据场景下也可以直接享受对象存储带来的自动化数据管理，存储低成本，数据强安全优势 原生基于对象的分层Namespace带来了大数据计算场景下对于文件语义的高性能表现 直接基于对象存储的大数据分析（All in Object），节约额外的数据复制与流转、存储以及第三方服务费用无额外的运维，管理及学习成本，充分享受对象存储的生态及工具应用场景：大数据分析与计算 大数据分析和大数据计算。对象存储作为云端最佳存储方案，BOS 提供一整套高性能大数据计算解决方案。在大数据场景中，BOS 可以作为您本地自建或者云端 MapReduce计算集群 、Hive、Spark离线数仓集群的底层存储系统，原生分层命名空间能力云计算服务器搭建，可以将大数据计算中的大规模批量操作如 Rename、List、Head 等操作的时延降低约 70%，突破传统对象存储支持大数据计算方案的延迟瓶颈。 功能支持与限制支持限制 开启分层命名空间的存储桶支持功能与平层命名空间存储桶基本相同，均支持对象级别操作基本均支持比如：上传、下载、复制等；存储桶级别的配置功能如生命周期、事件通知、日志管理等也可正常使用，目前相比起平层命名空间存储桶仅有少部分功能暂不支持，若您有需求可提交工单反馈，具体说明如下： Bucket相关功能不支持回收站Object相关功能不支持追加写（append)文件不支持归档存储类型文件不支持设置和修改文件访问控制权限（object acl）不支持上传带内容的目录（即上传内容非空但文件名末尾是/的文件）不支持文件软链接功能接口调整 由于分层命名空间特性导致部分BOS API会有部分兼容和语义上的调整，如下所示： Object基础操作 ListObjects ListObjects API的请求参数有所调整，查看ListObjects接口说明。 字段类型是否必需描述 delimiter String 否 分隔符; 分层Namespace下ListObjects必须指定，且只能为/ marker String 否 object为字母序排列，从marker之后的第一个开始返回，为对象（文件）的全路径；分层命名空间下，将会返回父目录下的子文件或者子目录按照字典序大于marker的结果 maxKeys Int 否 返回object列表长度最大为1000，默认值是1000，如果指定的值大于1000，按1000操作 prefix String 否 必须为对象的父目录，限定ListObjects接口只能返回以Prefix为父目录下的对象；Prefix可以不以/结尾，BOS会默认为其自动添加目录分隔符 特别说明 ListObjects会将父目录下的所有子目录与对象按照字典序排序后返回； ListObjects在分层空间存储桶的目录下不再支持列出某个前缀(目录)下的所有文件，只支持根据给出的父目录信息列出子目录和子文件。 （编辑：财气旺网 - 海宁网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
站长推荐