VMwareCloudDirectorObjectStorageExtension3.0是面向Kubernetes的对象存储扩展组件,于2024年3月推出,构建号为23443325。它可通过解决方案附加组件界面进行部署、升级和删除,适用于TanzuKubernetesGrid或符合CNCF规范的外部集群。此版本增加了部署后参数的界面配置、与数据解决方案扩展的集成以及滚动更新等特性,同时提升了S3和OSIS功能并更新了支持矩阵。需要留意的是,新功能和文档只提供英文版本,升级时存在操作系统版本约束,使用过程中还有若干已知问题需按照说明处理。

VMware Cloud Director 的对象存储扩展发布 3.0 版本,日期为 2024 年 3 月 14 日,对应构建编号 23443325。
请留意本发行说明后续的补充与更新。
VMware Cloud Director 的对象存储扩展 3.0 版本加入了这些新的能力:
1.针对 VMware Cloud Director 的解决方案附加组件安装包。
服务提供商管理员现在可以利用 VMware Cloud Director 解决方案附加组件用户界面来安装、升级或卸载对象存储扩展。采用附加组件方式部署时,该扩展会以容器应用形式在 Kubernetes 集群中运行。
服务商能够把该服务安装到两个位置:其一,在“解决方案组织”中的 Tanzu Kubernetes Grid 多云端集群;其二,位于 VMware Cloud Director 之外的、遵循 CNCF(云原生计算基金会)规范的 Kubernetes 集群。
通过 Tanzu Kubernetes Grid 的支持,这个附加组件能和 Tanzu 标准包配合,改善运维效率,其中包含负责服务负载均衡的 Contour、管理 TLS 证书的 Cert-manager,以及提供服务指标监控的 Grafana。
2.此部分针对完成部署并通过界面进行后续参数设置的情形。
通过附加组件完成安装后,服务提供商管理员可以登录 VMware Cloud Director 提供商门户,对对象存储扩展进行配置,可设置的内容包括副本数量、导入或创建 TLS 证书、连接数据库、配置存储平台等。
3.同 VMware Cloud Director 数据解决方案扩展模块对接
通过附加组件安装后,服务提供商管理员可以从“解决方案组织”里选取一个 VMware Postgres 实例,用作对象存储扩展的数据库。
4.滚动更新
通过附加组件安装后,对对象存储扩展所做的任何配置更改都会自动进行验证并应用。服务提供商管理员能通过 VMware Cloud Director 提供商门户对该扩展执行横向扩容或缩容。
5.强化了 S3 相关功能
现在支持为租户存储用户返回 ARN(亚马逊资源名称)。
改善了 Kubernetes 集群防护的操作感受。
6.对 OSIS 相关能力进行了改进。
对象存储互操作服务(OSIS)的接口得到了增强,能够兼容更多存储供应商。
7.调整支持矩阵
支持矩阵中加入了经过验证的产品版本,涵盖 VMware Cloud Director、VMware Cloud Director 容器服务扩展以及多种存储平台。
VMware Cloud Director 对象存储扩展 3.0 版本的新增特性和相关说明材料目前只提供英语版本。
支持从 2.X 版本直接迁移到 VMware Cloud Director 对象存储扩展的 3.0 版本,具体操作请参考《安装、配置与升级指南》。
VMware Cloud Director 对象存储扩展自 2.2.3 版本起,已终止对 CentOS 7 操作系统的支持。在安装或升级到 3.0 版本之前,请确保您的操作系统满足要求。
如果准备在新系统中部署此扩展,可以先用 ose config export 命令导出配置,再用 ose config import 命令导入,以此完成现有设置的转移。
在扮演云服务商进入租户单位的情境下,只能看到本地的资产。
当进入某个租户组织时,界面只显示此组织自身的本地资源;在 VMware Cloud Director 对象存储扩展里打开“控制台”或“存储桶”页面后,也只能查看和选取本地组织。
通过应用凭证进行身份验证的 S3 API 调用无法用于这些情况。
在使用 ECS 存储期间,对象标签不支持被移除。
尝试删除对象标签的操作会失败并返回错误。
用户名必须同时遵守 VMware Cloud Director 和底层存储系统的规则。两者对用户名的限制并不一致,启用该扩展后,用户名需符合双方的要求。建议采用短用户名(50 字节以内),并且只使用字母和数字字符。
每个存储桶同步任务能够处理的对象数量上限为 1000 万个。
服务商在提供商门户中为租户激活存储桶同步功能后,单个任务最多可容纳 1000 万个对象;超出这一数量的存储桶同步任务不受支持。
当利用 ECS 存储、S3 API 或“查找存储桶”选项时,不能进入其他租户组织所拥有的存储桶。在 ECS 环境中,使用这些方法同样无法访问归属其他租户组织的存储桶。
全部文档都能在 VMware Cloud Director 对象存储扩展文档页面(VMware Cloud Director Object Storage Extension Documentation page)找到。
在 VMware Cloud Director 10.6 环境中,Tanzu Kubernetes Grid 集群上部署 VMware Cloud Director 对象存储扩展 3.0 版时,扩展脚本无法从 VCD 获取容器服务扩展 API 的 kubeconfig,安装过程因此中断,并报错:“PreCreate failed: cluster's kubeconfig is not found”。
处理方式:在 VMware Cloud Director 中按下面步骤操作:
Kubernetes 的防护机制将备份保存在对象存储桶内。如果备份被重定向至另一位置,集群备份保护作业可能会显示为“部分失败”(Partially Failed)状态。
处理办法:借助 VMware Cloud Director 对象存储扩展界面,更新 Kubernetes 集群保护所用的对象存储桶,操作流程如下:
先撤销集群当前的保护状态,然后用另一个存储桶的位置再次开启保护。这样做会让 Velero 在该存储桶内重新建立备份仓库(相关说明见:https://velero.io/docs/main/backup-repository-configuration/)。
获取 kubeconfig 文件并保存到 ~/.kube/config 路径,配置好终端环境,以便使用 kubectl 和 Velero 操作 Kubernetes 集群。
执行命令 velero backup-location get bsl-aws -o json,并用 jq 读取其中的 .spec.objectStorage 字段。
如果备份存放路径没有调整,请执行下述指令,同时修改 spec.objectStorage.bucket 这一项。
执行命令 kubectl edit backupstoragelocations.velero.io bsl-aws -n velero 可修改 Velero 的备份存储位置配置。
当 VMware Cloud Director 对象存储扩展从 2.2.X 版本升级到 3.X 版本后,服务启动失败并出现错误提示:
起因:org.springframework.beans.factory.BeanCreationException,即在类路径资源里定义的名为 “flywayInitializer” 的 Bean 创建过程中发生异常。
执行 ose args set 命令,指定键 spring.flyway.ignore-migration-patterns 并赋值为 *:missing。
执行 ose service restart 命令以重新启动服务。
升级到 VMware Cloud Director 对象存储扩展 3.0 版本之后,当用户尝试从已有存储桶中移除对象时,该操作无法完成,并显示错误:“Failed to exchange user info between Cloud Director and storage platform”(即无法在 Cloud Director 与存储平台之间交换用户信息)。
当执行操作的租户用户名中含有特殊符号时,就会触发该问题。
需访问 VMware Cloud Director 对象存储扩展依赖的 Postgres 数据库。
把经过编码处理的租户用户名写入 bucket_info 表的 storage_user_id for buckets 列。
在 platform_user_mapping 表里,依据 user_name 查找对应的 platform_user_id,就能获得编码后的用户名。
在多站点、多区域场景下,当切换到远程组织下属的、名称不同的远程区域时,VMware Cloud Director 的身份验证会出错。
处理办法:无。
当 Kubernetes 集群中的某个 Pod 在主节点上挂载了持久卷时,对该集群执行备份会导致任务状态变为“部分失败”。
处理办法:执行这条指令,允许在 Kubernetes 控制平面主节点上安排 Pod:
对所有节点执行命令 kubectl taint nodes --all node-role.kubernetes.io/master-,以添加污点。
执行命令 kubectl taint nodes --all node-role.kubernetes.io/control-plane- 可以为所有节点添加污点。
在目标 Kubernetes 集群上运行恢复作业后,集群的保护状态停留在“恢复中(Restoring)”。原因可能是 VMware Cloud Director 对象存储扩展在持续跟踪恢复任务,而该任务一直显示“进行中(InProgress)”。
处理办法:按一下集群保护卡片里的“刷新(Refresh)”按键。
当你启动或检查 VMware Cloud 对象存储扩展时,扩展服务本身能正常运行,但 S3 服务无法使用,日志里会记录一条错误信息:“S3_TOKEN_AUTH_ERROR”,表示 S3 令牌认证失败。
当 S3 客户端与 VMware Cloud 对象存储扩展虚拟机之间的时钟偏差大于 20 秒时,就会发生该问题。
处理办法一:让 S3 客户端与 VMware Cloud 对象存储扩展虚拟机两者的时钟偏差不超过 20 秒(可给这台虚拟机设置 NTP 服务来校准时间)。
处理办法 2:先执行命令 oss.s3.request-expire-time=3600,接着重新启动 VMware Cloud 对象存储扩展服务。
问题现象:在多区域部署环境中,如果为租户组织启用了多个区域,“活跃区域”卡片展示的是全局消费指标,而不是每个区域各自的数据。这是因为当前版本尚不支持区域专属指标。
处理方法:无。