核心内容摘要
Nanobot智能文档处理：合同分析与信息抽取
对象存储的核心概念是什么与块存储、文件存储的区别对象存储存储对象数据元数据全局唯一ID。
扁平结构通过RESTful API访问适合海量非结构化数据。
块存储将数据分割成固定大小的“块”直接由操作系统管理格式化为文件系统。
如硬盘性能高用于数据库、ERP等。
文件存储有目录树结构的存储通过NFS、SMB等协议访问符合传统文件使用习惯用于文件共享、NAS。
解释一下对象存储中的Bucket和Object分别是什么Bucket存储空间是对象的容器名称全局唯一是设置权限、生命周期规则的基础单元。
Object存储的基本单元即文件本身包含数据Data、键Key/文件名和元数据Metadata。
对象存储的主要优势和劣势是什么优势海量扩展性容量近乎无限。
高持久性数据可靠性高达11个
9
999999999%。
成本低廉按需付费易于访问通过HTTP/HTTPS协议访问天然适合Web和移动应用。
劣势延迟较高不适合需要毫秒级延迟的 transactional 数据如数据库。
无法直接修改只能覆盖整个对象或追加如果支持不支持文件块的随机读写。
什么是数据的“持久性”和“可用性”对象存储通常如何保证持久性数据在指定时间内不丢失的概率。
对象存储通过多副本复制或纠删码技术将数据分散存储在多个设备、机架上保证硬件故障时数据不丢。
可用性服务能够正常提供访问的时间比例。
通过冗余架构和故障自动切换来保证。
对象存储有哪些常见的存储级别它们分别适用于什么场景标准存储高持久、可用性访问频繁的热数据。
如网站图片、移动App、动态短视频。
低频访问存储持久性高可用性略低访问频率少但需快速读取。
如每月访问几次的日志文件、备份数据。
归档存储成本最低但读取前需要解冻耗时几分钟到几小时。
用于合规性存档、医疗影像等长期保存的冷数据。
冷归档存储比归档更冷解冻时间更长成本极低。
用于法定必须保留多年的数据。
如何设计一个大型图片/视频分享网站的对象存储架构Bucket设计按业务拆分Bucket如 avatar-images, short-videos, backup-logs。
命名与目录使用合理的Object Key如 users/{uid}/avatars/{timestamp}.jpg。
权限管理设置Bucket策略头像Bucket可设公共读原始视频Bucket必须为私有。
生命周期规则为日志Bucket设置规则30天后自动转为低频或归档存储1年后删除。
结合CDN为存放图片/视频的Bucket接入CDN加速全球用户访问降低OSS流量成本。
数据处理使用图片处理、视频截帧等功能无需下载原文件即可生成缩略图等。
如何保证对象存储中的数据安全权限控制IAM策略、Bucket Policy、ACL、防盗链。
传输加密强制使用HTTPS。
静态加密服务器端加密SSE-S3/SSE-KMS、客户端加密。
日志与审计开启访问日志记录操作审计。
版本控制防止数据被误覆盖或删除。
解释一下生命周期管理Lifecycle Policy及其应用。
可以定义规则使对象在指定时间后自动转换存储级别或过期删除。
例如日志文件生成7天后从标准存储转为低频存储。
项目备份文件生成1年后转为归档存储。
临时文件3天后自动删除。
强一致性、最终一致性对象存储通常提供哪种模型现代对象存储如阿里云OSS、S3在覆盖写入和删除操作上已提供强一致性即写入成功后后续所有读取都会立即看到最新数据。
但在列出桶内对象列表等操作上可能是最终一致性。
什么是“冷热数据分层”它如何帮助企业降本增效根据数据的访问频率热、温、冷自动将其移动到不同性能、不同成本的存储层级。
通过生命周期规则自动化这一过程确保高访问数据高性能低访问数据低成本实现总体TCO最优。