Alluxio
ProductsLanguageHome
AI-3.4
AI-3.4
  • 概览
  • 部署Alluxio
    • 资源需求和兼容性
    • 在Kubernetes上安装Alluxio
    • 监控和指标
    • Alluxio 集群操作
    • 系统健康检查和快速恢复
    • 采集集群信息
  • 底层存储系统
    • 存储集成概述
    • Amazon AWS S3
    • HDFS
    • 阿里云 OSS
    • 腾讯 COS
    • 火山引擎 TOS
    • GCS
  • Client APIs
    • Alluxio Python Filesystem API based on FSSpec
    • 基于 FUSE 的 POSIX API
    • S3 API
  • 功能
    • Alluxio 命名空间和底层文件系统命名空间
    • 缓存预加载
    • Client 写回
    • 缓存驱逐
      • 基于 TTL 的缓存驱逐
      • 基于优先级的缓存驱逐
    • 缓存过滤
    • 缓存释放
    • 基于目录的集群配额
    • 文件多副本
    • 文件分片
    • 索引服务
    • I/O弹性
  • 性能基准测试
    • Fio 测试概览
    • MLPerf Storage 基准测试
    • 性能优化
    • COSBench 性能基准测试
  • 参考
    • 用户命令行接口
    • S3 API Usage
    • Third Party Licenses
  • 版本发布说明
Powered by GitBook
On this page
  • AI-3.4-9.1.0
  • AI-3.4-9.0.1
  • AI-3.4-9.0.0
  • 新功能
  • 总结

版本发布说明

Last updated 4 months ago

AI-3.4-9.1.0

Alluxio Enterprise AI 3.4-9.1.0 进一步提高了安全标准,通过修复关键漏洞增强了系统安全性,并改进了北向 S3 API 的分段上传(MPU)功能,从而提升了大文件上传的性能。

该版本淘汰了之前的 log4j.properties 配置项,并将其替换为 log4j2.xml,以完成 log4j 集成的升级。请注意,此更改与之前的 conf/log4j.properties 配置项不兼容,旧的日志配置将被忽略,必须迁移到 conf/log4j2.xml 并使用新的 XML 格式才能生效。此外,在使用 Operator 部署 Alluxio 时,要求使用 Alluxio Operator 2.1.2 或更高版本。

AI-3.4-9.0.1

Alluxio AI 3.4-9.0.1 版本增加了对 S3 UFS 操作的可配置重试,并增加了将 SeaweedFS 存储配置为类似 S3 的 UFS 的兼容性。

AI-3.4-9.0.0

最新发布的Alluxio AI 3.4 版本新增多项功能,旨在提升性能、增强资源管理并优化数据缓存策略。

新功能

基于目录的配额管理升级

先前的3.3 版本首次引入了基于目录 (Directory) 的配额管理,使用户能够在目录级别设置资源限制。该功能允许管理员对特定目录实施配额限制,但之前仅限于在文件系统根目录下的顶层目录上设置配额。目前, 该功能已升级,允许在任何目录上设置配额,并支持嵌套配额定义。更多信息请参阅。

基于目录的TTL缓存驱逐

新增的基于目录的TTL(有效时间)缓存驱逐功能允许用户对缓存条目应用基于特定目录的TTL策略。此功能提供了更加细粒度的缓存控制,确保在访问频次较低目录中的数据在指定时间后被自动驱逐。该功能有助于保持缓存数据的新鲜度和相关性,优化缓存空间并优先保留重要数据。详情请参阅。

基于优先级的缓存驱逐

总结

Alluxio AI 3.4 在数据管理和缓存策略方面新增了强大的功能。我们鼓励用户尝试使用这些增强功能来优化数据工作流。

感谢大家一直以来的大力支持!

基于优先级的缓存驱逐功能通过为特定目录划分优先级,增强了Alluxio AI 3.4 版本的缓存管理能力。此功能确保重要性更高的数据保留在缓存中,而当需要释放缓存空间时,重要性较低的数据被驱逐。这种手动划分缓存数据优先级的方式有利于优先级高的工作负载保持最佳性能。更多信息请参阅。

基于目录的配额文档
基于目录的TTL缓存驱逐文档
基于优先级的缓存驱逐文档