大小:13.4M 软件类型:国产软件
软件语言:简体中文 时间:2021-09-21 16:01:25
软件授权:免费软件 运行环境:WinAll
Alluxio是一个虚拟的分布式存储系统,它在计算框架和存储系统之间搭建了一座桥梁,使计算应用程序能够通过一个公共接口连接到众多的存储系统。Alluxio项目源于加州大学伯克利分校AMPLab的研究项目Tachyon,它是伯克利数据分析堆栈(BDAS)的数据层。
软件功能
1.灵活的文件API:Alluxio的本地API类似于java.io.File类,提供了InputStream和OutputStream之间的接口以及对内存映射I/O的高效支持.我们推荐这个应用编程接口来获得Alluxio的全部功能和最佳性能。
2.与Hadoop HDFS :兼容的文件系统接口基于这个接口,Hadoop MapReduce和Spark可以使用Alluxio代替HDFS。
3.可插拔底层存储:Alluxio支持将内存数据持久存储到底层存储系统。Alluxio提供了一个通用接口来简化不同底层存储系统的对接。目前,Alluxio支持微软Azure Blob Store、亚马逊S3、谷歌云存储、OpenStack Swift、GlusterFS、HDFS、MaprFS、Ceph、NFS、阿里巴巴OSS、Minio和单节点本地文件系统,未来还将支持更多其他存储系统。
4.Alluxio分层存储:Alluxio可以管理内存和本地存储,如固态硬盘和硬盘,以加快数据访问速度。如果需要更细粒度的控制,可以使用分层存储来自动管理不同层之间的数据,确保热数据位于更快的存储层上。自定义策略可以很容易地应用于Alluxio,pin的概念允许用户明确控制数据存储的位置。
5.统一命名空间:Alluxio可以通过挂载功能实现不同存储系统之间的高效数据管理。此外,当将存储对象持久化到底层存储系统时,透明命名机制可以保持存储对象的文件名和目录层次。
6.Web UI:用户可以通过Web UI浏览文件系统。在调试模式下,管理员还可以查看每个文件的详细信息,包括存储位置、检查点路径等。
7.命令行:用户也可以通过。/bin/alluxio fs,例如,将数据复制到文件系统中和从文件系统复制数据。
显示全部
Alluxio(虚拟分布式存储系统),Alluxio是一个虚拟分布式存储系统,它架起了计算框架和存储系统之间的桥梁,使计算应用能够通过一个通用接口连接到众多的存储系统,Alluxio项目起源于加州大学伯克利分校AMPLab的一个名为Tachyon的研究项目,该项目是伯克利数据分析栈(BDAS)的数据层,您可以免费下载。
简体中文 13.4M 免费软件