腳本之家服務(wù)器常用軟件

快捷導(dǎo)航

Alluxio分布式存儲(chǔ)系統(tǒng) v3.1.2

分布式存儲(chǔ)系統(tǒng)

投訴報(bào)錯(cuò)

源碼大?。?span>10.5MB
源碼語言：英文軟件
源碼類型：國外軟件
源碼授權(quán)：開源軟件
源碼類別：java源碼
應(yīng)用平臺(tái)： Java
更新時(shí)間：2024-04-21
網(wǎng)友評分：

360通過騰訊通過金山通過

10.5MB

詳情介紹

Alluxio（以前稱為Tachyon）是一個(gè)虛擬的分布式存儲(chǔ)系統(tǒng)。它彌合了計(jì)算框架和存儲(chǔ)系統(tǒng)之間的鴻溝，使計(jì)算應(yīng)用程序可以通過公共接口連接到眾多存儲(chǔ)系統(tǒng)。Alluxio項(xiàng)目源自加州大學(xué)伯克利分校AMPLab的一個(gè)名為Tachyon的研究項(xiàng)目，該項(xiàng)目是伯克利數(shù)據(jù)分析堆棧（BDAS）的數(shù)據(jù)層。

Alluxio大數(shù)據(jù)存儲(chǔ)系統(tǒng)的功能：

1、靈活的文件API：Alluxio的本地API類似于java.io.File類，提供了 InputStream和OutputStream的接口和對內(nèi)存映射I/O的高效支持。我們推薦使用這套API以獲得Alluxio的完整功能以及最佳性能。

2、兼容Hadoop HDFS的文件系統(tǒng)接口:基于這套接口Hadoop MapReduce和Spark可以使用Alluxio代替HDFS。

3、可插拔的底層存儲(chǔ)：Alluxio支持將內(nèi)存數(shù)據(jù)持久化到底層存儲(chǔ)系統(tǒng)。Alluxio提供了通用接口以簡化對接不同的底層存儲(chǔ)系統(tǒng)。目前Alluxio支持Microsoft Azure Blob Store，Amazon S3，Google Cloud Storage，OpenStack Swift，GlusterFS， HDFS，MaprFS，Ceph，NFS，Alibaba OSS，Minio以及單節(jié)點(diǎn)本地文件系統(tǒng)，后續(xù)也會(huì)支持更多其他存儲(chǔ)系統(tǒng)。

4、Alluxio層級存儲(chǔ)：Alluxio可以管理內(nèi)存和本地存儲(chǔ)如SSD和HDD，以加速數(shù)據(jù)訪問。如果需要更細(xì)粒度的控制，分層存儲(chǔ)功能可以用于自動(dòng)化管理不同層之間的數(shù)據(jù)，確保熱數(shù)據(jù)在更快的存儲(chǔ)層上。自定義策略可以方便地應(yīng)用到Alluxio，而且pin(釘住)的概念允許用戶顯式地控制數(shù)據(jù)的存放位置。

5、統(tǒng)一命名空間：Alluxio可以通過掛載功能實(shí)現(xiàn)不同存儲(chǔ)系統(tǒng)之間的高效數(shù)據(jù)管理。并且，透明命名機(jī)制在持久化存儲(chǔ)對象到底層存儲(chǔ)系統(tǒng)時(shí)可以保留存儲(chǔ)對象的文件名和目錄層次結(jié)構(gòu)。

6、Web UI：用戶可以通過Web UI瀏覽文件系統(tǒng)。在調(diào)試模式下，管理員還可以查看每一個(gè)文件的詳細(xì)信息，包括存放位置，檢查點(diǎn)路徑等。

7、命令行：用戶也可以通過./bin/alluxio fs與Alluxio交互，例如：實(shí)現(xiàn)將數(shù)據(jù)從文件系統(tǒng)拷入拷出。

系統(tǒng) 存儲(chǔ) 分布式 Alluxio

下載地址

下載錯(cuò)誤？【投訴報(bào)錯(cuò)】