一文詳解Filecoin推出的AWS開源替代方案FWS

原文標題:《Filecoin推出FWS(Filecoin Web Service)! 》

作者:Filecoin Network

對我們的工程團隊來說,這是一次重要的發布日。

生態裡的工程團隊在Filecoin Web Services項目上來到了一個重要的里程碑——這次FWS發布,意味著開源替代方案在開始提供AWS、GCP和Azure這類服務的替代品。這個平台利用了Filecoin這個世界上最大的去中心化存儲網絡的潛力。

這個消息的發布,為向全世界開發者提供實際可用的雲服務替代方案邁出了重要的一步。

什麼是FWS?

FWS(Filecoin Web Services) 是在Filecoin網絡上搭建的一系列計算和存儲技術。 Filecoin網絡是一個去中心化網絡,內置了網絡收入生成機制和激勵機制。我們意識到雲服務提供了很好的開發者體驗,因此我們的雄心之一,就是在去中心化網絡可以提供的透明、開源激勵層之上提供雲級別的開發者體驗。

這個技術棧涵蓋了不同的組件,如計算、存儲和網絡資源,可被開發者用於搭建去中心化應用。 Filecoin Web Services提供的組件從設計的時候就旨在實現可擴展性、靈活性和安全性,讓其適合用於廣泛的用例。

FWS產品線

Estuary

https://estuary.tech

Estuary由不同的組件組成,如Estuary Node,這是一個容易部署和管理的Filecoin存儲節點此外,Estuary Dashboard儀錶盤提供了對用戶友好的界面,用於在這個網絡上監控和管理存儲交易提議。 Estuary也提供了不同的開發者工具和API接口(如Estuary API),讓開發者可以在Filecoin上搭建存儲應用。此外還有Estuary SDK,它提供了一系列庫和工具,用於實現與這個網絡的整合需求。

Delta技術棧

https://delta.store

Delta技術棧(Delta Technology Stack)是一個開源工具套件,用於創建和管理Filecoin網絡存儲交易提議。這包括Deltac存儲交易提議協商引擎(Deal Making Engine)、Delta大型數據集管理器(Dataset Manager for large datasets)和用於為未封裝副本(unsealed copies)提供存儲和對外訪問服務的Edge-UR Gateway網關。

細說Delta

Delta可簡化Filecoin網絡上準備和管理存儲交易提議的流程。 Delta可用於管理數據(包括版本管理、元數據管理和追踪存儲交易提議狀態),這些都讓用戶更容易在Filecoin網絡上發布自己的數據。

Delta存儲交易提議協商引擎讓用戶可以指定存儲交易提議的條款,如所需的存儲空間、價格及交易條件。之後,這個平台會使用Filecoin網絡的智能合約來強制執行存儲交易提議條款和促成交易。

一文詳解Filecoin推出的AWS開源替代方案FWS

Delta可將在Filecoin網絡上準備執行存儲交易提議的複雜過程封裝起來,為那些想在Filecoin去中心化存儲網絡上存儲自己數據副本的用戶提供了無縫的體驗。

特性:

  • 存儲交易提議計劃書準備和公告
  • 存儲片(Piece)提交計算和優化
  • E2E/導入支持(在線/離線)
  • 自動/手動修復和更新存儲交易提議
  • 錢包分配
  • 存儲提供者分配和選擇
  • Blockstore清理
  • 存儲交易提議狀態管理
  • 副本管理

Delta數據集管理器

Delta數據集管理器(Dataset Manager ,Delta DM) 工具為那些通過導入存儲交易提議(out-of-band帶外流程)而上載到Filecoin網絡的數據集提供存儲交易提議副本管理追踪服務。這為快速達成大量數據的存儲交易提議提供了解決方案,因為這種場景最好使用帶外流程來加速。

Delta DM平台提供了直觀的web界面,可簡化管理數據集的流程。它跟踪副本和DataCap配額,通過存儲交易提議拉取(pull)機制為客戶服務提供者(Client Service Providers)提供了自助服務。

這個工具與數據準備和數據傳輸的流程可以獨立開來,可以在Boost和Lotus之外運行,讓Delta DM + Delta作為獨立的解決方案來運作。

Delta導入器

Delta導入器(Importer)是一個獨立的二進製程序,旨在運行在一個存儲提供者基礎設施之上。它將CAR文件從文件系統導入Boost的流程自動化了。通過與Delta DM整合來從自主服務API請求存儲交易提議,Delta Importer促成了自動化存儲交易協商和存儲交易提議納入的流水線。 Delta DM有多個運作模式,覆蓋了一系列不同的數據納入策略。

即將到來的:

  • 失效存儲交易提議自動修復
  • Retrieval-SP——為未封裝副本指定一個單一的位置。
  • SP Metadata——詳細的副本參數

Edge-UR

Edge-UR是讓用戶在Estuary上用相同API密鑰來上傳和檢索內容的專門節點。每一個用戶都會分配到自己的節點,這些節點可以無縫切換上傳協議。雖然數據還是要通過HTTP協議上傳,Edge-UR節點可以幫助將文件傳輸到Delta節點,從而達成存儲交易提議。

總的來說,Edge-UR簡化往Estuary 上傳和檢索數據的流程,同時保證了用戶內容的安全性和可控性。

特性:

  • 輕量級IPFS節點,可與IPFS節點連通。
  • 上傳和檢索——用戶可以上傳數據並在之後馬上檢索數據。
  • 使用Delta實現異步達成存儲交易提議。
  • 追踪內容和其相關存儲交易提議。

Ptolemy

Ptolemy旨在作為一個編排引擎(orchestration engine),處理那些通常局限在S3 存儲桶或相似文件系統的大型數據集。 Ptolemy可在CAR文件裡封裝整個文件系統架構,用於達成存儲交易提議。 Ptolemy的目標是為存儲提供者和終端用戶移除數據準備相關的繁瑣工作。

FWI

Filecoin Web Infrastructure(Web基礎設施)向去中心化邁出了重要一步。它作為存儲交易提議達成引擎和其他Filecoin技術、服務的藍圖,描繪了一個低成本、可靠的計算和存儲方案,將Filecoin網絡又向前推了一步。它是一個可擴展的計算集群存儲系統和可視化集群,它包括了高可用性設計和Kubernetes編排工具.

FWI是一個開源的自動化工具,也是以代碼形式提供的基礎設施,能讓你搭建自己的“類FWI-alikes”應用,在自己的硬件上、以自己的條件運行自己的企業級客戶基礎設施。它可匹配不同硬件和軟件,所有組件都是可插拔和開源的。

FWI還有很多好處——其中之一是實現客戶專屬基礎設施(Customer Provisioned Infrastructure),讓工程團隊可以代表客戶運行基礎設施,並收取FIL作為回報——這是一個重大突破。這項工作會在未來幾週細節討論。

存儲市場

https://storage.market/

Storage.market作為數據存儲產品的信息中心,為用戶提供存儲市場的分析數據和最新的數據存儲相關新聞。這項服務對那些想及時了解產業趨勢和作出存儲產品、服務相關仔細決策的企業和個人來說尤其有用。

用戶落地

為了往Filecoin網絡上載數據,用戶需要使用特定工具和應用,讓他們可以與網絡互動並之行不同運作流程(如上傳、檢索和管理數據)。這就是Filecoin生態系統想服務的環節:我們的工程團隊正與一些客戶合作,他們正使用我們團隊的專業知識和工具,搭建往Filecoin網絡上載數據的解決方案。

與多個客戶在這些項目上合作是具有挑戰性的。因為每一名客戶都有自己的需求、用例和不同的技術能力。不過,通過我們對Filecoin網絡架構、協議和特性,以及對客戶需求和期望的了解,我們可以開發定制方案,滿足他們的需求,幫助他們利用去中心化存儲的好處。

與Radiant Earth合作

Radiant Earth這個創新機構旨在通過使用機器學習和地球觀察(EO)技術,來推動積極的全球影響。他們提供了一系列高質量的開放資源,這些資源得到了全球專業人士和研究人員的信任。

Radiant Earth其中一項核心使命,就是培育一個實踐社區,在機器學習進行地球觀察的任務上開發相關標準。這涉及聚集機器學習、地球觀察及相關領域的專家,來協作、分享知識和開發最佳實踐標準,從而以負責、高效的方式使用這些技術。

作為我們與Radiant Earth合作的一部分,我們使用自有技術棧往Filecoin網絡上載了他們一小部分的機器學習和地球觀察數據。我們了解實現這個任務的必要步驟,通過我們的工具,確保了他們的數據有妥善格式、被安全存儲、可輕鬆訪問。

我們使用的工具:

  • Ptolemy
  • Delta Dataset Manager
  • Delta Deal Making Engine
  • Delta Importer

進一步了解Radiant Earth https://mlhub.earth/

與SUCHO合作

SUCHO這個傑出的計劃由全球1,500名志願者在推動,他們正在網上協作,來數字化和保護Ukraine的文化遺產。在持續的衝突中,SUCHO已經行動起來,來保存Ukraine文化機構所屬的5,000多個網站和~40TB數據,通過全球5個不同的存儲提供者,防止這些寶貴的資源丟失或下線。

我們使用的工具:

  • Ptolemy
  • Delta Dataset Manager
  • Delta Deal Making Engine
  • Delta Importer

進一步了解SUCHO: https://www.sucho.org/

與Encloud合作

Encloud專注於數據安全,他們意識到使用Filecoin進一步提升其安全特性同時為用戶提供自由訪問的重要性。

我們正與Encloud在這方面合作,向他們開放我們的在線Edge-UR節點,來測試其概念驗證模型。

我們使用的工具:

  • Delta
  • Edge-UR
Total
0
Shares
Related Posts