這項合作提出了一種新穎的方法,用於驗證和安全訪問17年的互聯網爬蟲數據。
這次發布的目標是創建行業內首個加密安全且不可變的互聯網數據存檔。
這是通過使用基於Constellation的不可變區塊鏈網絡來實現的,並且是加密安全的。
經美國國防部驗證的Web3生態系統,Constellation Network今天宣布啟動了一個與Common Crawl Foundation合作開發的定制區塊鏈。這次發布的目標是創建行業內首個加密安全且不可變的互聯網數據存檔,以用於人工智能的訓練和開發。
這項合作提出了一種新穎的方法,用於驗證和安全訪問17年的互聯網爬蟲數據,這些數據超過9PB,並被80%的大型語言模型(LLMs)用於訓練人工智能。這是通過使用基於Constellation的不可變區塊鏈網絡來實現的,並且是加密安全的。
這個革命性的應用特定網絡,也被稱為Metagraph,致力於解決人工智能開發中的重要挑戰,同時探索區塊鏈技術在新興行業中的巨大新用例。這些用例包括道德採購、數據來源和隱私。此外,為了確保存檔的互聯網爬蟲的安全性,該網絡將利用Constellation提供的DAG實用資產。
通過將重點從消費者費用或許多其他第一層網絡常見的燃料費轉移到運營支出,這標誌著在利用加密技術作為企業公證數據機制方面的一項重大進展。
關鍵技術創新
全面數據存檔:一份互聯網歷史的記錄,無法以任何方式更改,為人工智能和機器學習數據集提供無與倫比的透明度和可追溯性。
端到端加密:這是一種加密安全性,確保數據在整個人工智能開發生命周期中的完整性。
道德AI框架:道德人工智能框架是一種強而有力的方法,解決大型語言模型中數據收集、存儲和使用的問題。
Constellation Network的首席技術官Alex Brandes表示:
Constellation是一個領先的區塊鏈網絡,通過鏈上數據安全推動創新。它與美國國防部等全球主要利益相關者合作,以提供具有革命性和下一代的創新。
行業應用
這個由區塊鏈技術支持的數據存檔已經引起了成熟的人工智能研究團隊的關注。為了為其訓練模型增添不可變性、可審計性和作者證明,TraceAI,一個通過國家科學基金會(NSF)和SBIR計劃開發的項目,正在開發其基於Constellation的應用特定網絡的測試階段。此外,TraceAI將利用Common Crawl開發的Constellation解決方案,進一步擴展其在區塊鏈加密人工智能中的工作,以監控數據的來源。
Forward EdgeAI的太空領域通信與商業化副總裁Kevin Jackson強調了這一突破的重要性:
展望未來
在接下來的幾個月裡,Constellation Network和Common Crawl Foundation將合作擴大人工智能開發者的解決方案範疇,並更好地將加密驗證訪問爬蟲作為常規發布過程的一部分進行整合。
Common Crawl的執行董事Rich Skrenta表示:
Common Crawl Foundation是一個501(c)(3)非營利組織,致力於將互聯網的副本免費提供給公眾。他們擁有一個包含PB級數據的網絡存檔,這些數據是他們在多年互聯網爬蟲過程中收集的。這個存檔是全球學者、企業和開發者的重要資源。
可以在Constellation提供的交易查看器上找到這一整合的證據,該查看器被稱為“DAG explorer”,開發者可以開始利用經過驗證的歷史爬蟲用於人工智能應用。關於Constellation、Forward Edge-AI和Common Crawl將開發的進一步解決方案,我們請您持續關注。
關於Forward Edge-AI
Forward Edge-AI正在引領一場負責任和包容性的人工智能(AI)革命,以造福人類,該公司站在這場下一次革命的最前沿。自2019年成立以來,公司的目標就是成為人工智能領域的佼佼者,並引領與人類智慧與尖端技術融合相關的革命。