- YRCloudFile 軟件
- 高性能分布式文件存儲 YRCloudFile
存儲挑戰
GIS 地理信息行業涉及領域廣泛,包括城市規劃、環境保護、資源管理、國土監測、交通規劃等。通過對地理空間數據的挖掘和分析,GIS 為各行業提供決策支持,助力我國智慧城市建設和社會經濟發展。
數據量規模大
隨著無人機、地面高精度、高分辨率拍攝設備的快速發展,地理信息外業數據采集形式更加多元,中等規模城市單次采集的地理信息數據可達 5-600TB,一線城市數據量甚至可以達到 1-2PB。大規模 GIS 數據迫切需要可以支持大容量、高擴展性的存儲系統。
大規模并發
存儲支持計算服務器的并發數是一個定值,由不同的存儲系統決定,常規并發是幾十臺計算規模訪問同一套存儲集群。在小業務情況下效率不受影響,但在大業務壓力或者緊急任務情況下,存儲系統支撐不足。
主流實景三維軟件支持
GIS 地理行業通用軟件特性是混合數據處理,含大量圖片和矢量信息,存儲需優化以應對大小文件并存的挑戰,貼合業務特性,提高效率。
高性能網絡兼容
由于地理信息的處理和分析需要投入大量的計算,需要依托高效 IT 架構和數據流轉,因此,高性能計算和高性能存儲的通信需要高性能網絡的支持。
元數據管理
元數據對于 GIS 數據是非常重要的,因為它提供了關于數據的信息,如來源、質量、更新時間等。存儲系統應該支持有效的元數據管理和檢索。
存儲可靠性
存儲作為業務生產的核心環節,從素材共享到最終成果的存儲,承載業務數據全生命周期的閉環,數據可靠性和可用性對項目整體工期而言至關重要。
解決方案
焱融高性能分布式文件存儲系統 YRCloudFile 提供 GIS 行業空三和建模場景下的高性能存儲,3 臺存儲集群便可支撐 600 計算節點并發訪問,提供 PB 級地理信息圖片處理,空三階段整體效率大幅提升,同時該方案具備高可靠、業務連續性等安全保障,助力 GIS 行業蓬勃發展。在生產過程中對業務 IO 進行優化,例如對接 ContextCapture,使其空三整體效率提升 50%,原需要 20 小時完成的任務,縮短至 11 個小時完成。
方案優勢
兼容性強
焱融高性能分布式文件存儲系統 YRCloudFile 在大小文件并存場景下,采用了獨有的元數據和數據管理方式,滿足海量文件的高性能管理,可與地理信息測繪領域的各種應用系統、計算平臺和網絡環境無縫對接。
硬件通用設計
采用“軟件定義”架構,將存儲系統與存儲硬件解耦,實現存儲硬件通用性,讓客戶擁有硬件選擇權,硬件維護更簡單,保障備件可通過市場長期供應,為業務發展解綁。
全棧網絡兼容
在連接計算和存儲的網絡上,焱融高性能分布式文件存儲系統 YRCloudFile 支持全棧網絡,支持現有市面上主流的網絡設備及協議,包括以太網和 InfiniBand,全面覆蓋現有行業所有網絡要求。
存儲集群可靠性
YRCloudFile 存儲架構為冗余設計架構,實現存儲節點級故障不丟失數據的要求,提高數據的抗災能力。 同時,讀寫能力大幅度提升,最終實現可靠性和性能的雙收益。
存儲高并發設計
實景三維的一個顯著特點是要求支持計算集群的高并發訪問,采用 YRCloudFile 并行文件系統,三臺存儲集群即可支持 600 臺計算節點的訪問規模。
可擴展性設計
支持橫向擴展,在增加存儲節點的同時,容量和性能也同步增加。采用分布式元數據架構,集群規模從 3 節點到 4096 節點擴展區間,可滿足實景三維所有業務發展帶來的數據擴展問題。常規業務下,幾臺乃至十幾臺存儲即可滿足一個大規模項目的存儲要求,幾萬張實景三維圖片到幾十億張均可存儲。
業務連續性
YRCloudFile 采用了分布式架構,存儲掛載至計算集群,實現統一路徑掛載,當存儲節點發生故障時,不影響數據邏輯路徑,底層存儲故障對業務無影響,保障業務的連續性。