- YRCloudFile 軟件
- 高性能分布式文件存儲 YRCloudFile
- 焱融 DataInsight
存儲挑戰(zhàn)
GIS 地理信息行業(yè)涉及領域廣泛，包括城市規(guī)劃、環(huán)境保護、資源管理、國土監(jiān)測、交通規(guī)劃等。通過對地理空間數(shù)據(jù)的挖掘和分析，GIS 為各行業(yè)提供決策支持，助力我國智慧城市建設和社會經(jīng)濟發(fā)展。
數(shù)據(jù)量規(guī)模大
隨著無人機、地面高精度、高分辨率拍攝設備的快速發(fā)展，地理信息外業(yè)數(shù)據(jù)采集形式更加多元，中等規(guī)模城市單次采集的地理信息數(shù)據(jù)可達 5-600TB，一線城市數(shù)據(jù)量甚至可以達到 1-2PB。大規(guī)模 GIS 數(shù)據(jù)迫切需要可以支持大容量、高擴展性的存儲系統(tǒng)。
大規(guī)模并發(fā)
存儲支持計算服務器的并發(fā)數(shù)是一個定值，由不同的存儲系統(tǒng)決定，常規(guī)并發(fā)是幾十臺計算規(guī)模訪問同一套存儲集群。在小業(yè)務情況下效率不受影響，但在大業(yè)務壓力或者緊急任務情況下，存儲系統(tǒng)支撐不足。
主流實景三維軟件支持
GIS 地理行業(yè)通用軟件特性是混合數(shù)據(jù)處理，含大量圖片和矢量信息，存儲需優(yōu)化以應對大小文件并存的挑戰(zhàn)，貼合業(yè)務特性，提高效率。
高性能網(wǎng)絡兼容
由于地理信息的處理和分析需要投入大量的計算，需要依托高效 IT 架構(gòu)和數(shù)據(jù)流轉(zhuǎn)，因此，高性能計算和高性能存儲的通信需要高性能網(wǎng)絡的支持。
元數(shù)據(jù)管理
元數(shù)據(jù)對于 GIS 數(shù)據(jù)是非常重要的，因為它提供了關于數(shù)據(jù)的信息，如來源、質(zhì)量、更新時間等。存儲系統(tǒng)應該支持有效的元數(shù)據(jù)管理和檢索。
存儲可靠性
存儲作為業(yè)務生產(chǎn)的核心環(huán)節(jié)，從素材共享到最終成果的存儲，承載業(yè)務數(shù)據(jù)全生命周期的閉環(huán)，數(shù)據(jù)可靠性和可用性對項目整體工期而言至關重要。
解決方案
焱融高性能分布式文件存儲系統(tǒng) YRCloudFile 提供 GIS 行業(yè)空三和建模場景下的高性能存儲，3 臺存儲集群便可支撐 600 計算節(jié)點并發(fā)訪問，提供 PB 級地理信息圖片處理，空三階段整體效率大幅提升，同時該方案具備高可靠、業(yè)務連續(xù)性等安全保障，助力 GIS 行業(yè)蓬勃發(fā)展。在生產(chǎn)過程中對業(yè)務 IO 進行優(yōu)化，例如對接 ContextCapture，使其空三整體效率提升 50%，原需要 20 小時完成的任務，縮短至 11 個小時完成。
方案優(yōu)勢
兼容性強
焱融高性能分布式文件存儲系統(tǒng) YRCloudFile 在大小文件并存場景下，采用了獨有的元數(shù)據(jù)和數(shù)據(jù)管理方式，滿足海量文件的高性能管理，可與地理信息測繪領域的各種應用系統(tǒng)、計算平臺和網(wǎng)絡環(huán)境無縫對接。
硬件通用設計
采用“軟件定義”架構(gòu)，將存儲系統(tǒng)與存儲硬件解耦，實現(xiàn)存儲硬件通用性，讓客戶擁有硬件選擇權(quán)，硬件維護更簡單，保障備件可通過市場長期供應，為業(yè)務發(fā)展解綁。
全棧網(wǎng)絡兼容
在連接計算和存儲的網(wǎng)絡上，焱融高性能分布式文件存儲系統(tǒng) YRCloudFile 支持全棧網(wǎng)絡，支持現(xiàn)有市面上主流的網(wǎng)絡設備及協(xié)議，包括以太網(wǎng)和 InfiniBand，全面覆蓋現(xiàn)有行業(yè)所有網(wǎng)絡要求。
存儲集群可靠性
YRCloudFile 存儲架構(gòu)為冗余設計架構(gòu)，實現(xiàn)存儲節(jié)點級故障不丟失數(shù)據(jù)的要求，提高數(shù)據(jù)的抗災能力。 同時，讀寫能力大幅度提升，最終實現(xiàn)可靠性和性能的雙收益。
存儲高并發(fā)設計
實景三維的一個顯著特點是要求支持計算集群的高并發(fā)訪問，采用 YRCloudFile 并行文件系統(tǒng)，三臺存儲集群即可支持 600 臺計算節(jié)點的訪問規(guī)模。
可擴展性設計
支持橫向擴展，在增加存儲節(jié)點的同時，容量和性能也同步增加。采用分布式元數(shù)據(jù)架構(gòu)，集群規(guī)模從 3 節(jié)點到 4096 節(jié)點擴展區(qū)間，可滿足實景三維所有業(yè)務發(fā)展帶來的數(shù)據(jù)擴展問題。常規(guī)業(yè)務下，幾臺乃至十幾臺存儲即可滿足一個大規(guī)模項目的存儲要求，幾萬張實景三維圖片到幾十億張均可存儲。
業(yè)務連續(xù)性
YRCloudFile 采用了分布式架構(gòu)，存儲掛載至計算集群，實現(xiàn)統(tǒng)一路徑掛載，當存儲節(jié)點發(fā)生故障時，不影響數(shù)據(jù)邏輯路徑，底層存儲故障對業(yè)務無影響，保障業(yè)務的連續(xù)性。