2024年07月18日 星期四

科技 > IT業界 > 正文

字號:  

某省測繪院採用AS3000構建“三維空間藍圖”

  • 發佈時間:2015-03-26 14:15:00  來源:賽迪網  作者:佚名  責任編輯:書海

  當前地理資訊行業正成為跨界創新的焦點,網際網路BAT三巨頭紛紛跨界佈局地圖領域,讓外界了解到地理資訊行業中的數據其實是一所“大金礦”。其實,在測繪地理資訊技術應用的最前沿,某省測繪院早已認識到測繪大數據的價值,採用浪潮AS3000支撐起三維建模的大數據需求,構建三維空間藍圖。

  三維建模,大數據存儲是核心

  “測繪行業關乎國計民生、兩型社會、霧霾治理、智慧城市‘網格化’,以及網際網路、物聯網關聯服務業的發展,理應成為大數據應用的開路先鋒。為此,我們以提升核心競爭力為著力點,確定了以全方位立體快速數據採集能力、海量數據快速獲取能力和地理實體數字三維重建技術為核心的發展思路。”測繪院技術負責人全面介紹了“三維空間藍圖”的由來。

  

  

崀山國家地質公園數字景觀三維建模成果圖:鯨魚鬧海

  他同時還表示,“三維建模全面應用會在數據存儲和應用方面遇到挑戰,必須消除之前不利於業務發展的因素,重新構建符合新應用、新業務需求的大數據存儲系統。”那麼,在某省測繪院用集體智慧構建的未來發展戰略中,數據存儲與管理遇到了什麼問題,又為何被稱為“不利因素”呢?

  “共用難、效率低、安全差、容量小”,四大阻礙亟需突破

  深入溝通之後發現,測繪院原有的數據存儲應用模式影響著持續創新和業務發展的速度。雖然技術人員嘗試過數據存儲和管理方式的改變,但一系列問題卻在改變中接踵而至。

  存儲管理方面“先開刀”的是數據共用和訪問方式。據了解,該院下設8個職能科室、8個生産單位,但之前80%的單位數據存儲設備都比較落後,5個科室甚至還在使用傳統的伺服器本地直連形式,在數據共用和管理方面已經完全滿足不了業務發展的需求。

  為了實現更方便的數據共用訪問,某省測繪院採用了數據集中管理模式,將數據統一放在數據中心,但隨之而來又出現了性能和安全方面的問題。

  在性能方面,數十個部門、上百人同時訪問,頻寬爭用和訪問響應速度緩慢的問題出現了,這讓很多用戶開始抱怨。而之前的存儲系統無法感知存儲類型,不能優化大型非結構化數據的存儲模式,導致重復數據越來越多,訪問效率越用越低。

  在數據安全可靠性方面,也與之前的情形截然不同。據了解,該院的存儲數據主要來自於8個生産單位,最終的成果資料交由8個職能科室之一的生産技術科來管理和保密。但在共用模式下採集的數據如果丟失,將是人力物力財力的極大浪費,尤其是在國際化資訊安全趨勢持續惡劣的當下,關乎國民生計的地理資訊測數據繪絕不能被非法人員竊取。

  “上述問題是隨著需求變化和應用調整産生的,這為我們列出了‘管理、性能、安全’三項新需求。除此以外,三維重建技術應用,更要解決數據存儲容量的問題。”該技術負責人説,“測繪工作採集了大量非結構化數據,經過長時間積累可能達到PB級別,尤其是三維建模採集的數據量更大,從二維圖形到三維圖形數據量的增長是幾何倍數級的。”

  一線調研洞悉需求,AS3000支撐測繪大數據存儲

  “他們能夠深入到業務工作的一線,走訪到每個單位和科室,在這種細緻的需求調查基礎上,呈交上了一份可以解決問題、滿足業務發展、支撐‘三維空間藍圖’戰略的解決方案。”技術負責人對浪潮工程師的工作態度和解決方案都十分滿意。他表示,“前期設計方案從四個問題入手,整體性很強。重細節、看發展,這是我們最終採用浪潮測繪大數據存儲解決方案的原因。”

  根據客戶數據中心的特點、業務部門的需求,浪潮提出利用海量集群NAS 控制器AS3000搭配浪潮高性能磁片櫃、萬兆交換網路、光纖交換網路,提供PB級數據存儲、共用特性、高效安全可擴展的測繪大數據解決方案。

  

  

某省測繪院存儲系統整體解決方案

  本次方案配置8個AS3000控制節點,其中2個為元數據控制節點,實現元數據訪問、分佈式系統監控、日誌備份、系統管理功能,控制節點間採用Active-Active工作模式,保障在一個節點出現故障時,不影響主機業務運作;其餘6個為數據存儲節點,均配置高速萬兆乙太網絡,32GB高速暫存,數據節點也採用Active-Active工作模式,從而保證整個系統的安全性、可靠性、連續性。另外,方案採用高度模組化的設計,將控制節點、數據節點、存儲設備相分離元數據與數據分離架構,確保用戶數據的傳輸只發生在客戶端和數據節點之間。

  值得一提的是,存儲系統後端採用浪潮高性能磁片櫃提供648TB超大容量,前端通過雙FC交換網路連接到AS3000控制器,鏈路冗余充分保障其中一條網路鏈路故障不影響系統應用。穩定可靠的高性能磁片櫃提供了超大的後端存儲頻寬,使得AS3000如虎添翼,打造出了完美極致性能體驗。經過現場測試,兩大産品無縫整合,可提供高達6GB的聚合頻寬和線上6000的IOPS,滿足該院所有客戶端同時線上讀取數據。

  

  

浪潮AS3000集群NAS存儲系統

  在實際運作中,浪潮AS3000集群NAS存儲系統完全並行化的解決方案讓用戶不必再為性能擔憂。針對測繪地理資訊的工作流、讀密集型以及大型文件的訪問特點,浪潮AS3000支援單個目錄下文件數量達到千萬以上,每秒104到105個操作的元數據處理吞吐率,即使全院所有客戶端同時讀取同一個目錄下的一個文件,也不會出現卡頓滯留的現象。

  在海量數據存儲和訪問需求面前,浪潮AS3000獨特的高性能、集群架構可實現多控制器的數據併發讀寫,控制器還可根據用戶需求靈活地實現線上擴展。將“三維空間藍圖”戰略落地,某省測繪院需要保存的數據量將會急劇上升,在AS3000多種擴展方式中,雙方溝通後選擇了scale-out方式,即增加數據節點的數量和後端磁片櫃的數量,達成了日後性能和容量擴展的規劃。

  從幾小時到幾分鐘,三維建模效率飛速提升

  “AS3000是浪潮自主研發的擁有完全自主智慧財産權的海量存儲系統平臺,其完全國産化的背景,可以細分許可權的安全策略,讓我們在數據安全保密方面能力大幅提升,有效防止了數據被監控、被竊取的事件發生。另外,系統還支援重復數據刪除技術,極大地節省存儲空間,全院同樣的文件只保存一份,而映射給用戶的是多份,並且不影響用戶的讀取速率體驗。這套安全可擴展的存儲平臺,能夠支撐起我院所有單位的應用業務,大大提升了我院的工作效率。”項目實施後,測繪院技術負責人給出了滿意的評價。

  那麼,與之前相比,工作效率到底提高了多少呢?

  在測繪院工作多年的一位測繪工程師表示,“原先的存儲設備面對這類大型非結構化數據的讀取和寫入顯得無能為力,這嚴重的影響後期的技術製作,拖延了模型成果的生成,成為了提升市場競爭力的瓶頸之一。過去,三維地理模型製作時,數據的讀取可能需要幾小時的時間,然而現在短短幾分鐘內就能完成所需求數據的下載與上傳,工作效率提高了十余倍,乃至數十倍。”

  • 股票名稱 最新價 漲跌幅