『壹』 gis的數據是怎麼存儲的
大數據GIS是在大數據浪潮下，GIS從傳統邁向大數據時代的一次變革。大數據GIS能為空間大數據的存儲、分析和可視化提供更先進的理論方法和軟體平台，促進了傳統GIS的產業升級，為地理信息產業發展提供新的渠道和原動力，服務於我國「十三五」期間的大數據產業發展和部署。
大數據GIS
大數據領域已經出現了許多實用的IT技術，例如分布式文件系統、分布式資料庫、分布式計算框架、流處理框架等。這些技術使我們能夠使用普通機器對大數據進行處理和挖掘，但多聚焦於通用的非空間數據領域，對空間數據的專業分析能力不足。而傳統GIS由於受其IT技術框架的限制，並不能很好地應對大數據對分布式存儲與計算、流數據處理等的技術要求。
大數據GIS就是把大數據技術與GIS技術進行深度融合，把GIS的核心能力嵌入到大數據基礎框架之內，並打造出完整的大數據GIS技術體系。大數據GIS的核心技術如下圖所示：
傳統的GIS數據存儲大多是關系型資料庫,但關系型資料庫在海量數據的管理中面臨許多問題,包括高並發讀寫、難擴展等,已經成為制約GIS發展的瓶頸。同時,GIS數據中的圖片、影像數據等都是非結構化的,關系型資料庫不能合理地處理非結構化數據。而HBase以其高可靠性、高擴展性、高容錯性、高效性以及適用於海量非結構化數據存儲處理分析的優勢在處理GIS數據方面提供了另一種思路,即解決HBase應對GIS中的兩大挑戰:大規模數據處理的時延和空間位置建模.
格柵數據獲取
從表可以看出,改進後略去磁碟寫操作,在柵格數據量較少時性能反而下降。但在處理數據規模較大(如對中國地圖或世界地圖進行切片)時,會因持續寫磁碟操作,生成文件夾及切片文件數太多導致inode(索引節點)耗盡。經過約24 h的持續切片,生成海量切片小文件,導致伺服器inode用盡,即使硬碟空間仍有空餘,也無法在硬碟上創建新文件,進而切片工作無法正常完成。
若將切片直接寫入傳統資料庫(如MySQL、Oracle、PostgreSQL等),寫入速度不斷降低,導致寫入時間不可接受,後期的檢索時間也較慢。另外,海量切片小文件寫入傳統資料庫會對資料庫造成較高的負載,系統的穩定性和擴展性難以控制。
經過改進測試,對世界地圖連續切片一個月,形成83 GB的柵格數據,未經過磁碟寫操作直接寫入HBase,未出現任何異常情況。
本文對柵格數據的檢索也進行了驗證,在124 217 416條記錄的HBase表上檢索指定切片的響應時間為毫秒級(0.004 s)。同時,HBase也支持指定范圍檢索,一次返回萬級別切片的響應時間為秒級(5.077 s)。
為了對海量矢量空間數據進行高效存儲、管理與檢索,本文設計了矢量空間數據的rowkey,並將數據存儲於HBase。實驗結果顯示,對中國地圖的矢量空間數據在24 201 991條記錄的Hbase表上檢索指定空間矢量點的響應時間為毫秒級(0.021 s)。檢索線或面的響應時間為秒級,若返回一個面上的千級別的坐標點時間約為3.551 s。
針對智慧城市建設中的數據管理問題,利用HBase分布式資料庫的列存儲模型特點,設計了一種基於HBase的GIS數據管理系統,實現了對矢量空間數據與柵格數據的高效存儲、索引與檢索。GIS矢量空間數據在HBase中存儲,首先確定rowkey的設計,使得在檢索空間位置時返回盡可能少的數據請求,即在檢索時既考慮經度與緯度,又考慮空間數據類型和圖層屬性。設計了基於表名、空間數據類型、經緯度Geohash編碼、網格ID的rowkey方法。為了加快切片效率和減少存儲成本,本文在生成柵格數據時在mapnik切片的基礎上做了優化,使柵格數據不經過磁碟寫操作,直接寫入HBase。
參考文獻
《基於HBase的海量GIS數據分布式處理實踐》
『貳』 在ArcGIS中，怎麼把JPG格式的圖片和SHPFILE進行疊加啊
在ArcGIS中，若要實現JPG格式圖片與SHPFILE的疊加，可以考慮將JPG文件轉換成其他格式，如GeoTIFF或PNG等，以確保與SHPFILE兼容。這樣的轉換能夠確保在ArcGIS環境中進行無縫疊加操作，從而提升地圖的可視化效果。
ArcGIS作為一個全面的GIS平台，為用戶提供了一個可伸縮的開發環境。ArcObjects是該平台的重要組成部分，包含了豐富的可編程組件，從簡單的幾何對象到復雜的地圖對象，覆蓋了廣泛的地理信息系統功能。通過使用ArcObjects，開發者能夠集成各種GIS功能，構建出桌面GIS、嵌入式GIS和伺服器端GIS應用。
每一個基於ArcObjects開發的ArcGIS產品都為開發者提供了一個應用開發的框架。對於桌面GIS應用，開發者可以利用ArcGIS Desktop進行地圖設計、數據管理以及分析操作。嵌入式GIS則適用於需要在特定設備或平台中集成GIS功能的場景，如企業信息系統或移動應用。而服務端GIS則側重於提供地理空間數據和服務，支持分布式計算和大規模數據處理。
通過上述方式，開發者能夠靈活地將JPG格式圖片與SHPFILE進行疊加，從而在ArcGIS環境中實現更加豐富和專業的地圖展示效果。這不僅提升了地圖的美觀度，也增強了數據的可視化和分析能力。