【告別Google Map】破解隱藏套丁地 升級地圖技術全攻略
好多人問本研社研究員平時究竟點搵地同點樣分析大量嘅土地資料。其實唔係咩秘密,我哋主要係運用地理資訊系統(Geographic Information System, GIS)工具,將啲空間數據(spatial data)有系統咁整理、分析,我哋唔少嘅研究就係咁樣誕生㗎喇!以往我哋發佈報告用嘅GIS 工具係Google Map, 功能方面確有限制,例如圖層(layers)數量有限。
唔知大家有冇留意,最近我哋幸得友人技術相助,今次我哋發佈《草木皆丁-發展新界潛在違規丁地可行性研究報告》嘅地圖資料庫,已經靜靜地升級咗做「ArcGIS online」版本 。
【研究神器升級】草木皆丁地圖資料庫即刻睇:https://bit.ly/3b3skNc
內裡紀錄著全新界潛藏潛在違規丁地嘅地圖庫已全面開放,絕不收費,市民大眾可以隨時、隨地參閱同使用今次研究地圖庫嘅數據,繼續跟進違規丁地最新發展,有助將研究成果貨如輪轉,成為其他民間團體嘅倡議同研究養份。
「ArcGIS online」除咗地圖底圖可以更多選擇外,表意上亦比Google Map 更為清楚。更加重要嘅係,佢嘅地理資訊分析能力,亦比Google Map 強大。現時潛在套丁土儲地圖庫嘅地圖圖表(attribute table),包含每塊潛在套丁土儲嘅名稱、大小、涉及丁屋數量以及所在鄉村,將會連結空間圖徽(feature),格式統一的地塊資料唔再單純為描述文字,而係可經整理同分析嘅數據。因而,今次經升級的地圖資料庫可以呈現更加清晰簡潔嘅資料分類,有利日後民間繼續對違規丁地跟進調查、趨勢統計以及空間分析。
以往我哋依賴嘅Google Map 有圖層(layer)功能上嘅限制,最多只能放10層圖層。圖層限制令我哋無法將大量嘅空間數據放喺同一檔案中整合分析,例如由於全港地段索引資料過於龐大,很難將地段索引資料直接置放於google map之上,變相難以全面地搜挖全新界潛藏套丁土儲,而「ArcGIS online」突破咗Google Map 喺圖層(layer)功能上嘅限制。
《草木皆丁》之所以能夠完成,全靠ArcGIS online中增加咗圖層數量嘅特點,對現有鄉村範圍、鄉村式發展用地、政府丁地、地段索引圖、新發展區規劃圖、甚至2017年棕地分佈等等多個圖層數據進行大量cross-checking嘅工夫。除咗快速地識別出現時787個潛在套丁土儲的表徵,亦從中揭發出哂界的潛在套丁土儲、「先破壞,後套丁」侵蝕濕地漁塘的可能以及新發展區收地故意避開原居民村等個案,搜挖出這些潛藏違規丁地多方面的問題。今次大家將會見到更加「花哩花碌」的新界,視覺化地呈現新界「騙」地開花。
今次本研社升級地圖工具,與其話方便咗我哋做研究,其實目標係更多為鼓勵民間共享、保存及再用這些土地資料,務求逐漸建立民間土地資訊共享平台,實踐協作式研究,培育民間研究力量。
下一步,我哋計劃將過往多年地圖資源上載至ArcGIS online,以提升民間土地資料庫完整度及品質。遺憾嘅係,每解鎖更多圖層限制,所牽涉嘅開支亦會增加,暫時我哋無法負擔。
現時尚未能夠「解鎖」嘅資料例如:
- 富豪短租官地分佈地圖
- 中港地產商在英國的住宅項目分佈地圖
- 1993、2003、2017年新界棕土擴張歷史軌跡與現況地圖
- 新界西北魚塘業權分佈地圖
- 香港隱藏臨時使用及閒置官地地圖
最後,面對現時資訊自由日益收窄,隨時有「被下架」嘅可能,因而建立民間土地資料庫倍加重要。希望有心人可以懲罰是次升級,對我哋民間土地資料庫嘅經營同維持有所支持!
#絕非廣告
#揭露丁權自肥計劃
#民間研究方法升級
#土地資訊已Backup
配合住全新界「騙」地地圖庫,有興趣可以喺以下連結細閱埋研究報告,冇咁多時間細讀,都歡迎望下個簡報同大大力share俾朋友:
《草木皆丁》報告全文:https://bit.ly/3nFeDcA
《草木皆丁》研究簡報:https://bit.ly/33b66EQ
希望各位可以繼續支持我地嘅丁屋研究工作,有餘力可幫忙懲罰是次研究嘅基本開支,高質研究必定會陸續有嚟!
— 是次研究基本開支 —
資料整理:$2,500
安心查冊:$3,000
內部印刷:$1,000
報告推廣:$2,000
落地考察:$2,400
研究員心力:無價
= $10,900 (抵到爛,其實駛乜收地產商錢)
︴支持研究丁地 需要懲罰我地 ︴
▍自訂金額支持丁屋研究工作
https://www.paypal.com/cgi-bin/webscr?cmd=_s-xclick&hosted_button_id=ACP8TJDJNZP4J
▍FPS ID:5390547
▍HSBC PayMe 捐款支持:https://bit.ly/32aoOMn
▍月捐支持:https://liber-research.com/support-us/
研究義工大招募報名:https://bit.ly/2SbbyT3
「arcgis破解檔」的推薦目錄:
- 關於arcgis破解檔 在 本土研究社 Liber Research Community Facebook 的精選貼文
- 關於arcgis破解檔 在 [心得] ArcGIS用電腦- 看板GIS - 批踢踢實業坊 的評價
- 關於arcgis破解檔 在 arcgis pro破解2023-精選在臉書/Facebook/Dcard上的焦點新聞 ... 的評價
- 關於arcgis破解檔 在 arcgis pro破解2023-精選在臉書/Facebook/Dcard上的焦點新聞 ... 的評價
- 關於arcgis破解檔 在 GIS - Download ArcGIS 10.7 (with license and crack)..... 的評價
- 關於arcgis破解檔 在 GIS के हो ? How to Install ArcGIS 10.8 and Crack ? अव फ्रिः मा ... 的評價
- 關於arcgis破解檔 在 ArcPro安装与破解 的評價
- 關於arcgis破解檔 在 Automate Road Surface Investigation Using Deep Learning 的評價
arcgis破解檔 在 arcgis pro破解2023-精選在臉書/Facebook/Dcard上的焦點新聞 ... 的推薦與評價
ESRI ArcGIS Desktop 10.8 for win64安裝破解教程(附注冊機破解補丁綠色安裝版) ... ArcGIS Pro破解版是一款專業強大好用的桌面gis應用軟件,軟件可以與 ... ... <看更多>
arcgis破解檔 在 arcgis pro破解2023-精選在臉書/Facebook/Dcard上的焦點新聞 ... 的推薦與評價
ESRI ArcGIS Desktop 10.8 for win64安裝破解教程(附注冊機破解補丁綠色安裝版) ... ArcGIS Pro破解版是一款專業強大好用的桌面gis應用軟件,軟件可以與 ... ... <看更多>
arcgis破解檔 在 [心得] ArcGIS用電腦- 看板GIS - 批踢踢實業坊 的推薦與評價
這是我在PC-Shopping板的文章
給有興趣的人參考一下
------------------------------正文開始---------------------------------
小弟我是一個使用ArcGIS的工作者
有時運行比較吃資源的功能 或是處理的範圍比較大(通常都是一個國家範圍)
有時候跑一跑就好幾個小時 不開心的時候還可以跟你跑個好幾天
我是可以等 但是甲方和經理就會一直催XD
所以一直很想知道怎樣的電腦設備可以讓ArcGIS跑起來最快最順
可以幫我省點時間 做事也比較有效率
前陣子常常逛電蝦版 只能說這版實在太可怕了
被燒到把本來要戰5年的1230 v3賣掉換成i7-5820K
看看換成x99能不能真的插久久
再加上因緣際會之下有機會接觸 Dual E5-2620 v3的電腦
難得有機會用到這麼多核的電腦
所以就決定來測試一下ArcGIS到底在怎樣的電腦上跑比較適合
於是就有了這篇文章了
不過要先說 我的測試沒有這麼嚴謹 大家參考參考就好
畢竟有很多變因我無法控制
然後這篇文很長 如果沒耐心直接看結論就可以了XDDD
--------------------------------------------------------------------------
電腦一
CPU: i7-5820K OC 4.4GHz
MB: Asus X99-M WS
RAM: Kingston DDR4 16GB 2133MHz*2
HDD: Toshiba 3TB
SSD: Toshiba Q300 Pro 256G
電腦二
CPU: E5-2620 v3*2
MB: unkonw
RAM: DDR3 36GB
HDD: unknow
電腦三
CPU: i5-4570
MB: unknow
RAM: DDR3 4GB 1600MHz*2
HDD: Toshiba 2TB
以下測試就以CPU型號當做每台電腦的代號
使用OS皆為Windows 7 Ultimate 64Bit
ArcGIS軟體為 ArcGIS 10.4.1
運行資料為Aster Global Digital Elevation Model(30M) https://goo.gl/EdYYq6
The Earth’s Relief (15M) https://goo.gl/aOf3RC
資料範圍為全台灣的DEM
在ArcGIS裡面 雖然有說ArcGIS 10以後的版本都支援多核心&多CPU
但是更詳細的內容有提到 大部分的Function是用一個核心跑ArcGIS 一個跑Function
而不是我認為的用兩個以上的核心去跑Function
這樣的多核支援根本算是全殘...
不過另外也有提到 有幾個Function是真的可以用兩個以上的核心去跑的
可以這樣跑的Function大部分都在Geostatistical Analyst(GA)裡面
這些才有參數可以設定你要用幾個核心去跑 其他都是沒有的
詳細情形可以看這裡 https://goo.gl/Szppcw
再來可以跑多核心的就是ArcGIS Server的cache了
所以只會測這兩項
以下測試會分為
1. 全殘多核Function測試
(Raster to Polygon, Select by attribute, Aggregate, Contour, Smooth Line)
2. 多核Function測試(Geostatistical Grid, Cache)
3. SSD和HDD測試(Cache部分)
P.S. 裡面會看到Full和Auto Full是指關掉CPU省電功能 Auto則是打開
1. 全殘多核Function測試(其實我很想說根本單核性能測試)
1-1 Raster to Polygon
這裡的測試沒有E5那一台的電腦 因為是後來才增加的測試項目
這裡可以看到5820K的處理速度大概是快了將近兩倍
把省電功能關掉也可以增加將近15%的效能
1-2 Select by Attribute
這裡的結果也不太意外
E5的時脈較低 在單核部分被兩顆高時脈的CPU慘電是正常的
在這部分E5的效率只有5820K的37% 基本上應該算是海放惹
i5的表現還算可以 有77%
1-3 Aggregate
在這項功能測試裡
E5和i5分別有68%和84%的5820K效能
E5的效能和上面的效能差距有點大 差了將近兩倍有
不太確定原因 目前只能推測是功能運算上也許差異
1-4 Contour
這裡可以看到5820K在開啟省電的狀況下表現最差 但是跟E5的成績差不多
關閉省電之後從花49秒變成29秒 效能成長70% 跟第一個項目的增加15%差了很多
E5和i5則是跟上面那項測試結果差不多 i5速度還是比E5快20~30%
1-5 Smooth Line
這一項測試一樣沒有E5
這大概是i5表現最差的一項測試
跟5820K Auto差距來到54%
5820K Full跟Auto的效能 跟第一項測試差不多 差了18%
上一項差了70%有點誇張...
2. 多核Function測試
2-1 Geostatistical Grid
這一項也是後來加測的 一樣沒有E5
不過從這裡就可以看出多核心的優勢了
5820K的效率比i5的效率高了兩倍以上
2-2 Cache 不同電腦測試
ArcGIS Cache的資料輸出比較特別 有Bundle和Exploded兩種格式
Bundle是把Cache資料打包成ㄧ個比較大檔案
Exploded則是維持Cache原始的小檔(10K左右)
前者的硬碟負擔比較小 後者因為小檔寫入的關係 會很吃硬碟速度
這裡我會把兩種檔案格式的結果都列出來
這裡可以看到一路挨打的E5終於可以出一口氣了
成績和5820K相去不遠 但處理速度將近i5的兩倍
這裡比較有趣的是 E5的Bundle和Exploded兩種資料格式的速度是差不多的
我推測可能不明原因導致E5的bundle變慢 不然bundle應該是會快蠻多的
2-3 Cache 不同電腦同核心數測試
這裡是想單純看看用相同核心數去跑 是否高時脈的還是一樣會勝出
這裡可以看到 跟推測的一樣
時脈的高低還是會影響結果 5820K大概贏了20%左右
後來才想到也許也有可能是不同系列的CPU影響?
以後有機會在測試同CPU不同時脈跑的結果吧XD
2-4 Cache 同CPU不同核心數測試
這裡是想看看確定多核心到底能夠增加多少效能
這裡可以看到 愈多的核心的確可以增加愈多的效能
4核到8核的時後增加了約60%的效能 8核到12核的時候也增加了60%的效能
真想拿個24核的來試看看是不是這樣一直60%增加下去XD
2-5 Cache SSD VS HDD
因為我推測Bundle和Exploded兩種資料格式會因為硬碟讀取效率有差異
所以多測了這項
P.S. XXX to YYY 是指input資料在XXX output cache在YYY
SSD to SSD和HDD to HDD 資料和Cache都是不同硬碟 避免影響
可以發現在Bundle格式的時候 不管在哪種硬碟裡面作業
效能其實都差不多的 只差了1%左右
但是在Exploded的時候就不一樣了
可以看到資料output在SSD的時候速度是最快的
如果output在HDD的時候可能低到剩60%左右的效能
-----------------------------------------------------------------------------
結論:
1. 取消CPU省電功能,跑Function時有較好的效能。
2. 如果不會使用多核Function時,買電腦的時候選時脈高的會比較有幫助。
3. 使用多核Function時,核心數及時脈高對效能都有一定的提升作用。
4. 本次測試下,對多核心功能而言,高時脈的幫助可能大於多核心。
(6C12T VS 12C24T還是贏這樣 不過不排除ArcGIS對雙CPU優化太差的可能性XD)
以上提供給想買電腦的ArcGIS使用者做參考
--
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 111.248.178.196
※ 文章網址: https://www.ptt.cc/bbs/GIS/M.1480596370.A.C27.html
跑Geoprocessing tools的話其實沒差 除非ESRI的網頁騙我XD
請參考https://goo.gl/ozHLOH
節錄
Are geoprocessing tools faster in ArcGIS Pro?
Geoprocessing performance is roughly equivalent between ArcGIS Pro and
ArcMap.
ESRI解釋多核心和平行運算
One additional note: multithreaded is not the same thing as parallel
processing! Parallel processing is a technique which splits up a big job into
many smaller jobs and allows multiple CPUs or processes to work on the big
job at the same time, often resulting in faster processing time. A growing
number of geoprocessing tools leverage parallel processing to improve
performance. In the first release of Pro, there are 25 tools that support
parallel processing, including a number of geostatistics tools and Spatial
Analyst tools.
這裡可以解釋多核心和平行運算在tools裡面的差別
多核心對於Geoprocessing tools是沒有用的 除非是有支援平行運算的tools
所以除非你要跑有支援平行運算的tools
不然選核心超過4個的CPU可能都是多餘的 不如選時脈高的CPU
ArcGIS Pro 支援平行運算tools請參考https://goo.gl/yRbqJJ
ArcGIS 10.4 支援平行運算tools請參考https://goo.gl/Szppcw
P.S.其實Pro有支援平行運算的tools 在10.4裡面大部分都有
※ 編輯: freshego (49.214.81.253), 12/02/2016 11:10:23
那就是原廠的資訊騙我QQ
請問是哪個分析工具 我也來測試一下:)
※ 編輯: freshego (123.204.62.144), 12/05/2016 08:55:23
感謝 等我裝好ArcGIS pro來測一下
--測試結果--
ArcGIS Pro ArcGIS 10.4.1
Contour 45.0 57.6
Select by attribute 11.8 44.0
Raster to polygon 813.8 486.6
Smooth 27.9 29.6
在Contour部份 ArcGIS Pro大概是快有將近30%的速度 但是好像沒有4倍這麼多
在Smooth部分 ArcGIS Pro也是比較快 但是差距大概在10%內
以上兩個是用內政部20M的做出來的結果
Select by attribute這邊ArcGIS Pro就真的有快到4倍了
推測是64位元的系統有產生效果?
不過在Raster to ploygon部分 104.4.1快大概有70%左右
以上兩個是用另外的資料跑的 因為台灣的範圍太大要跑好久XD
結論是
我想快或慢可能隨著tools不同會有變化
所以官方才不敢說誰比較快 所以給個差不多快的說法吧
P.S. 以上資料都是跑5次後平均的時間
※ 編輯: freshego (123.204.62.144), 12/06/2016 17:29:37
... <看更多>