同一套清理流程不想再點一百次
批次處理與圖形模型器
前面幾個單元的清理流程(設定 CRS、篩選 CAD 圖層、補斷點、轉面、修復幾何、算面積)做一次要點十幾下。實務上會碰到兩種重複:
- 同一個工具,很多份資料:三十個鄉鎮的檔案都要重新投影、都要修復幾何。
- 同一串工具,每個案子都要做:每次收到 DXF 都是同一套步驟,換個承辦人就做得不一樣。
前者用批次處理介面,後者用圖形模型器(Model Designer)。兩者可以疊用:模型做好之後,也能用批次介面一次跑很多份資料。
- 至少 3 個同類型的向量檔,放在同一個資料夾(例如把一個圖層依欄位用 分割向量圖層 Split vector layer 拆成多個檔)。
- 一份 M2-04 用過的線圖層,用來建立「線轉面+修復+算面積」模型。
操作步驟(QGIS 4)
Section titled “操作步驟(QGIS 4)”A. 批次處理:一個工具跑多份資料
Section titled “A. 批次處理:一個工具跑多份資料”-
在 處理 Processing ▸ 工具箱 Toolbox 找到工具(例如「修復幾何 Fix geometries」),右鍵 ▸ 以批次處理執行 Execute as Batch Process。已開啟工具對話框時,也可以按左下角 以批次處理執行 Run as Batch Process…。
-
批次表格每一列是一次執行。第一列輸入圖層欄位的 自動填入 Autofill… 選單:
- 從開啟的圖層選取 Select from Open Layers…:勾選專案中的圖層。
- 依樣式新增檔案 Add Files by Pattern…:指定資料夾與樣式(例如
*.gpkg),可勾選包含子資料夾。
-
其他參數欄位用自動填入的 向下填滿 Fill Down,讓每一列用同樣的設定。
-
輸出欄位:點第一列的輸出檔案按鈕,選輸出資料夾與檔名,QGIS 會提供依輸入參數自動產生其他列檔名的選項(也可用 以運算式計算 Calculate by Expression… 自訂)。
-
勾 完成後載入圖層 Load layers on completion(檔案很多時建議不勾),按 執行 Run,進度與錯誤會顯示在紀錄 Log 分頁。
-
表格右上方的儲存按鈕可把整份批次設定存成
.json,下次直接載入重跑。
B. 圖形模型器:把多步驟流程包成一個工具
Section titled “B. 圖形模型器:把多步驟流程包成一個工具”-
開啟 處理 Processing ▸ 圖形模型器 Model Designer。
-
在左側 模型屬性 Model Properties 填名稱(例如「CAD 線轉面清理」)與群組(例如「M2」)。沒有名稱與群組無法存檔。
-
從 輸入 Inputs 面板拖入參數:
- 向量圖層 Vector Layer:命名為「CAD 線圖層」,幾何類型限定為線。
- 數值 Number:命名為「端點貼齊容差」,設預設值與合理範圍。
-
從 演算法 Algorithms/工具箱 Toolbox 面板依序拖入:
- 貼齊幾何至圖層 Snap geometries to layer:輸入與參考圖層都接「CAD 線圖層」,容差接「端點貼齊容差」,行為選端點對端點。
- 多邊形化 Polygonize:輸入接上一步的輸出。
- 修復幾何 Fix geometries:輸入接上一步。
- 欄位計算機 Field calculator:新增
area_m2欄位,運算式area($geometry)。
每個演算法對話框中,輸入參數旁的下拉選單可切換成「模型輸入」或「演算法輸出」,這就是把步驟串起來的方式。
-
最後一步的輸出欄位填一個名稱(例如「清理後面圖層」),讓它成為 模型輸出 Model Output。中間步驟的輸出留空,就是暫存結果,不會出現在最終輸出。
-
儲存模型 Save Model(
Ctrl+S)存成.model3檔。存在預設模型資料夾的模型會出現在工具箱中對應的群組;也可以選 存入專案 Save Model in project,只跟著這個專案走。 -
執行模型 Run Model…(
F5)測試。模型對話框和一般工具一樣,也能右鍵以批次處理執行。 -
需要再往下改成程式時,可用 匯出為腳本演算法 Export as Script Algorithm… 轉成 Python(接 M10)。
批次處理是什麼、不是什麼
Section titled “批次處理是什麼、不是什麼”批次介面只是「把同一個工具的對話框複製很多份」,每一列獨立執行,彼此沒有關聯。它解決的是資料量,不解決流程。資料量大時難免有個別檔案出問題,跑完一定要看紀錄,確認每一列都成功。
模型器的核心概念:參數化
Section titled “模型器的核心概念:參數化”模型的價值不在「省點幾下」,而在把流程中會變的東西(輸入圖層、容差)抽成參數,不會變的東西(工具順序、行為選項、運算式)固定下來。這樣:
- 每個案子用同一套設定,成果可以互相比較,審查時說得出資料經過哪些處理。
- 容差這種需要判斷的參數,變成明確的輸入值,可以寫進成果說明。
- 新人不需要記住十幾個步驟。
設計模型時,先手動把流程跑一遍並記錄每一步的參數,確認結果正確,再轉成模型。不要在模型器裡邊試邊改。
暫存輸出與模型輸出
Section titled “暫存輸出與模型輸出”模型中每一步的輸出預設是暫存的,只有指定為模型輸出的才會寫出。除錯時可以暫時把中間步驟也設為模型輸出,檢查每一步的結果;確認無誤後再取消,避免每次執行都產生一堆中間檔。模型器也提供 執行選取的步驟 Run Selected Steps…,可只測試其中一段。
什麼時候該改寫成 Python
Section titled “什麼時候該改寫成 Python”模型器適合線性、分支少的流程。需要迴圈(依每個圖幅分別處理)、條件判斷(某一步失敗就改走別的方法)、或讀寫外部檔案時,模型器會很難維護,這時匯出成 Python 腳本再修改,是比較好的路(見 M10 PyQGIS)。
| 症狀 | 原因 | 解法 |
|---|---|---|
| 批次執行後只有部分列有輸出 | 部分輸入檔有無效幾何或 CRS 問題,該列執行失敗 | 看紀錄分頁的錯誤訊息,個別處理失敗的檔案 |
| 批次輸出互相覆蓋 | 每一列的輸出檔名相同 | 用自動填入產生不同檔名,或以運算式加入輸入檔名 |
| 模型存不了檔 | 模型屬性沒填名稱或群組 | 在模型屬性填好名稱與群組 |
| 模型執行完沒有輸出圖層 | 最後一步的輸出沒有設成模型輸出 | 在最後一步的輸出欄位填名稱 |
| 換一台電腦模型不見了 | 模型存在本機設定檔的模型資料夾 | 把 .model3 檔放進專案資料夾或共用位置,或存入專案 |
本單元目前沒有對應影片。
- 用批次介面對資料夾中 3 個以上的向量檔執行「修復幾何」,輸出到另一個資料夾。
- 檢查方式:輸出資料夾的檔案數等於輸入數;對任一輸出跑檢查有效性,無效圖徵數為 0。
- 照步驟 B 建立「CAD 線轉面清理」模型,用 M2-04 的線圖層執行。
- 檢查方式:輸出結果與 M2-04 手動做的成果筆數相同,
area_m2欄位有值。
- 檢查方式:輸出結果與 M2-04 手動做的成果筆數相同,
- 把練習 2 的模型存檔後,在工具箱找到它,右鍵以批次處理執行,對兩份不同的線圖層各跑一次並設不同容差。
- 檢查方式:兩個輸出檔都存在,且容差較大的那份未閉合造成的缺漏面較少。
- QGIS 使用手冊:The batch processing interface
- QGIS 使用手冊:The graphical modeler