跳到內容

同一套清理流程不想再點一百次

批次處理與圖形模型器

M2進階約 45 分鐘

草稿|步驟依 QGIS 3.44 手冊撰寫,尚未在 QGIS 4 實機驗證

前面幾個單元的清理流程(設定 CRS、篩選 CAD 圖層、補斷點、轉面、修復幾何、算面積)做一次要點十幾下。實務上會碰到兩種重複:

  • 同一個工具,很多份資料:三十個鄉鎮的檔案都要重新投影、都要修復幾何。
  • 同一串工具,每個案子都要做:每次收到 DXF 都是同一套步驟,換個承辦人就做得不一樣。

前者用批次處理介面,後者用圖形模型器(Model Designer)。兩者可以疊用:模型做好之後,也能用批次介面一次跑很多份資料。

  • 至少 3 個同類型的向量檔,放在同一個資料夾(例如把一個圖層依欄位用 分割向量圖層 Split vector layer 拆成多個檔)。
  • 一份 M2-04 用過的線圖層,用來建立「線轉面+修復+算面積」模型。

A. 批次處理:一個工具跑多份資料

Section titled “A. 批次處理:一個工具跑多份資料”
  1. 在 處理 Processing ▸ 工具箱 Toolbox 找到工具(例如「修復幾何 Fix geometries」),右鍵 ▸ 以批次處理執行 Execute as Batch Process。已開啟工具對話框時,也可以按左下角 以批次處理執行 Run as Batch Process…。

  2. 批次表格每一列是一次執行。第一列輸入圖層欄位的 自動填入 Autofill… 選單:

    • 從開啟的圖層選取 Select from Open Layers…:勾選專案中的圖層。
    • 依樣式新增檔案 Add Files by Pattern…:指定資料夾與樣式(例如 *.gpkg),可勾選包含子資料夾。
  3. 其他參數欄位用自動填入的 向下填滿 Fill Down,讓每一列用同樣的設定。

  4. 輸出欄位:點第一列的輸出檔案按鈕,選輸出資料夾與檔名,QGIS 會提供依輸入參數自動產生其他列檔名的選項(也可用 以運算式計算 Calculate by Expression… 自訂)。

  5. 勾 完成後載入圖層 Load layers on completion(檔案很多時建議不勾),按 執行 Run,進度與錯誤會顯示在紀錄 Log 分頁。

  6. 表格右上方的儲存按鈕可把整份批次設定存成 .json,下次直接載入重跑。

B. 圖形模型器:把多步驟流程包成一個工具

Section titled “B. 圖形模型器:把多步驟流程包成一個工具”
  1. 開啟 處理 Processing ▸ 圖形模型器 Model Designer。

  2. 在左側 模型屬性 Model Properties 填名稱(例如「CAD 線轉面清理」)與群組(例如「M2」)。沒有名稱與群組無法存檔。

  3. 從 輸入 Inputs 面板拖入參數:

    • 向量圖層 Vector Layer:命名為「CAD 線圖層」,幾何類型限定為線。
    • 數值 Number:命名為「端點貼齊容差」,設預設值與合理範圍。
  4. 從 演算法 Algorithms/工具箱 Toolbox 面板依序拖入:

    1. 貼齊幾何至圖層 Snap geometries to layer:輸入與參考圖層都接「CAD 線圖層」,容差接「端點貼齊容差」,行為選端點對端點。
    2. 多邊形化 Polygonize:輸入接上一步的輸出。
    3. 修復幾何 Fix geometries:輸入接上一步。
    4. 欄位計算機 Field calculator:新增 area_m2 欄位,運算式 area($geometry)。

    每個演算法對話框中,輸入參數旁的下拉選單可切換成「模型輸入」或「演算法輸出」,這就是把步驟串起來的方式。

  5. 最後一步的輸出欄位填一個名稱(例如「清理後面圖層」),讓它成為 模型輸出 Model Output。中間步驟的輸出留空,就是暫存結果,不會出現在最終輸出。

  6. 儲存模型 Save Model(Ctrl+S)存成 .model3 檔。存在預設模型資料夾的模型會出現在工具箱中對應的群組;也可以選 存入專案 Save Model in project,只跟著這個專案走。

  7. 執行模型 Run Model…(F5)測試。模型對話框和一般工具一樣,也能右鍵以批次處理執行。

  8. 需要再往下改成程式時,可用 匯出為腳本演算法 Export as Script Algorithm… 轉成 Python(接 M10)。

批次介面只是「把同一個工具的對話框複製很多份」,每一列獨立執行,彼此沒有關聯。它解決的是資料量,不解決流程。資料量大時難免有個別檔案出問題,跑完一定要看紀錄,確認每一列都成功。

模型的價值不在「省點幾下」,而在把流程中會變的東西(輸入圖層、容差)抽成參數,不會變的東西(工具順序、行為選項、運算式)固定下來。這樣:

  • 每個案子用同一套設定,成果可以互相比較,審查時說得出資料經過哪些處理。
  • 容差這種需要判斷的參數,變成明確的輸入值,可以寫進成果說明。
  • 新人不需要記住十幾個步驟。

設計模型時,先手動把流程跑一遍並記錄每一步的參數,確認結果正確,再轉成模型。不要在模型器裡邊試邊改。

模型中每一步的輸出預設是暫存的,只有指定為模型輸出的才會寫出。除錯時可以暫時把中間步驟也設為模型輸出,檢查每一步的結果;確認無誤後再取消,避免每次執行都產生一堆中間檔。模型器也提供 執行選取的步驟 Run Selected Steps…,可只測試其中一段。

模型器適合線性、分支少的流程。需要迴圈(依每個圖幅分別處理)、條件判斷(某一步失敗就改走別的方法)、或讀寫外部檔案時,模型器會很難維護,這時匯出成 Python 腳本再修改,是比較好的路(見 M10 PyQGIS)。

症狀 原因 解法
批次執行後只有部分列有輸出 部分輸入檔有無效幾何或 CRS 問題,該列執行失敗 看紀錄分頁的錯誤訊息,個別處理失敗的檔案
批次輸出互相覆蓋 每一列的輸出檔名相同 用自動填入產生不同檔名,或以運算式加入輸入檔名
模型存不了檔 模型屬性沒填名稱或群組 在模型屬性填好名稱與群組
模型執行完沒有輸出圖層 最後一步的輸出沒有設成模型輸出 在最後一步的輸出欄位填名稱
換一台電腦模型不見了 模型存在本機設定檔的模型資料夾 把 .model3 檔放進專案資料夾或共用位置,或存入專案

本單元目前沒有對應影片。

  1. 用批次介面對資料夾中 3 個以上的向量檔執行「修復幾何」,輸出到另一個資料夾。
    • 檢查方式:輸出資料夾的檔案數等於輸入數;對任一輸出跑檢查有效性,無效圖徵數為 0。
  2. 照步驟 B 建立「CAD 線轉面清理」模型,用 M2-04 的線圖層執行。
    • 檢查方式:輸出結果與 M2-04 手動做的成果筆數相同,area_m2 欄位有值。
  3. 把練習 2 的模型存檔後,在工具箱找到它,右鍵以批次處理執行,對兩份不同的線圖層各跑一次並設不同容差。
    • 檢查方式:兩個輸出檔都存在,且容差較大的那份未閉合造成的缺漏面較少。