Bản đồ, Excel, bản vẽ và ảnh khảo sát thường đã có sẵn. Phần mất thời gian nằm ở giữa: tìm đúng tệp, nhận ra cùng một tài sản và ghép những thông tin còn rời nhau.
Xử lý dữ liệu không gian bắt đầu từ những mối nối ấy. Trong ví dụ minh họa, điểm D-017 trên bản đồ, dòng “đèn 17” trong Excel và ảnh “trước cổng trường” được đối chiếu trước khi đưa về cùng hồ sơ. Phần dùng được tiếp tục được khai thác; phần thiếu hoặc chưa rõ được tách ra để bổ sung.
Lập danh mục nguồn và phạm vi dữ liệu
Một lần lập danh mục giúp nhìn rõ phần có thể tận dụng: bản đồ đang dùng, bảng tài sản, ảnh và hồ sơ khảo sát. Với mỗi nguồn, ghi lại người cung cấp, ngày ghi nhận, phạm vi, hệ tọa độ và quyền sử dụng. Tệp gốc được giữ nguyên; việc xử lý thực hiện trên bản sao để có thể đối chiếu lại.
Dữ liệu không gian mô tả vị trí, hình dạng hoặc phân bố của đối tượng và hiện tượng. Dữ liệu vector thường dùng điểm, đường, vùng cùng thuộc tính; raster lưu thông tin theo ô lưới, như ảnh hoặc lưới cao độ. Đám mây điểm và mô hình 3D cũng có thể tham gia quy trình, tùy đầu ra cần khai thác.
Danh mục nguồn nối các dạng dữ liệu này với việc sẽ làm: lớp nào để tìm vị trí, bảng nào giữ mã, ảnh nào thuộc đợt ghi nhận nào. Phần còn thiếu được xác định từ nhu cầu sử dụng, làm cơ sở quyết định cần sửa dữ liệu đang có hay thu thập thêm.
Xác nhận mã trước khi ghép
Tên giống nhau hoặc vị trí gần nhau chỉ giúp tìm hồ sơ để đối chiếu. Hai đèn có thể cùng được gọi là “trước cổng trường”; một đèn đã thay mới cũng có thể vẫn mang tên vị trí cũ.
Với ba nguồn ở đầu bài, có thể ghi kết quả rà như sau:
| Nguồn cần ghép | Việc còn phải làm |
|---|---|
| Điểm D-017 | Giữ mã và vị trí để đối chiếu hồ sơ. |
| Dòng “đèn 17” | Xác nhận mã tương ứng từ danh mục hoặc hồ sơ gốc. |
| Ảnh trước cổng trường | Xác minh ảnh thuộc đèn nào trước khi gắn. |
Sau khi xác nhận, lưu mã nguồn, mã đích và căn cứ đối chiếu. Dòng chưa rõ nằm trong danh sách chờ xử lý, không bị loại khỏi báo cáo chỉ vì chưa ghép được. Mã dạng “0017” cần được giữ theo quy ước, tránh để bảng tính tự đổi thành “17” nếu hai cách ghi có ý nghĩa khác nhau.
Một tài sản có thể có nhiều lần kiểm tra
Một đèn có một mã quản lý nhưng có nhiều lần kiểm tra. Các dòng cùng mã vì thế có thể là lịch sử cần giữ, không phải dữ liệu thừa để xóa.
Ví dụ D-017 được kiểm tra ở hai ngày khác nhau. Phép nối chỉ lấy dòng khớp đầu tiên sẽ làm mất một lần khỏi kết quả; phép nối tạo dòng cho mỗi lần khớp lại có thể khiến báo cáo đếm đèn hai lần. Với nhu cầu xem lịch sử, các lần kiểm tra nên nằm trong bảng liên quan, nối về cùng tài sản. Tài liệu QGIS về joins và relations giải thích sự khác nhau giữa những cách kết nối này.
Khi chỉ cần kết quả mới nhất đã được chấp nhận, việc chọn bản ghi đi theo trạng thái và ngày quan sát. Ngày nhập được giữ riêng vì hồ sơ cũ có thể đến muộn. Những kết quả cùng thời điểm nhưng khác nhau được đưa ra đối chiếu, thay vì để phần mềm lấy ngẫu nhiên một dòng.
Cách tổ chức này giúp cùng một bộ dữ liệu phục vụ được hai việc: đếm đúng tài sản và xem đủ diễn biến của từng tài sản.
Giữ lại ý nghĩa khi chuẩn hóa giá trị
Hai cột cùng tên “ngày cập nhật” có thể mang hai nghĩa: ngày khảo sát ở nguồn này và ngày nhập ở nguồn khác. Trước khi ghép chúng, người xử lý làm rõ ý nghĩa, kiểu dữ liệu và đơn vị. Tên cột có thể được thống nhất, còn hai mốc thời gian phục vụ hai việc thì vẫn giữ riêng.
Trạng thái cũng cần đọc theo nguồn. Nếu “đã xử lý” ở nguồn A là đã đi kiểm tra, còn nguồn B là đã sửa xong, cả hai không thể cùng đổi thành “hoàn thành”. Giá trị gốc được giữ, ý nghĩa được xác nhận rồi mới chuyển sang danh mục chung. Dòng chưa rõ có mã để tìm lại và hỏi người quản lý nguồn.
Phần chưa biết được phân biệt với số 0 và trường hợp không áp dụng. Chiều cao chưa đo được ghi là thiếu, cùng lý do hoặc quy ước mà hệ thống hỗ trợ; ngày quan sát chưa rõ cũng không được thay bằng ngày nhập tệp. Mô tả dữ liệu giải thích cách biểu diễn để người nhận tiếp tục dùng thống nhất.
Sau chuyển đổi, số giá trị đã ánh xạ, còn chờ và bị từ chối được đối chiếu riêng. Cách ghi này giúp tìm thông tin bị mất mà chỉ nhìn tổng số dòng sẽ không thấy.
Kiểm tra hình học theo cách dữ liệu sẽ được dùng
Cùng một lớp bản đồ có thể phục vụ tra cứu, tính diện tích hoặc phân tích mạng đường. Cách dùng quyết định những quan hệ cần kiểm tra. Hai vùng chồng nhau có thể hợp lý với vùng phục vụ, nhưng không phù hợp nếu chúng được dùng để chia địa bàn không chồng lấn.
Tính hợp lệ hình học và quy tắc nghiệp vụ vì thế được xem riêng. Một vùng tự cắt có thể không hợp lệ. Hai vùng hợp lệ vẫn có thể vi phạm quy tắc phân chia. Tương tự, hai nét đường giao nhau tại cầu vượt chưa chắc tạo thành điểm nối cho phép đi từ tuyến này sang tuyến kia.
Trước khi chồng lớp hoặc tính toán, xác nhận hệ tọa độ và phương pháp đo phù hợp với phạm vi, độ chính xác cần đạt. Đơn vị mét không tự bảo đảm mọi phép tính chiều dài hay diện tích đều phù hợp. Nếu các lớp đang lệch, bài kiểm tra nguồn và phép chuyển giúp xác định phần cần xử lý trước.
Với raster, kích thước ô, phạm vi, ô thiếu dữ liệu và cách lấy mẫu lại cùng ảnh hưởng tới kết quả. Ô chưa có dữ liệu được giữ theo quy ước riêng, tránh biến thành giá trị 0. Cách nội suy cũng được chọn theo loại thông tin, để bước xử lý giữ được ý nghĩa của dữ liệu ban đầu.
Thử dữ liệu trong công việc
Tra từ mã đến vị trí, hồ sơ và ảnh, rồi đi ngược về mã để tìm liên kết sai. Danh sách bàn giao ghi đối tượng thêm, bớt và hồ sơ chưa nối được, kèm lý do.
Khi lập danh sách tài sản theo ranh dự án, thống nhất có tính cả đối tượng chỉ chạm ranh hay không. Hai cách lọc có thể cho hai danh sách khác nhau từ cùng một bộ dữ liệu.
Thử trên QGIS. Tải dữ liệu minh họa (.gpkg) và mở hai lớp: ranh và doan_duong. Bốn đoạn giả định gồm A nằm trong, B chỉ chạm ranh, C cắt qua ranh và D nằm ngoài. Chạy Extract by location với doan_duong là lớp đầu vào, ranh là lớp so sánh. Chọn một điều kiện mỗi lượt:
| Điều kiện | Mã được chọn |
|---|---|
| Nằm trong (Are within) | A |
| Chạm (Touch) | B |
| Cắt qua (Cross) | C |
| Giao, kể cả chạm (Intersect) | A, B, C |
Khi gửi danh sách, ghi phiên bản ranh và điều kiện đã dùng. Nếu thống kê số tài sản, đếm mỗi mã một lần dù tài sản giao nhiều vùng. Kết quả lọc cho biết quan hệ hình học; việc xác định tài sản bị ảnh hưởng còn theo tiêu chí dự án.
Dữ liệu đi cùng mô tả trường, bảng đối chiếu mã, nguồn và kết quả kiểm tra. Dùng phiếu kiểm tra GIS và bài nhận dữ liệu GIS để chuẩn bị bàn giao; giữ các quy ước ấy cho lần cập nhật sau. Với đám mây điểm, xem thêm bước LiDAR thành dữ liệu GIS.
