時(shí)間:2022-09-16
在規(guī)土行業(yè)中,存在結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)并存的情況。針對(duì)非結(jié)構(gòu)化數(shù)據(jù)我們需要對(duì)數(shù)據(jù)進(jìn)行規(guī)范命名、數(shù)據(jù)過濾等,針對(duì)結(jié)構(gòu)化數(shù)據(jù)需要對(duì)數(shù)據(jù)進(jìn)行數(shù)據(jù)接入、數(shù)據(jù)清洗、數(shù)據(jù)治理等步驟。數(shù)據(jù)的融合、合并、過濾是數(shù)據(jù)處理中經(jīng)常會(huì)遇到的問題。在數(shù)據(jù)量比較少的時(shí)候,手動(dòng)測(cè)試勉強(qiáng)可以。但數(shù)據(jù)量一旦增多,再靠手動(dòng)、人工就不太合適。畢竟,長時(shí)間從事重復(fù)性的勞動(dòng),人難免會(huì)出錯(cuò),利用工具處理數(shù)據(jù)的重要性顯而易見。作為規(guī)土行業(yè)信息化建設(shè)商,南康科技從四個(gè)方面總結(jié)出如何不斷分析數(shù)據(jù)、反復(fù)處理保證提升數(shù)據(jù)質(zhì)量的方法。 拿到數(shù)據(jù)之后,首先需要確認(rèn)是否是全量數(shù)據(jù),是否有遺漏、缺失。數(shù)據(jù)的完整,不僅要求其自身完整,還要保持整體的完整。自身完整是指數(shù)據(jù)的必填字段不為空,整體完整是指數(shù)據(jù)之間應(yīng)連續(xù)、無遺漏。對(duì)于空間數(shù)據(jù)而言,數(shù)據(jù)應(yīng)能完全覆蓋研究區(qū)域,沒有缺失。 對(duì)空間數(shù)據(jù)而言,準(zhǔn)確性主要包括屬性信息與圖形信息的準(zhǔn)確性。從空間上看,首先要檢查的是圖形的坐標(biāo)系是否準(zhǔn)確,其次是空間上有沒有拓?fù)鋯栴}、自相交等其他檢查項(xiàng)。從屬性上看,首先要檢查的是數(shù)據(jù)的表結(jié)構(gòu)是否準(zhǔn)確,然后檢查數(shù)據(jù)的內(nèi)容是不是準(zhǔn)確,比如數(shù)據(jù)是否規(guī)范、全角半角字符等問題。 一般,數(shù)據(jù)有自身的邏輯,可以是單個(gè)數(shù)據(jù)集本身的關(guān)系,也可是多個(gè)數(shù)據(jù)集之間的關(guān)系,甚至單條要素的單個(gè)字段,都會(huì)有一些邏輯關(guān)系。我們用一塊地的四至范圍為例,如果將宗地細(xì)分為地塊范圍和四至范圍,并將其分別存儲(chǔ)在數(shù)據(jù)庫里,地塊表與四至表之間的邏輯需要滿足一對(duì)四的關(guān)系。 某項(xiàng)目案例建設(shè)目的是為收集、梳理和規(guī)劃土地?cái)?shù)據(jù)提供契機(jī),彌補(bǔ)數(shù)據(jù)缺失和不完善的情況,同時(shí)保證數(shù)據(jù)的完整性和準(zhǔn)確性。南康科技項(xiàng)目小組利用業(yè)務(wù)地塊空間位置上的層層串聯(lián),以業(yè)務(wù)軸的形式展現(xiàn)了該地塊的全生命周期情況。其中涉及到的數(shù)據(jù)來源廣且處理過程繁雜,有6張圖形表和8張屬性表,總數(shù)據(jù)量15萬多條。項(xiàng)目小組采用搭建數(shù)據(jù)處理模型方式進(jìn)行處理,實(shí)現(xiàn)了一鍵執(zhí)行、多級(jí)檢測(cè)的基本目標(biāo)。該處理方式調(diào)整便捷、復(fù)用率高、易于實(shí)施推廣。本項(xiàng)目共使用了9個(gè)數(shù)據(jù)處理模型,可以一鍵完成圖形碎步檢查、局部狹長檢查、密度檢查、圖形融合、屬性掛接等數(shù)據(jù)處理工作。項(xiàng)目模型的搭建為項(xiàng)目的順利完成及后續(xù)運(yùn)維提供了重要支持與保障。 數(shù)字化背景下,面對(duì)紛繁復(fù)雜而又分散割裂的海量數(shù)據(jù),搭建數(shù)據(jù)處理模型有助于在打破數(shù)據(jù)孤島的基礎(chǔ)上,解決數(shù)據(jù)處理運(yùn)維難、成本高的問題。南康科技的解決方案以多視角控制數(shù)據(jù)質(zhì)量,從業(yè)務(wù)角度出發(fā),“明確需求,對(duì)癥下藥”,全面提升數(shù)據(jù)的完整性、一致性、準(zhǔn)確性、邏輯性,提升規(guī)土行業(yè)數(shù)字化質(zhì)量建設(shè)。未來,南康科技將一如既往,為客戶提供更精準(zhǔn)、更快速、更滿意的解決方案,助力規(guī)土行業(yè)數(shù)字化轉(zhuǎn)型! 






