如何確保地理數據的准確性

❶ 大數據時代，如何保證數據的安全和准確

數據的准確性無非就是兩個方面：1、數據源本身准確無誤；2、使用數據源的邏輯准確無誤

1、對於數據源本身質量，由於數據分析師接觸到的數據基本上是經過了數據清洗、數倉建模之後的數據，換言之，已經是加工後的數據，已經處於數據鏈的下游，所以數據准確性更多的是數倉層面保證，數據分析師要做的就是根據自己的業務sense對數據做核驗，發現數據中是否有異常數據

2、對於計算邏輯，還可以分為數據表邏輯和清洗規則了解，以及自己算的指標准確性，具體來說：1)要清楚所用數據表的邏輯和清洗規則，保證取了對的數據；2)要保證自己的計算邏輯無誤，比如數據是否可累加，保證自己算對了指標。

❷ 如何保證檢測數據的准確性、科學性、公正性

實驗室從廣義上講是指從事科學實驗、檢驗、檢測和校準活動的科研技術機構,向社會出具具有證明作用的數據的檢測,保證其出具的數據和結果的可靠、穩定和准確。那麼如何保證實驗室檢測數據的准確性主要從技術要求上談三個方面的內容。一.人員素質:人是最寶貴的資源,一個實驗室的水平高低優劣很大程度取決於人員的素質和水平。檢測人員應經過與其承擔的工作相適應的教育、培訓並有相應的技術知識和經驗,經資格考核合格,持證上崗。必須熟悉、了解、掌握檢測方法,嚴格按照質量管理手冊和作業指導書及操作規程進行檢測,才能提高檢測數據的准確性。1.作為一個專業的檢測機構,首先,檢測人員必須具備大專以上學歷和與之檢測相關的專業文化素質;其次,必須有20%甚至更高比例的工程師以上職稱的人員。西寧水質監測站目前有化學、食品、土壤、給排水、計算機等各類專業人員近二十名,其中工程師、高級工程師九名,占總人數的約50%,大專以上學歷人員占總數的約90%。2.對檢測機構的檢測人員要不斷加強業務培訓。建議採取「送出去,請進來」的方式進行培訓。

❸ 怎麼保證數據的准確性

檢測人員的技術水平和工作責任心與檢測數據的准確性息息相關，對提高檢測數據的准確性有著不可替代的作用。因此有必要擬定切實可行的培訓計劃，加強對技術人員的培訓和教育，提高檢驗人員的職業道德素質和技術素質，使之不斷加強檢驗檢測工作的責任感和責任心，提高檢測技術水平和業務工作能力，確保所出具檢測數據的准確性。

❹ 地理信息數據安全管理主要措施有哪些

基礎地理信息數據是地理信息數據中的核心內容。國家基礎地理信息數據是指按照國家規定的技術規范、標准製作的、可通過計算機系統使用的數字化的基礎測繪成果。國家基礎地理信息數據是具有知識產權的智力成果，受國家知識產權法律法規的保護。為了加強對國家基礎地理信息數據使用的管理，做好國家基礎地理信息數據的社會化服務工作，為國家經濟建設、科學研究和社會生活提供測繪保障，國家測繪局制定了《國家基礎地理信息數據使用許可管理規定》來規范國家地理信息數據的使用、提供與管理。
1．使用許可
(1)使用國家基礎地理信息數據的部門、單位和個人(以下簡稱"使用單位")，必須得到使用許可，並簽訂國家基礎地理信息數據使用許可協議(以下簡稱"使用許可協議")。使用許可協議是非獨占和不可轉讓的。使用許可協議文本由國務院測繪行政主管部門負責制定。
(2)使用許可協議分為甲、乙、丙三類。甲類使用許可協議適用於中央、國家機關、省級政府等用於宏觀決策和社會公益事業。乙類使用許可協議適用於非企業單位、個人以教學或者科學研究、規劃管理等目的在本單位內部或者個人使用，或者將研究成果向中央國家機關、省級政府等部門提供用於宏觀決策和社會公益事業，、丙類使用許可協議適用於企業單位，或者非企業單位用於商業目的、盈利或者直接為建設工程項目服務。其他類型的使用許可協議由國務院測繪行政主管部門制定。
(3)適用甲類使用許可協議的，無償使用國家基礎地理信息數據；適用乙類使用許可協議的，有償使用國家基礎地理信息數據，給予價格優惠；適用丙類使用許可協議的，有償使用國家基礎地理信息數據。有償使用是指收取國家基礎地理信息數據的部分成本費用。各類使用許可協議的單位均應支付提供數據中所實際發生的介質費、人工費和其他費用等工本費。
(4)使用單位擁有使用許可協議規定范圍內的國家基礎地理信息數據和規定許可權的使用權。使用單位根據使用需要，可以對國家基礎地理信息數據做部分修改或者對數據的格式進行轉換，但未經許可，不得以任何形式將修改、轉換後的數據對外發布和提供。
(5)使用單位在使用國家基礎地理信息數據時，必須明顯標示數據的版權所有者。國家基礎地理信息數據的版權歸屬不因數據部分修改或者格式改變而改變，使用格式改變的國家基礎地理信息數據或者使用基於國家基礎地理信息數據形成的衍生品以及國家基礎地理信息數據的備份和復製品，必須明顯標示原數據的版權所有者。
(6)使用單位應當確保國家基礎地理信息數據的安全，防止數據丟失或者被盜；若發生數據丟失或者被盜，應當及時向提供單位報告；造成後果的，應當承擔責任。
(7)使用單位應當按照提供單位提供國家基礎地理信息數據的密級，依照國家規定進行管理並採取相應的保密措施。
(8)當使用單位的身份變更或者使用單位對數據使用用途改變時，應當向原數據提供單位提出申請，重新簽訂使用許可協儀。
(9)香港特別行政區、澳門特別行政區的公民、法人和其他組織需要使用國家基礎地理信息數據的，向省級以上測繪主管部門提出申請，按國家有關規定進行審批(台灣地區的公民、法人和其他組織需要使用國家基礎地理信息數據的，參照此規定辦理)。
(10)涉外使用國家基礎地理信息數據的部門、單位和個人，按照國家有關規定辦理審批手續。
2．提供與管理
(1)國家基礎地理信息中心負責國家管理的國家基礎地理信息數據使用的提供工作。省級提供單位負責本省、自治區、直轄市管理的國家基礎地理信息數據和國家基礎地理信息中心委託保管的其他國家基礎地理信息數據使用的提供工作，並負責對本省、自治區、直轄市的使用單位使用其他省級提供單位負責提供的國家基礎地理信息數據的審核轉函工作。
(2)提供單位不得授權或者委託其他單位或者個人提供國家基礎地理信息數據。
(3)提供單位負責審查使用單位的身份證明、使用國家基礎地理信息數據的書面申請和能證明其使用目的的有關材料，確定使用單位適用的使用許可協議類別，必要時報省級以上測繪主管部門審批。
(4)提供單位應當按照使用許可協議的約定，及時向使用單位提供國家基礎地理信息數據及數據使用說明，並協助其讀取數據。
(5)對與提供單位建立數據交換關系的使用單位，提供單位有權決定相互交換數據的方式和減少或者免收其使用國家基礎地理信息數據的費用。
(6)提供單位未經批准，不得擅自改變使用許可協議的文本格式和內容。
(7)提供全國范圍的國家基礎地理信息數據必須報經國務院測繪行政主管部門批准。未經批准提供單位不得以簽訂多個使用許可協議的形式，將全國范圍的國家基礎地理信息數據分解提供給同一個使用部門或者單位。使用和提供國家基礎地理信息數據涉及軍事部門的，依照測繪成果管理的有關規定執行。
(8)未經國務院測繪行政主管部門的批准，任何部門、單位和個人不得將未公開的國家基礎地理信息數據攜帶或者郵寄出境，不得以任何方式將其傳輸至境外。
(9)提供單位應當建立數據提供登記管理系統，詳細記載使用單位、使用國家基礎地理信息數據的內容、數量、用途和使用方式等；及時了解社會對國家基礎地理信息數據的需求情況，定期進行統計匯總，並向其上級測繪主管部門報告。
3．法律責任
(1)使用單位有下列行為之一的，由省級以上測繪主管部門收回國家基礎地理信息數據和有關資料，根據國家基礎地理信息數據製作的衍生成果或者已取得的非法收入一並沒收；情節嚴重的，可以並處3萬元以下的罰款；造成損失的，使用單位應當承擔賠償責任。包括：
①擅自向第三方提供或者轉讓國家基礎地理信息數據的。
②未經提供單位許可使用國家基礎地理信息數據的。
③使用單位的身份變更或者改變國家基礎地理信息數據的用途又不及時向提供單位提出申請並重新簽訂使用許可協議的。
④對獲得的國家基礎地理信息數據保管不當，造成數據全部或者部分丟失、被竊，又不及時向提供單位報告的。
⑤使用國家基礎地理信息數據時，不按規定標示版權所有者或者擅自改變版權所有者的。
(2)偽造身份或者掩蓋其對國家基礎地理信息數據的真實使用用途，騙取國家基礎地理信息數據的，由省級以上測繪主管部門責令停止使用，收回其取得的國家基礎地理信息數據和有關資料，根據國家基礎地理信息數據製作的衍生成果或者已取得的非法收入一並沒收；情節嚴重的，可以並處非法所得50％至100％的罰款；構成犯罪的，由司法機關追究其刑事責任。
(3)使用單位使用國家基礎地理信息數據時違反有關保密規定的，依照《保密法》、《測繪成果管理條例》等有關法律法規的規定處理。
(4)使用單位擅自將未公開的國家基礎地理信息數據攜帶或者郵寄出境，或者以任何方式傳輸至境外的，由所在單位或者上級主管部門對直接責任人員和負有責任的主管人員給予行政處分；構成犯罪的，由司法機關追究其刑事責任。
(5)不履行使用許可協議規定的義務或者未按約定條件履行義務的，依法承擔民事責任；因對國家基礎地理信息數據保管不當造成數據丟失、被竊並造成損失的，依法承擔賠償責任。

❺ 採集地理數據的過程中需要注意哪些問題

在產品的逆向設計中，產品三維數據的獲取方法基本上可分為兩大類，即接觸式與非接觸式，由於這兩種方式各有優缺點，而且它們的結合可以實現伏勢互補，克服測量中的種種困難，因而世界各國的逆向設備生產商紛紛研製具有接觸式與非接觸式兩種掃描功能的逆向設備。

三坐標測量機是一種接觸式測量設備，它具有精度高、重復性好等優點，其缺點是速度慢、效率低。非接觸式方法利用某種與物體表面發生相互作用的物理現象來獲取其三維信息，如光、電磁等。非接觸式方法具有測量過程非接觸、測量迅速等優點，其缺點是對所測量物體材料要求嚴格，如採用激光測量時，所測量物體材料要求不能透光，表面不能太光亮，而且對直壁和徒坡數據的採集往住存在一定誤差。

逆向工程中數據採集與處理

逆向工程中的測量數據量大，掃描的數據點可達數十萬，而且掃描的數據點具有離散性。為了有效地利用這些測量數據進行CAD建模，必須對數據雲進行必要的處理。

1.數據採集

數據採集的過程為:機床初始化—根據要掃描的物體設置掃描基準(包括Z平面、坐標軸、基準點等)—設置並進行2D輪廓掃描(此步可根據實際情況進行選擇)—根據2D輪廓或坐標區域進行3D曲面掃描設置(包括掃描方向及步距、3D空間極值、允許的最小誤差及弦向誤差、探頭半徑、掃描速度等)—進行數據採集。

2.數據處理

數據處理的目的是為了獲得正確的數據信息，生成相應格式的數據文件(如igs, dxf, vda, UG格式、Cimatron格式、Pro-E格式等)並與UGII, Surface, Pro-E, Catia等著名工程軟體進行數據交換，以便用它們進行3D模型重構。在Renishaw公司的Tracecut23軟體中提供了多種數據處理方法，這些方法包括數據調整、復制、數據光順、雜訊去除、數據鏡像、陰陽轉換、生成真實表面、CAD數據輸出等。數據處理中要避免造成形狀變形、精度降低、數據點不足等問題，一般要進行以下幾方面的工作:

(1)補償點的產生對於接觸式掃描，由於從掃描儀獲得的測量數據並不真正代表接觸點的坐標，而反映的是探頭的中心或頂部的值，因此，要對這些數據進行補償，轉換為被測物體表面的坐標值。對於產生補償點，首先需要計算出標准點，而由於沒有表面的數學表達公式，不能使用通常的方法計算出標准點。目前已開發出特殊的演算法，能夠在所規定的公差范圍之內，獲得近似的標准值。

(2)雜訊點刪除逆向工程測量過程中，受掃描測量方式、測量物體材料的種類、設備的精度等因素的影響，極易造成測量數據誤差點的產生，對這類誤差點，習慣上稱為雜訊點。在數據處理的第一步先要利用系統所提供的雜訊點去除功能，選擇合適的去噪精度去除多餘的誤差點，保證測量數據的准確性。
(3)數據點精化在CAD系統中，需要對逆向工程中獲得的掃描數據點進行曲線構造、曲線光順處理、曲面重構、曲面光滑處理、曲面拼接、三維建模等工作。在進行這些操作之前，要根據所測量物體的各部分的形伏特點設置適當的截面終距離和相鄰兩數據點的距離，利用系統中的CAD數據輸出功能輸出適當格式的數據文件，再利用CAD軟體對數據點進行刪除和拼接，這樣可保證所測物體曲率較大處有較少的數據點，曲率較小處和復雜處具有較多的數據點。

數據採集方法及技巧

在實物測量中，會遇到各種復雜的形狀，為保證所測量數據的准確性和所測量形狀的完整性，採用的測量方法和測量工裝是數據採集的關鍵。

1.翻模測量法

汽缸是汽油機的核心部件，它的形狀及尺寸的准確性直接影響著汽油機的功率及對環境的污染程度。根據汽油機汽缸的特點，將其劃分為兩部分進行掃描，即分成氣道、燃燒室。對燃燒室來說，在用線切割機床對汽缸進行適當切割剖分後可直接用接觸探頭掃描;氣道的形狀極為復雜而且細節極多，有許多細節部分接觸探頭無法達到，致使接觸探頭無法掃描。基於此種原因，對氣道部分採用翻模測量法，將汽缸的氣道用硅膠、石膏、樹脂等材料進行翻模，然後用接觸探頭對翻制的模型進行掃描。由於硅欣、石膏、樹脂的充型能力極佳、而且充型後變形小可較好地復制原來氣道的形狀。因而對翻制的模型進行掃描，可保證掃描的精度。

經反復實驗，發現石膏在所有材料中的翻模精度最高，而且模型的表面質量與原件接近。在用接觸探頭掃描時，接觸探頭有一定的接觸力，接觸探頭(特別是小直徑探頭)能劃傷石膏模型，從而影響掃描的精度。為了保證掃描精度，採用特種膠粘劑(如:502膠)對石膏模型進行硬化。選用的膠粘劑要具有兩種特性:一是，膠粘劑能在石膏模型表面形成一定厚度的滲透層，對石膏表面進行固化;二是，膠粘劑固化後，石膏模型表面要保持光滑，以保證掃描精度。

用翻模測量法測量的氣缸點雲數據及根據測量數據設計的汽缸如圖1所示。

2.旋轉測量法

對於某些零件可能需要完整地測量全部數據，這對於不帶回轉探頭的Cyclone Series II測量機來說是一件困難的事情，但是該設備的隨機軟體具有回轉測量功能，只要將Tracecut中的「輔助功能—參數調整—採集設備參數調整」中的「8216」項參數改為「on",便可激活三維數據採集的繞X、Y、Z回轉對話框。這樣利用普通的銑床同轉頭和一些簡便的工具便可完成需要數萬美元的數控回轉頭才能完成的工作，而且可較好地保證採集數據的精度。
在用普通回轉頭替代數控回轉頭時，要注意以下問題:①要正確地設置掃描基誰，將固定被測物體的回轉軸設置為X或Y軸，並將基準點設置在回轉軸上;②固定被測物體的回轉軸要求有較高的同軸度;③在回轉測量中，不能通過二維輪廓限制測量區域，在每回轉一定角度並劃分測量區域時，只能通過坐標區域限制;④在每次旋轉時，所測量的數據均應包含回轉軸的數據，便於以回轉軸為基準進行數據拼接。

用旋轉測量法測量的柴油機螺旋進氣道的點雲數據如圖2所示。

在用石膏翻制模型時，要盡量避免石膏漿中含有空氣，以免影響模型的表面質量，無法保證測量的精度。若發現石膏漿中含有較多氣體，可將石膏漿放在真空設備中脫去氣體。

在用旋轉測量法測量時，為便於設置測量設備的基準點及基準軸，固定被測物體的回轉軸一端截面為圓形，便於用普通銑床回轉頭夾持，另一端截面為正方形，便於固定被測物體，並有利於尋找回轉軸的軸心。另外，為保證測量精度，回轉軸兩端要有較高的同軸度。

❻ 做數據分析如何保障數據的准確性

從業多年，在數據准確性上摔過不少跟斗，總結了一些切實有效的方法，能夠幫你盡可能的規避錯誤，確保數據的准確性，分享給大家

雖然看上去，數據分析師是掌握數據資源的人，但從數據的生產流程來看，數據分析師其實位於數據的下游，數據需要至少先經過採集環節、清洗環節、存儲環節才能被數據分析師拿到，甚至有的體量特別大的數據，他的調取和處理環節也不能被數據分析師控制。所以，想要最終做出的數據不出錯，那就要先確保我們的數據上游是准確的。

雖然數據上游一般是由其他業務或技術人員負責，但數據分析師也可以通過提需求或生產過程參與的方式，對數據上游進行管理：

「大包小包過機安檢」只要你坐過北京的地鐵，相信這句話一定耳熟能詳，為了確保所有旅客不把易燃易爆等危險品帶入地鐵內危及他人安全，地鐵在每個進站口設置安檢站對所有過往人員物品進行檢查。雖然避免數據錯誤的最主要方法就是檢查，但全流程無休止的數據檢查顯然是費時費力且效率低的，我們其實也可以在數據流入流出的關鍵節點設立「安檢站」，只在這個時候進行數據檢查。

一般我會在這些地方設立「安檢站」：

幾種行之有效的檢查方法：

除了上述成體系的錯誤規避手段外，幾個日常的好習慣也可以讓我們盡可能的離錯誤遠一點：

以上，是確保數據准確的大致經驗總結，幾句最關鍵的話再重復嘮叨一下：

數據處理的准確性校驗一直是個難題，是否存在一些針對據處理准確性的通用做法呢？

下面是一些對於數據進行計算處理後，保證數據准確性的個人實踐：

對於大部分數據來說，數據處理可以分為以下 五個步驟 ：

1.數據採集；2.數據傳輸（實時/批量）；3.數據建模/存儲；4.數據計算/分析；5.數據可視化展示/挖掘

針對上面五點分別展開介紹：

一、數據採集

通常數據處理之前會有數據採集的過程，數據採集會涉及到多數據來源，每中數據來源由於格式等不一致，需要特殊處理。

1.針對不通的數據源，需要做到每個數據源獲取 數據能夠獨立。

2.採集過程需要監控，傳輸之前如有條件，可以做到本地有備份數據，便於異常查找時進行數據比對。

二、數據傳輸（實時/批量）

數據源本地已經做到有備份的情況下，對於傳輸異常的時候，需要 支持重試 ，存儲端需要支持去重。

三、數據建模/存儲

數據存儲可以針對結果集合進行冗餘分類存儲，便於數據進行比對,針對存儲需要進行副本備份，同時數據可以考慮按生效記錄進行疊加存儲，支持回溯 歷史 的存儲結構進行存儲。

四、數據計算/分析/挖掘

數據進行計算，分析的時候需要進行步驟分解，便於准確性的分析和統計

1.計算之前，支持測算，同時支持數據進行分批計算，需要能導出本批次清單基礎數據（例如人員或者id），便於數據核對。

2.計算之中，支持快速少量指定的典型數據測算，支持選擇，是否存儲參與計算過程的全部的中間變數。

3.計算之後，可以選擇，支持導出本次計算過程中的所有參與變數和中間變數參數，可以線下根據數據列表對應的參數，進行計算，從而進行數據准確性的核對。

計算過程中，支持針對有問題的數據ID進行染色，染色後的數據，所有的中間過程變數全部進行列印輸出。

五、數據可視化展示

可視化挖掘過程，需要主要前台圖形化界面的數據量

❼ 國家對重要地理信息數據實行什麼制度

國家對重要地理信息數據 實行統一的審核公布制度。 為了確保重要地理信息數據的准確性和權威性，必須實行統一的審核公布制度。

❽ 資料庫保證數據准確性的措施有哪些

資料庫保證數據准確性的措施有：
方法一、資料庫數據加密
數據加密可以有效防止資料庫信息失密性的有效手段。通常加密的方法有替換、置換、混合加密等。雖然通過密鑰的保護是資料庫加密技術的重要手段，但如果採用同種的密鑰來管理所有數據的話，對於一些不法用戶可以採用暴力破解的方法進行攻擊。
但通過不同版本的密鑰對不同的數據信息進行加密處理的話，可以大大提高資料庫數據的安全強度。這種方式主要的表現形式是在解密時必須對應匹配的密鑰版本，加密時就盡量的挑選最新技術的版本。

方法二、強制存取控制
為了保證資料庫系統的安全性，通常採取的是強制存取檢測方式，它是保證資料庫系統安全的重要的一環。強制存取控制是通過對每一個數據進行嚴格的分配不同的密級，例如政府，信息部門。在強制存取控制中，DBMS所管理的全部實體被分為主體和客體兩大類。主體是系統中的活動實體，它不僅包括DBMS 被管理的實際用戶，也包括代表用戶的各進程。
客體是系統中的被動實體，是受主體操縱的，包括文件、基表、索引、視圖等等。對於主體和客體，DBMS 為它們每個實例(值)指派一個敏感度標記。主客體各自被賦予相應的安全級，主體的安全級反映主體的可信度，而客體的安全級反映客體所含信息的敏感程度。對於病毒和惡意軟體的攻擊可以通過強制存取控制策略進行防範。但強制存取控制並不能從根本上避免攻擊的問題，但可以有從較高安全性級別程序向較低安全性級別程序進行信息傳遞。

方法三、審計日誌
審計是將用戶操作資料庫的所有記錄存儲在審計日誌(Audit Log)中，它對將來出現問題時可以方便調查和分析有重要的作用。對於系統出現問題，可以很快得找出非法存取數據的時間、內容以及相關的人。從軟體工程的角度上看，目前通過存取控制、數據加密的方式對數據進行保護是不夠的。因此，作為重要的補充手段，審計方式是安全的資料庫系統不可缺少的一部分，也是資料庫系統的最後一道重要的安全防線。

❾ 幾種基礎地理信息數據更新方法的比較

0引言基礎地理信息數據是作為統一的空間定位框架和空間分析基礎的地理信息數據,該數據反映和描述了地球表面有關自然和社會要素的位置、形態和屬性等信息。地理信息具有時效性,地理信息數據的現勢性反映了該數據對地理信息現狀的反映程度。地理空間數據信息的現勢性是GIS的靈魂,它遠遠高於幾何精確性[1]。由於國家建設的飛速發展,地物地貌和各種信息數據日新月異,地理信息的現勢性往往不能與實際要素發生的變化保持同步,從而不能及時反映最新現狀。為了滿足各種應用的需求,地理信息的更新就變得非常重要.在地理信息的應用中,矢量數據的應用占據著非常大的比重,本文以1∶50 000地形資料庫的更新實驗中的幾種不同更新方法進行比較分析。1地理信息的變化情況地理信息變化,從地理信息變化狀態分析,地理信息的變化主要包括新增地理信息要素,原有地理信息要素的消失,信息還存在,但存在的狀態發生了改變。從地理信息的變化量分析,地理信息的變化量與地理信息要素類別、經濟發展狀況、地理位置、間隔時間等都有很大關系。不同類型的地理信息要素,發生的變化量也存在不同,與人類活動的影響息息相關。