成人在线日韩I久久精品99久久久久久久久I国产视频二区I影音资源avI日韩视频专区I国产成人免费看I国产精品一区二区三区四区五区I嫩草网站I久久国内精品I久久精品视频在线观看I美女的胸给男人玩视频I久久精品桃花av综合天堂I欧美人性生活视频I欧美视频在线观看一区二区I狠狠干网站I亚洲啪Iwww.色亚洲I天海翼一区二区三区I3d蒂法精品啪啪一区二区免费I美女毛毛片I日韩欧美中文字幕在线视频Iav男人资源站I久草中文在线I国内精品免费视频I日韩一二三区不卡I久久高清精品

Technical Articles

技術文章

當前位置:首頁  >  技術文章  >  康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

更新時間:2025-02-18      點擊次數:761

海量數據的收集使得新舊企業能夠利用機器學習技術開發新產品并革新舊產品。近年來,數據質量因直接影響了人工智能系統的性能和魯棒性而備受關注。然而,這對通常通過破壞像素信息(如模糊化、馬賽克等)來實現匿名化的方法提出了挑戰,這些方法導致合規性與數據質量之間難以兼得。

我們探索了一種不是簡單移除像素信息,而是對其進行自然替換的深度自然匿名化(Deep Natural Anonymization,DNAT)方法,致力于提高匿名化數據價值,助力企業開發創新。


一、匿名化數據的傳統矛盾

DNAT能夠檢測人臉、車牌等可識別信息,并為每個對象生成人工替換。每個替換都盡可能匹配源對象的屬性,但這種匹配是有選擇性的,我們可以靈活控制保留哪些屬性。

例如,對于人臉,保留性別和年齡等屬性可能對后續分析至關重要。對于可識別信息以外的內容,不包含敏感個人數據的信息則保留不做修改。通過這種方式,DNAT成功打破了數據消除與匿名化之間的傳統矛盾。

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

圖1: 匿名化工具的比較,從左至右依次為:Facepixelizer,YouTube,Fast Redaction,DNAT,原圖

為了衡量匿名化方法對數據質量的影響,我們從Labeled Face in the Wild(LFW)數據集中采樣了圖像。所有圖像均取自測試集。我們比較了代表匿名化技術的四種不同的匿名化工具,圖1顯示了這些示例的一部分。


二、匿名化的結構一致性

首先,我們分析了圖像在匿名化處理后的整體結構變化。為此,我們仔細研究了圖像分割結果。圖像分割是將圖像的像素劃分為多個片段的過程,每個片段代表一個對象類別。在我們的示例中,最重要的對象是個人資料圖片中的人物和背景

圖2和圖3展示了LFW數據集中兩位名人的分割圖。這些分割圖是由語義分割模型DeepLabv3+生成的,采用了TensorFlow存儲庫中的實現和模型權重。

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

圖2: AI Pacino DeepLabv3+ 分割結果對比

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

圖3: Reese witherspoon DeepLabv3+ 分割結果對比

從圖2和圖3中可以看出,傳統匿名化方法的分割圖明顯退化,其中一些甚至很多錯誤。然而,深度自然匿名化(DNAT)保留了語義分割。分割圖與原始圖像幾乎非常相同。從圖3中可以看出,經過傳統匿名化方法處理的人臉圖像不僅產生了較差的分割邊界,還使分割模型推斷出原始圖像中從未出現的新對象類別,如貓、狗或瓶子。

為了量化每種匿名化技術的影響,我們計算了整個測試集的平均交并比(mIOU)。計算是在不同方法生成的圖像分割圖與原始圖像分割圖之間進行的。結果如表1所示。

表1:用mIOU測量的語義分割一致性(越高越好)

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度


三、匿名化的內容一致性

為了評估匿名化圖像與原始圖像之間的整體內容一致性,我們使用了Clarifai的獨立圖像標注模型。“通用圖像標注模型能夠識別超過11,000種不同的概念,包括對象、主題、情緒等。"這些標簽描述了模型從輸入圖像中推斷出的內容。

此外,模型還為每個標簽提供了置信度。圖4展示了Clarifai公共圖像標注模型對原始圖像及其DNAT版本預測的前5個概念。

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度

圖4:來自clarifai的Reese Witherspoon前5個概念。(左原始圖像,右DNAT)

理想情況下,通用圖像標注模型應該為原始圖像和匿名化圖像預測一樣的概念。為了衡量一致性,我們使用Clarifai為每種匿名化技術的所有測試樣本預測概念。然后,我們計算了匿名化圖像與原始圖像之間前N個預測概念的平均精度(mAP)(其中N代表不同概念的數量)。

通過mAP,我們評估了兩點:預測概念的一致性及其相關分數。例如,考慮一個匿名化圖像及其原始圖像對,經過圖像標注模型處理后,如果某個概念在匿名化圖像中的置信度值低于其在原始圖像中的置信度值,則對最終mAP分數的影響較小;而如果某個概念僅出現在匿名化圖像中,而未出現在其原始圖像中,則影響較大。

前5和前50個概念的結果如表2所示。

表2:用mAP測量圖像概念一致性(越高越好)

康謀分享 | 突破傳統匿名化:先進技術解鎖數據價值新維度


四、總結

本文探討了如何通過深度自然匿名化(DNAT)技術提升匿名化數據的價值,打破了傳統匿名化方法在合規性與數據質量之間的固有權衡。DNAT通過生成自然替換而非破壞像素信息,不僅有效保護了個人隱私,還最大限度地保留了數據的分析價值。

實驗表明,DNAT在圖像分割內容一致性方面顯著優于傳統匿名化方法,能夠更好地支持后續的AI分析和應用。



400-999-3848
歡迎您的咨詢
我們將竭盡全力為您用心服務
3634354716
關注微信
版權所有 © 2025 廣州虹科電子科技有限公司  備案號:粵ICP備15080866號
主站蜘蛛池模板: 宣汉县| 陆川县| 化州市| 长乐市| 辉南县| 怀仁县| 福安市| 巩义市| 哈巴河县| 通化市| 中江县| 和平区| 江口县| 志丹县| 南陵县| 博湖县| 汽车| 庄浪县| 孝感市| 犍为县| 望都县| 巴林右旗| 巍山| 桓仁| 平安县| 迁西县| 丰原市| 曲沃县| 抚顺市| 云南省| 夹江县| 临泉县| 莱阳市| 临高县| 奉化市| 东乌珠穆沁旗| 永吉县| 奉化市| 高邑县| 包头市| 石阡县|