大數據技術如何有效阻擊網絡黑產？

最近，互聯網行業的“網絡安全”事件頻發。僅8月就發生了多起網絡黑產***事件，包括國內某重要通信企業多地子公司遭遇Globelmposter勒索病毒***。華住集團被曝旗下酒店約5億條數據被泄露。新三板公司瑞智華勝假借與運營商合作之名，非法竊取了30億條用戶數據，涉及BAT等近百家互聯網公司的用戶。

有數據顯示，2017年全球企業遭受網絡***總量較去年增長15%，嚴重性增加了23%。網絡安全事件不僅侵害了用戶信息安全，也損害了互聯網企業經營安全，其破壞性已經不再局限于傳統意義上的物質、財產損失，而是影響到運營、制造乃至人身安全。
APP運營中會遇到哪些網絡黑產***？

APP運營離不開用戶，但是坐在工位上的你，并不知道你的用戶是真實的還是機器虛擬的。網上有《Bot Traffic Report 2016》的報告數據顯示，2016年機器人流量占全網流量的51.8%，超過人類流量，而其中惡意機器人流量占據了全網流量的28.9%。

有一半的用戶都是機器人，想想也是怕人，而更可怕的是那近三成的惡意機器人流量，他們會對運營工作帶來什么樣的損害？以下是筆者總結的APP運營中最常見的網絡風險。
1、競爭對手與不良短信代理商的惡意刷量

很多APP的注冊頁面，都會要求用戶填寫真實的手機號，用于注冊、登錄、找回密碼等操作。但頁面本身無法判定用戶填寫的手機號是否為個人真實的手機號，這也為應用的競爭對手與短信代理商提供了可趁之機
——他們會利用黑產的相關工具，向大量手機號碼隨機發送短信，產生高額短信費用，造成經濟損失，也對并沒有使用平臺但收到驗證短信的普通用戶造成了騷擾。
2、推廣公司刷量

某些APP在產品早期會找專門的推廣公司宣傳產品。部分不良推廣公司會使用自動化工具批量注冊，導致團隊付出了大量推廣費用，卻并未吸引真實用戶。
3、注水、廣告黨***

相信大家在日常刷一些內容類社區的過程中，偶爾會遇到熱門帖子下面大量水軍出沒、各類賬號借機打廣告蹭熱度的情況。而這些注水、廣告黨，在注冊小號之后，從接碼平臺獲取大量賬號登錄APP，為了某些營銷目的發送大量垃圾廣告甚至違法信息，嚴重影響了平臺的正常運營，破壞了社區氛圍。
4、羊毛黨***

APP在推廣時會采用現金獎勵等優惠活動，招來第一批用戶，但是當產品本身有利可圖的時候，最先被吸引的就是羊毛黨。羊毛黨在APP做運營活動時通過鉆空子獲利，大大地影響了活動的質量和效果。

5、撞庫***

很多互聯網用戶為了方便記憶，會將多個平臺的賬號設置為同一個密碼。***者利用這一特點，通過自動化工具，獲取了用戶在部分網站、APP泄露的賬號密碼，嘗試用于其他網站或APP的登錄，這對用戶的賬號安全來說，是重大安全隱患。一旦發生重大事件，APP運營方也有不可推卸的責任。

揭秘：APP防護+大數據有效命中網絡黑產
事實上，APP對抗網絡黑產的阻擊戰一直在進行，封IP，驗證碼，短信驗證等都是較為常見的對抗策略。但是由于網絡黑產混雜在真實用戶當中，APP運營無法精確瞄準他們，往往在對抗中處于被動位置。隨著大數據技術的發展，“精準”的概念也被引入“風險控制”領域。目前行業幾家“領頭”大數據服務商正在積極探索大數據在“反欺詐”方面的應用實踐。有了大數據的加持無疑是給APP在反擊時加了一副瞄準鏡，能夠有效地識別電腦對面是真實的用戶還是虛假的***者。具體作用于以下幾個方面：
1、精確地“黑產”畫像

在傳統APP防護措施里，也會建立行為分析模型用于識別網絡黑產，比如：行為聚集，根據用戶登錄過程行為判斷，例如頁面停留時間、鼠標焦點、頁面訪問流程、csrf-token等。設備聚集，通過客戶端尤其是手機客戶端，上報許多機器信息，識別是否存在偽造設備情況。

然而“網絡黑產”通過模仿真人行為，能規避后臺的行為分析模型，從而迷惑APP運營者，鉆了空子。現在，有了大數據技術的加持，APP對黑產的數據分析有了很大的革新。目前，一些第三方大數據服務商依托自有的海量數據積累和領先的大數據分析技術，結合APP自有數據，用戶群標簽體系，以及多方權威數據，比如全網黑名單庫等進行多維度建模分析，由此產生精準的“黑產”畫像。此外，第三方大數據服務商還能將數據分析通過可視化技術展現，便APP運營者使用。

舉個例子，比如“個推”的反欺詐大數據服務，對“黑產”畫像進行了便于解讀的處理。他們給每個分析維度都附上分值，并最終通過統計手法得出用戶風險評分及等級評估，便于APP進行用戶分類，進行精準的風控運營。
APP對于風險評分高的用戶采用積極的防護措施，在業務上予以限制，減少甚至停止紅包與優惠的發放。
APP對于風險評分低的用戶酌情減免防護措施。這么做既能保障APP和用戶的安全，也能提高用戶體驗。

2、高智商的驗證防護

APP阻擊網絡黑產的部署中，設置驗證碼是最廣泛部署的方案。

圖形驗證碼
形式形式多樣，例如字母扭曲、漢字識別、移動滑塊、圖像選擇等。普通APP直接接入驗證碼，有后臺分析能力的則在后臺審計出現異常時才觸發驗證碼以提升普通用戶體驗。

短信驗證
通過向手機發送驗證碼，進行真人認證。但這一做法會產生一定短信費用，且用戶操作比較麻煩。然而，網絡黑產是有辦法對付傳統驗證碼防護措施。對于普通驗證碼，網絡黑產會利用機器學習技術，可以有效識別圖片中的驗證碼。對于個別識別難度較高的驗證碼，黑產也雇傭了一些打碼人員進行人工識別。對于短信驗證，網絡黑產通過手機卡商廉價獲取大量手機號，再批量進行驗證。

針對這些問題，不少大數據服務公司都提出許多創新的解決方案。一方面，大數據公司利用技術優勢（機器學習技術也是大數據技術的一種）產生出機器不易識別的驗證碼。例如動畫驗證碼，利用真人對動畫的識別能力強于機器的特點，在保證良好用戶體驗的前提下，提升安全性，增加破解難度。另一方面，大數據公司通過多維度數據洞察，發現識別接碼平臺，有效進行抵制。

3、精準的狙擊對抗

當APP面對網絡黑產***的時候，查封IP地址是比較正面且效果突出的對抗策略。以往封IP的做法是根據黑IP庫或同IP發起的請求次數、密碼錯誤率等決定是否一段時間內禁止該IP的請求。但是由于同一個IP地址上會有數萬個用戶，容易誤刪用戶。因此在無法識別真用戶的情況下，APP不到萬不得已是不會采用這種辦法的。在大數據的幫助下，通過“黑產畫像”，不僅可以辨別問題IP，還能洞察出問題IP地址上的“黑產”用戶，進行有針對性的封鎖行動。

黑產的***與APP的防護是矛與盾的對決，也是一場漫長的持久戰。APP不僅需要及時跟進黑產新技術，盡可能頻繁地更新防護策略，增加黑產的破解成本，還需要與業內的“安全衛士”們并肩作戰，保障用戶信息安全，提升用戶體驗，有效凈化行業環境，維護網絡安全。
參考資料：
澎湃新聞/湃客:華住
5億條數據泄露，背后的網絡黑色產業鏈究竟是怎樣的？https://www.thepaper.cn/newsDetail_forward_2393889