《58同城加速黑产治理的技术实践分享.pdf》由会员分享,可在线阅读,更多相关《58同城加速黑产治理的技术实践分享.pdf(25页珍藏版)》请在三个皮匠报告上搜索。
1、58同城加速黑产治理的技术实践分享同城加速黑产治理的技术实践分享分享人:分享人:秦瑞斌-58同城-算法架构师分享时间:分享时间:20232023年年0707月月0202日日58的业务面临哪些主要黑产形态业务安全是一个长期对抗的事情加速黑产治理的技术设计及应用探索目 录CONTENTS58的业务面临哪些主要黑产形态158的业务面临哪些主要黑产形态五八集团是中国领先的生活服务平台,业务覆盖招聘、房产、汽车、本地生活服务等领域。旗下拥有赶集直招、58魔方、中华英才网、安居客、58爱房、巧房、58到家、人人车、驾校一点通、转转、58数科等品牌。58的业务面临哪些主要黑产形态58的业务面临哪些主要黑产形
2、态黑产目的涉政违法窃密缺少法律意识反动违规传播不良价值观宣泄情绪获客故意破坏平台生态窃取数据信息打击同业欺诈获利黑产类型欺诈58的业务面临哪些主要黑产形态2022年1月11月,全国共破获电信网络诈骗案件39.1万起,同比上升5.7%,抓获犯罪嫌疑人数同比上升64.4%,立案数同比下降17.3%,造成财产损失数额同比下降1.3%虚假引流承诺不符不当收费资质冒用杀猪盘-虚假投资杀鸟盘-刷单返利欺诈获利电诈近几年,网络诈骗层出不穷,国家加大了针对电信网络诈骗的治理力度通过各种手段摆脱受害人,保证得利拉黑、拖延、返还少部分骗款、贬损招聘单位、刁难、恐吓、殴打业务安全是一项长期对抗的事情2业务安全是一项
3、长期对抗的事情团伙作案行为比较隐蔽,取证难,难进行有效处置突发作案,发酵迅速作恶成本低,不断试探业务薄弱环节01捕鸟(猪)者:黑产上游,负责获取受害人,引流用户黑产分工02养鸟(猪)者:黑产中游,负责诱导受害人03杀鸟(猪)者:黑产下游,负责诈骗受害人04鸟笼(猪圈):为诈骗实施提供设备、剧本、网站、app、通信设施、洗钱服务等业务安全是一项长期对抗的事情黑产分工58同城形成了比较完善的黑产治理流程是否能进一步加速黑产治理?减少受骗者数量及受骗金额维护公司口碑及形象有助于公司业务拓展节省公司成本建立良好的社会秩序业务安全是一项长期对抗的事情加速黑产治理从哪些角度入手指标建设01基础建设02业务
4、梳理03黑产发现04黑产处置05自动化06关键点:不断健全数据,加强各方合作加速黑产治理的技术设计及应用探索358同城加速黑产治理的技术设计以及应用探索黑产分工1.建立合适的指标,量化黑产治理效果,评估可优化空间,设置目标难点1:黑产的认定需要证据,证据不足时无法认定难点2:无法知晓当前黑产全集,无法评估召回不足:无法度量黑产是否识别滞后准确率难点1:如何知晓哪些用户被骗难点2:如何认定用户被骗黑产受害者召回率误伤率处置率处置成功率58同城加速黑产治理的技术设计以及应用探索2.工欲善其事 必先利其器数据基本信息、帖子、注册登录、搜索浏览、聊天、通话、图片、视频、处罚、举报、.01存储hdfs、
5、hbase、mysql、redis、kafka02计算spark、flink、docker,cpu、gpu、tpu03算法工具模型训练平台、机器学习、深度学习、特征引擎、模型引擎05流程工具规则引擎、仿真平台、回放平台06分析工具BI分析工具、数据开发平台、jupyter、下钻工具、数据洞察工具、归因工具0458同城加速黑产治理的技术设计以及应用探索3.梳理业务流程,分析黑产活动的可疑节点,选用可充分挖掘数据信息的模型1.大量数据中,哪些数据对于黑产识别更有价值2.模型策略应部署在哪些节点3.在哪些节点打击黑产最有效4.哪种模型可以充分挖掘数据信息5.好的流程设计可以最大化模型工具的效果Lin
6、eGCNGATLPARandomWalkCRFLDAHMMRandomForestCNNDeepFMWide&DeepXgboostTransformerLogisticRegressionIsolationForestLouvainGPT-3BertWeNet注册、登录、认证、绑定、发帖、聊天、通话、投诉、充值、提现、购买、支付、搜索、浏览、点击、分享、评论、下载、私信、邀请、上传、.58同城加速黑产治理的技术设计以及应用探索加速黑产治理的关键举措1加快黑产发现模型尽可能部署在上游节点采用无监督算法与有监督算法结