天网系统

【采用】【风控系统】风控中心—京东基于Spark的风控系统架构实践和技术细节

爷,独闯天下 提交于 2020-01-26 06:50:50
转自: https://www.jianshu.com/p/9de45d2d16e6 感谢博主! 背景 互联网的迅速发展,为电子商务兴起提供了肥沃的土壤。2014年,中国电子商务市场交易规模达到13.4万亿元,同比增长31.4%。其中,B2B电子商务市场交易额达到10万亿元,同比增长21.9%。这一连串高速增长的数字背后,不法分子对互联网资产的觊觎,针对电商行业的恶意行为也愈演愈烈,这其中,最典型的就是黄牛抢单囤货和商家恶意刷单。黄牛囤货让广大正常用户失去了商家给予的优惠让利;而商家的刷单刷好评,不仅干扰了用户的合理购物选择,更是搅乱了整个市场秩序。 京东作为国内电商的龙头企业,在今天遭受着严酷的风险威胁。 机器注册账号、恶意下单、黄牛抢购、商家刷单 等等问题如果不被有效阻止,会给京东和消费者带来难以估量的损失 互联网行业中,通常使用风控系统抵御这些恶意访问。在技术层面上来讲,风控领域已逐渐由传统的“ rule-base”(基于规则判断)发展到今天的大数据为基础的实时+离线双层识别。 Hadoop,Spark等大数据大集群分布式处理框架的不断发展为风控技术提供了有效的支撑。 2.什么是“天网” 在此背景下,京东风控部门打造“天网”系统,在经历了多年沉淀后,“天网”目前已全面覆盖京东商城数十个业务节点并有效支撑了京东集团旗下的京东到家及海外购风控相关业务