双十一背后的三场战役：高并发、黑产、物流
source link: http://mp.weixin.qq.com/s?__biz=MzU3NTQ2NDIyOQ%3D%3D&%3Bmid=2247489483&%3Bidx=1&%3Bsn=3efa36ffaf274ae7b6b8294d50cc6299
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
By 超神经
场景描述： 双十一这一疯狂的社会现象，已经走到了第十一个年头。 在无数消费者忙着买买买，但在商家眼中，除了在确保每个人都能享受双十一的好处上，还有三场没有硝烟的大战，在等着他们。
关键词： 双十一 高并发 黑产 智能物流
又是一年双十一。
无数的社会议题被讨论，消费升级、精致穷、消费贷月光族、直播网红、带货达人、国货复兴等等，整个双十一变成了全社会各行业都积极参与的大事件。
这场全民参与的消费狂欢，经过了十年时间，已经成为了特殊的社会现象。而巨大的消费狂欢背后，还有很多无声的较量一直在进行。
成交数据或注水，高并发不水
根据天猫的报告，今年的消费水平和抢货速度又打破了新的记录。 但很快微博上就有网友称，最终定格的 2684 亿人民币的全站销售额明显注水。
该网友将 2009年—2019 年连续十年的双十一销售数据 进行拟合，得出了实际生产数据几乎完美地分布在三次回归曲线上，拟合度均超过 99.94 %，几乎为 1 的结果。
数据过于完美，因此他断言，阿里为了吸引双十一的购物热度，对销售额数据进行了人工修饰，存在造假事实。
天猫也很快做出官方解释，并谴责该名网友太过武断。
天猫在微博上对数据造假进行辟谣
其他网友便不再深究这一事件， 毕竟这些数字对普通民众来说并不重要 。同样对于互联网圈来说也是一样， 电商平台们一起 创造的商业模式和背后的技术更值得细细探索。
在今年 VLDB 2019 会议上，李飞飞的分享 《Cloud-Native Database Systems at Alibaba: Opportunities and Challenges》 中提到阿里公布的 2018 年双十一零点，阿里数据库后台的瞬时流量达到了历史新高。
「双十一零点的一瞬间，淘宝全网的交易量从每秒几千笔，迅速跃迁到每秒 49 万笔，上涨 122 倍， 而后台数据库需要承担每秒 7000 万次的访问流量。」
而今年订单创建峰值，更是创下新的世界纪录，达到 54.4 万笔/秒 。
想要应对这种量级的并发，并顺利完成支付环节，无论是阿里、京东、网易还是其他电商平台，都不得不 自研数据库、提前全链路压测、全员加班如临大敌 的氛围 。
电商平台的服务器，要承受着来自瞬间喷发的数据压力。
所以在工程师们眼中，从双十一从第一秒开始，就直接演变成一场 消费极限与技术极限的战争。
双 11：也是黑产的狂欢节
每次在消费者购物狂欢之时，也是 网购平台最受黑产冲击的时刻。
常见的具体盈利手段有：植入软件暗扣话费、羊毛党恶意薅毛、恶意推送广告流量变现、手机 App 分发恶意软件、通过手机木马刷量、实施勒索病毒攻击、采用 DDoS 攻击等。
比如在前不久的天猫在 618 期间， 类似的系统就在 18 天里，成功拦截了 502 亿次恶意攻击。
整个互联网安全行业的产值才不过 500 亿
但黑灰产「薅」走的就超过 2000 亿
行业内专家预估，仅仅在中国大陆，网络黑 产 已经有 200 万 从业人员 ，大部分都是16 - 28 岁、缺乏法律常识的年轻人。 在全国每年有至少超过 2000 亿 的资产会被黑产给薅走。
目前电商平台可以做到， 消费者在下单的 0.01 秒之内，系统就已完成了上百项安全检测和技术防护 ，能够有效打击黑灰产的入侵。
系统覆盖假货识别及防控、商品合规审核、营商环境治理、恶意流量清洗、智慧物流、新零售安防等上百个商业场景，能够实现自动决策、智能对抗、实时处理，精准识别黑灰产行为。
阿里打击刷单风控系统用到的算法
但是道高一尺，魔高一丈。面对巨大的利益有些 黑产也逐渐形成了团伙跨境作案，利用人工智能等新技术实施犯罪并逃避打击。
对于风控和预警来说，在于黑产斗争的网络战场上，新的技术不是万能的，但没有新的技术也是万万不能的。
争分夺秒的快递人机大战
除了保证网购的安全性，保障优惠补贴的发放，抢购之后大量的物流订单，也几乎成了快递行业的「噩梦」。
工人正在处理堆积的包裹
根据业内预测，预计在双十一期间，物流最高日处理量将超过 5 亿件，这对物流来说是十分巨大的挑战。
在实际情况中，全自动快递分拣机器人，早在 2017 年开始，就逐渐成为双十一战场上，挑拣货物环节的主力军。
蓝色的自动拣货机器人，轻松地托起货架
在智能仓库里，像小盒子的全自动分拣机器人， 内置有 AI 系统，它们能够自动识别包裹，然后托起货物或者货架，按自动规划的合适路径，有序地运送到制定位置。
最关键的是，数百台 AGV 机器人能够协调地工作，互不干扰，还可以自动寻路充电。
机器人将小包裹送入不同的存储点
根据介绍，这些灵巧的机器人，主要负责货物的分拣、移动和包装。它们会带着订单箱到货架指定区拣货、移动货架和找到订单箱装货。然后与工作人员配合，完成包裹的发送。
说不定你抢下的 9.9 包邮的宝贝，都经过了这些耗资上亿机器人的运送。
机器人的使用能够大大地提升效率，通常的情况下， 一个机器人每小时能处理近 2 万个包裹，可以为 快递公司节省约一半的人工。
消费背后：欲望的因，技术的果
不管你是快乐又懊悔地剁着手，还是波澜不惊清心寡欲，数据都表明，全社会都在被双十一推动着。
整个双十一，消费者在在购物车里左挑右选，犹豫不定，和购物欲进行大战；电商平台的前后端工程师们，和全国的消费冲动大战，服务器和数百万部手机大战；分布全球的黑产分子和电商安全团队，来回游击作战。
这些独特的现象，也在间接或直接地，推动更多技术的诞生和发展。不知道双十一在未来，还会给全社会带来哪些惊喜和惊吓。
但在这些大战中，也没有永远的赢家或输家。
—— 完 ——
扫描二维码，加入 AI 讨论群
获得更多优质数据集
了解人工智能落地应用
关注顶会&论文
回复「读者」了解更多
更多精彩内容（点击图片阅读）
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK