Tech 导读 本文基于JDV平台在大促中的各种业务场景,讲解过程中使用情况和技术挑战,通过采取相应的技术创新、技术保障确保系统稳定性,推动数据可视化编排能力在大屏业务场景中发挥更大的价值
对大多数人而言,今年的双十一可谓是无感而过。然而,这个「无感」正是今年支付宝技术团队的一个重要目标。
管控面可以提供高可靠高效可持续运维保障、快速部署小时交付的能力,尤其是针对ClickHouse这种运维较弱但是性能很高的OLAP核心引擎,管控面就显示得尤其重要。
前面的几篇文章从生产全链路压测的定义,内部立项和技术调研,聊到了测试验证以及全链路压测的对企业业务和技术团队的价值,算是整体上的构建一个认知的概念。
今年是我的第6个618,因为入职的时间比较"合适",使得我经历了每年两次完整的大促备战。那年还在北辰,618的当晚,我记忆的很清晰,接近凌晨1点左右的时候,我们聚集在楼道里面,大家举杯相庆,来祝贺刚刚平稳度过的大促。从此这样的场景在每年的这个时候都会经历一次,激动一次。每一次大促备战都是一场全兵演练,我们在这个战斗过程中,团队合作、技术实战、用户意识上都有一个立体的提升。站在每年的这一刻往前看,一路走过来的却是好些个不平凡的白天和夜晚。正如我们国家的乒乓球队在每次国际比赛中都有一个完美的结局,但过程从来不缺乏紧张、风险和刺激。
全链路压测系列到这里,已经是第十二篇文章了,整个系列大概有14篇的样子,预计这个月会更新完毕。前面的文章,我用了很多的篇幅介绍了在事前调研和准备阶段要做的事情,为什么要花这么多篇幅介绍前期的准备工作呢?因为全链路压测严格来讲,并不是一个单纯的测试手段,而是一整套团队协作和稳定性保障的技术体系。
9月14-15日,GOPS全球运维大会上海站圆满举行,为期两天的运维盛宴,为各位运维人带来了相互交流和学习的绝佳平台,来自腾讯技术工程事业群(TEG)计费平台部的黄宇给大家带来了「亿万级大促活动自动化保障体系」的主题分享。 我们同步了嘉宾现场沙龙分享视频(内含高清PPT),请点击下方「腾讯技术课小程序」卡片即可查看: 同时附上整理好的演讲稿: 黄宇,来自腾讯技术事业群的计费平台部,在鹅厂长期从事虚拟支付、多终端支付、账户存储、风控、结算等领域的工作,带领团队负责腾讯千亿级计费大盘的整体运营和质量,目前
腾讯计费平台是产品端到端在线交易平台,其核心是帮助用户与产品安全、便捷的完成支付和收款,在交易过程中帮助产品盈收最大化。平台承载了公司每天数亿收入大盘,为180+个国家(地区)、万级业务代码、100+W结算商户提供支付渠道、营销、账户托管、风控、结算以及推荐等服务。
每年“双11”都是一场电商盛会,消费者狂欢日。今年双11的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。而对技术人员来说,双十一无疑已经成为一场大考,考量的角度是整体架构、基础中间件、运维工具、人员等。
健康出行,“一码” 当先。国内外疫情反弹形势严峻,而即将到来的 2021 年末,元旦、春运等出行压力更是加重了各地健康码产品的承载和运行压力。作为疫情防控的首要关卡,四川天府健康通的高并发架构,为美丽天府保驾护航。 1亿 作为四川省政府新冠肺炎疫情防控的官方平台,“四川天府健康通小程序” 服务全省约 1亿 + 用户,是全国使用最广泛的健康码产品。 6万 四川天府健康通在春运返乡高峰期间,峰值 QPS 达到了 4万,而整套系统验证的峰值 QPS 可支撑 6万 + 高并发。 14天 基于云函数 SCF 底层
每年“双 11”都是一场电商盛会,消费者狂欢日。今年双 11 的意义尤为重大,它已经发展成为全世界电商和消费者都参与进来的盛宴。而对技术人员来说,双十一无疑已经成为一场大考,考量的角度是整体架构、基础中间件、运维工具、人员等。
在 Web3浪潮下,区块链技术再次被大家所关注。不难发现,近年来区块链技术在政务、金融、司法存证、教育和医疗等重点领域都发挥着重要作用,从助力产业数字化转型到合同签约数据存证走进千家万户,区块链技术为产业应用落地注入了新的动力。 近期,腾讯发布《全真互联白皮书》首次对外诠释解读了“全真互联”的概念,其中,区块链技术作为可信协议的支撑技术是构建全真互联的关键。 那么,作为数实融合关键支撑技术之一的区块链技术到底是什么?产品如何使用? 如何解决区块链底层模块复杂难以上手的问题?是否有轻量化、低成本、可降低开发
苏宁金融交易量3年内从1000亿增长到万亿+,服务用户3亿+,服务场景从服务于苏宁易购内部生态,扩展到服务全渠道,全场景,多业态的线上线下智慧零售的开放生态圈,一方面要满足公司业务发展要求,快速研发新产品,另一方面要满足818大促,双11等大促设计要求;
采访嘉宾 | 金思宇、陈贞宝、胡强忠 编辑 | 辛晓亮 大型电商系统并非一开始就具有完整设计的高可用特性,而是随着用户的不断增加与业务的快速增长逐步演进与完善的。当前高可用架构体系是互联网企业系统架构的基础要求,随着公司的业务发展,尤其是对于电商平台,每次发生稳定性故障带来的影响越来越大,提供稳定的服务,保证系统的高可用已经变成了整个技术团队需要面对的挑战。 基于此,我们深度采访了得物技术团队核心成员,探索他们在高可用架构上的实践、演进,深入了解大促备战是如何进行的,异地多活体系是如何建设的,全链路
Tech 导读 本文重点介绍了京东科技在权益营销上面的最佳技术实践,京东科技营销权益平台承接了各个业务线的营销职能,并在长期的业务和技术探索中沉淀了丰富的架构设计经验,总结归纳出涵盖权益创建、权益投放、权益核销、权益安全管控及权益费用管理一整套的营销权益解决方案,该方案经过不断迭代更新,已支撑了京东科技各个业务千亿级规模的增长。读者可以从本文中了解到当前京东科技权益营销系统的顶层设计,也可以为读者在权益营销领域的业务和技术建模提供较高的参考价值。
每年双十一,对买家来说是一场买买买的剁手之旅,但对于电商公司的技术人员来说,却是一次严峻的技术期末考。如何保证系统在预估的流量洪峰来临时,既能保证用户的买买买不受影响,
相信在甲方公司(大中型)的信息安全从业人员都会有同样的困境-公司的信息系统资产(已知资产/未知资产)不可管理,信息系统资产漏洞百出,安全设备告警无暇研判。要突破这种困境就需要在信息系统上线之前以自查的形式来形成一种上线流程规范,以规范化的流程促进安全管理。
第十一期 | 你抢不到的优惠券,背后“元凶”竟是垃圾注册?顶象防御云业务安全情报中心发现,某电商平台注册场景出现大批量异常注册。黑产通过批量注册获得大量平台账号,为其后续在电商平台大促期间开展批量抢券、秒杀、刷单等行为进行账号储备。顶象防御云业务安全情报中心BSL-2022-a3c22号显示,黑产通过非法手段窃取、购买公民个人信息及手机黑卡等,并采用作弊设备模拟设备指纹高频切换IP等方式,对电商平台发起大批量的注册攻击,从而获得大量平台账号,以用于后续在平台大促期间进行一系列的薅羊毛行为,不仅使普通顾客因此失去了获得优惠的机会,而且给平台带来了大额的资产损失和大量的无价值的虚假用户。电商平台为何会被黑灰产盯上?电商平台的每一次大促都是黑灰产“捞金”的最佳时机。近几年,各大电商平台为了拉拢客户尤其是新客户,开展了一系列营销活动:新人折扣券,满减优惠券,拉新返现、砍价助力等等,花费的营销成本高达数亿元。以双十一为例。不久前,顶象在业务安全大讲堂系列直播课《双十一电商行业业务安全解析》中就具体提到双十一电商平台的业务安全风险。就双十一促销活动,电商平台们营销周期从10月中下旬就会开始相应的营销投入。整个双11电商大促活动会持续将近一个月,这也给了互联网黑灰产充分的时间去针对各个电商平台的活动规则和活动流程做深入研究,为后续的营销欺诈活动做好充分准备。此外,在营销玩法方面,都呈现出了优惠力度加码,玩法多元化的趋势。比如天猫聚焦高质量发展,构建“低碳双11”,首次设立绿色会场,发放1亿元绿色购物券;关注银发群体,上线淘宝长辈版,设置首个长辈会场;京东则设立了首个“不熬夜”的双11,提升消费者体验;升级多种价格保护政策及放心换服务,保障消费者权益;出台绿色低碳、扶贫助农计划等。营销投入的加大意味着黑灰产有更大的动力去进行攻击,因为一旦成功,收益更大。而丰富的营销手段则意味着黑灰产有更多的途径、更多的场景实现攻击,因为一条攻击路径走不通,便可以选择另一条攻击路径。且新的营销手段往往会因为防控经验不成熟,更容易出现业务规则的漏洞,成为黑灰产攻击的突破口。也正是各平台之间的相互竞争,导致这种营销活动愈演愈烈,继而催生了垃圾注册这个行业,并与黄牛、羊毛党、打码平台等团伙形成了完整的产业链。上游:卡商与接码平台所谓垃圾注册就是通过购买大量手机号和用户个人信息,在了解平台的规则后,借助作弊设备(如:代理IP、群控软件等)自动化的进行批量注册。在整个互联网黑色产业链中,批量注册处在产业的中上游位置。其主要目的是为下游进行一些列黑产活动提供账号。因此,批量注册的账号被视为滋生助长网络犯罪的核心利益链条之一。同时,批量注册的账号多数利用不记名的网络黑卡进行注册,为相关的账号使用者提供了便捷的真实身份隐蔽及账号控制主体溯源规避的功能,亦成为了网络诈骗、赌博等相关犯罪所必须的工具。上游为信息和技术的支持方,即为批量注册提供大量身份信息或资料及其所需的技术支持,卡商和接码平台便处于上游位置。中游为账号获取方即号商,即行为人通过从卡商和接码平台处获取的手机号与验证码,使用自动访问平台注册程序的软件或程序,获得大量注册平台账号。下游为账号使用方,行为人通常向号商购买账号,以供网络刷单炒信、发布违禁信息、进行网络攻击等多种用途。顶象防御云业务安全情报中心监测到,其上游端的卡商手握数以万计的电话卡,其黑卡的主要来源有:实名卡、物联网卡、海外卡以及虚拟卡。实名卡:实名卡主要是通过拖库撞库、木马、钓鱼等方式从网上收集大量身份信息,并通过黑卡运营商批量验证得到的。境外手机卡:黑卡运营商直接从海外购得的手机卡,这些卡无需实名认证,花费低,切合黑产利益。物联网卡:运营商基于物联网公共服务网络,面向物联网用户提供的移动通信接入业务。三大运营商采用各自物联网专用号段,通过专用网元设备支持包括短信、无线数据及语音等基础通信服务,提供用户自主的通信连接管理和终端管理等智能连接服务。虚拟卡:由虚拟运营商提供的电话卡。虚拟运营商与传统三大运营商在某项或业务上达成合作关系。他们就像是代理商,从移动、联通、电信三大基础运营商那里承包一部分通讯网络的使用权,然后通过自己的计费系统、客服号、营销和管理体系把通信服务卖给消费者。像我们常能看到的170开头的号码,多为虚拟号码。卡商获取黑卡的主要渠道大致分为两个来源:一是从运营商“内鬼”处拿卡。运营商的工作人员每个月都有开卡任务,通过平分利益,运营商“内鬼”月均给卡商供卡上千张,二者达成默契合作,形成“双赢”。二是通过找中介进村“拉人头”。当卡商有需求时,一些所谓的地推团队就会集体“下乡进村”,打着三大运营商的名号,搞免费办手机卡送礼的活动,以50到60元的成本获得一张可以正常使用的实名手机卡。中游:利用多种作弊手段养号卡商在获取到黑卡后,下一步就是要利用作弊手段进行养号。其作弊工具主要有三种:猫池猫池是一种可同时支持多张手机卡的设备,根据机
高质量发展的北京城市副中心已扬帆远航,而国务院《关于支持北京城市副中心高质量发展的意见》,更是为副中心的招商引资工作指明了方向,让这里的产业发展更加立体、更有竞争力。
国内外大型企业实践表明,标准化和工具赋能是企业成功的关键所在。DevOps 标准及基于标准的 DevOps 持续交付流水线平台和项目实践,可以较大幅度地提质增效,更加安全敏捷地提高企业市场竞争力!“以评促建,以评促改”,以评估为抓手,让 DevOps 标准更快更好落地,助力企业数字化转型。 2022年7月28日,中国信息通信研究院隆重发布了 DevOps 标准持续交付最新批次评估结果。 浙商银行股份有限公司(以下简称“浙商银行”)本次参评的项目为产业链金融服务平台项目,顺利通过中国信息通信研究院开展的《研发
2021-01 👉支持上海两会全国首次实现线上征询 基于腾讯企点的智能客服能力,支持上海政府首次将”两会“现场征询活动,由线下搬至线上。应对疫情防控工作要求,在减少人员流动聚集的同时,保障政府部门主动接受人大、政协监督,更好服务代表委员履职的创新实践。顺应城市数字化转型、加快数字治理建设的探索实践。同时,能够方便的将相关征询内容进行留存和追溯,提升服务的可追溯性、透明度和满意度。 延伸阅读:2021年从服务上海两会开始,腾讯企点在政务数字化上持续深耕得到认可,在2022年继续服务上海两会线上征询工
2022年至今,疫情多地开花,2-3月深圳首当其冲,3-4月,上海紧跟其后,如今北京和广州也初现苗头。
“京东11·11全球好物节,90%仓配订单当日或次日达”,京东物流的快是众所周知的,作为京东供应链管理最重要的一环,背后都有哪些技术系统在支撑呢?它们在本次京东11·11全球好物节都做了哪些准备支撑呢?
来源 / ToB行业头条(ID:wwwqifu)作者 / 海阳 · 编辑 / 瑞雪
随着苏宁线下线上业务以及全产业、全业态规模式快速增长,特别是每年苏宁 818 大促、双 11 等大促节点,销售订单基本都呈现倍数级增长态势,需要进行大量资源扩容,单个数据中心的容量有限,已经无法支撑苏宁业务的快速发展。同时,单数据中心在高可用上存在不足,一旦数据中心发生故障,会导致业务受损,用户访问中断,带来严重的影响。针对以上问题,苏宁规划建设多数据中心解决方案迫在眉睫。
作为腾讯云原生的防火墙,支持云环境下的SaaS化一键部署,性能可弹性扩展,为企业用户提供互联网边界、VPC 边界的网络访问控制;同时基于流量嵌入威胁情报、入侵防御系统(IPS)等多种安全能力,打造云上的流量安全中心和策略管控中心,保障企业云上资产与业务安全。
本文内容有限,很多设计的小细节未能体现,感兴趣的欢迎交流,希望上述内容对正在从事大屏建设的同学有一些新的启发和思考。
作为全国农行系统业务规模领先的一级分行,中国农业银行广东省分行40多年来向全省各地普及着科技金融带来的便利,搭建起了一张城乡互通、内外相连、渠道融合、高效便捷的金融服务网。 而支撑这张服务网的,是3万余名银行员工在数字化转型进程中的连接、传递与温度。 点击视频,2分钟看农行广东 如何让金融科技更有温度 “连接” 面对数字化转型加速,疫情防控常态化,中国农业银行广东省分行(以下简称省行)积极构建移动学习系统,希望能有这样一个平台:“能把从省行、到二级分行、到支行、再到网点的员工汇聚起来,去关注大家的状态与
https://mp.weixin.qq.com/s/syM4ReAWpZ5d4KI87ogpiQ 作者|马超编辑|薛梁过去两年严选提出并设计了统一售后模型、最大可退金额、和多级退款引擎等概念,抽象出了销退支持、上门取件、极速退款、售后风控等通用能力,经过几次架构演变,有效的降低了业务逻辑耦合和复杂度,可以做到上层业务的快速搭建和服务接入。 作为电商产品,交易在严选的业务中承担着重要的角色。随着业务的不断发展,交易场景的定制化和差异化开始凸显,同时第三方支付合作方的接入也越来越多,如何在保证交易服务安全稳定
近几年移动技术的发展出现了新变化。一方面,多设备、全场景下的应用智能互联、大屏流转需求涌现层出不穷;另一方面,隐私合规成为刚需,移动应用需要主动应对合规问题。终端安全始终处于攻防边界的最前沿,这些新变化也给终端安全风险带来了新挑战。 面向新趋势,蚂蚁安全实验室投入研发端边云协同风控技术,将其作为蚂蚁智能风控技术体系 IMAGE 的重要组成部分。近日,蚂蚁终端安全技术负责人万小飞对积淀6年之久的蚂蚁终端安全能力作了全景式介绍,首次揭秘「蚂蚁终端安全立体防区」三层技术架构,并完整分享了基于端边云协同的蚂蚁终端
1 惠普拆分为两家上市公司。 11月2号,惠普正式将公司拆分为:Hewlett Packard Enterprise 和 HP Inc. 两家上市公司。Hewlett Packard Enterprise 将专注于企业级的 IT 解决方案、基础设施以及软件和云服务。 2 互联网安全领袖峰会召开。 11月3日,第一届中国互联网安全领袖峰会在北京召开,腾讯、百度、阿里巴巴、 京东等互联网巨头企业参加,大会首次提出“互联网安全新生态”议题,旨在建立互联网安全新秩序。 3 百度被爆SDK安全漏洞。 11月3日,百度
全链路压测是以全链路业务模型为基础,将前端系统、后端应用、中间适配层、DB等整个系统环境,完整得纳入到压测范围中,以http请求为载体,模拟真实的用户行为,在线上构造出真实的超大规模的访问流量,以全链路压测模型施压,直至达到目标峰值,在压测过程中发现系统瓶颈和验证系统能力。全链路压测自2013年诞生至今,一直稳居大促质量保障核武器地位。
第19年,618已从京东初创时的那个“年中总结表彰大会的好日子”,一步步发展成为零售行业共同参与的全民购物节,甚至成为中国上半年消费的晴雨表。
国内外大型企业实践表明,标准化和工具赋能是企业成功的关键所在。DevOps 标准及基于标准的 DevOps 持续交付流水线平台和项目实践,可以较大幅度地提质增效,更加安全敏捷地提高企业市场竞争力!“以评促建,以评促改”,以评估为抓手,让 DevOps 标准更快更好落地,助力企业数字化转型。
在“1999年,马云的业务员找我们建黄页,现在我们的业务量有望跑过天猫国际和考拉”一文中, 场主带大家了解了第一批互联网人——丁建东,长居技术管理岗位,也做过基层架构和电商代运营,他的身上有传统企业的印记也带着电商的DNA。
“随着国内全面复工复产,“促消费强市场”成了下一阶段日常生活中的关键词。3月中旬,四川、安徽两省率先发声可有条件地摘口罩,南京、杭州、深圳等多地相继向市民发放消费券,鼓励大家出门消费。
我们正在加速迈入以开放、共享、协作、智能为特征的数字化时代,以云计算、大数据、人工智能、区块链、物联网、5G、虚拟现实等为代表的新一代信息技术蓬勃发展,正以前所未有的速度和力量,改变着生产、生活方式,推动着商业模式与技术的深度融合。 在数字化时代的当下,银行业务更新换代速度加快,业务需求研发迭代周期大大缩短,应用变更变得非常频繁。金融行业的安全、稳定给客户带来的信任,支撑着所有金融业务,这个产品的构建需要强大的技术实力。 博文视点学院联合浙江网商银行,带来视频课《金融级IT架构:数字银行的云原生架构解密》视
严选经过数年的发展,服务数已经过千,研发人员从数十人到数百人,项目交付的效率要求越来越高,这也意味着对产品研发效能提出了更大的挑战。而研发效能的提升就很难绕开DevOps这个老生常谈的名词。
今年的 618 前夕,何小锋显然没有以前那么紧张,人更放松,说话也更淡定。一方面,作为京东科技京东云云原生平台负责人,他已经参加过 19 次大促备战,积累了丰富的经验;另一方面,从 2014 年使用 Docker 到 2018 年建成全球最大规模 Kubernetes (以下简称 K8s)集群再到全面拥抱云原生,京东在容器和云原生领域有着多年的技术实践与经验积累。这些无疑给了他十足的信心! 根据最新消息,6 月 18 日凌晨,京东云发布 618 当天首份战报,在从容应对高并发数亿级流量洪峰的同时创下多项纪录
分布式服务体系建设后,整个淘宝平台变成了一个复杂无比的服务交互链路网。这会带来很多问题,比如:
建筑物追求的是屹立千百年不变,而 IT 系统追求的是灵活性,以便随时应对真实世界的业务变化。 面对用户量和交易量激增,快速进行水平扩展的能力,往往能够决定业务应用的生死存亡。而在用户量回落,工作负载恢复正常水平的时候,快速释放资源、减少成本消耗的能力,则成为企业降本增效的核心竞争力之一。 如何在用户量急剧增加的时候避免服务不可用?如何避免因服务容量不足导致用户体验下降?为了解决这些问题,弹性架构应运而生。实现弹性架构的方式有很多种,包括事件驱动架构、微内核架构,各自支撑着不同的业务实践场景。 而技术并非一
9月2日上午,“2022云上消费周”在北京中国国际展览中心(朝阳馆)正式启动。本次“云上消费周”由中国国际展览中心集团有限公司(以下简称“中展集团”)依托“贸促云展”平台主办,中展集团华港公司承办,北京市朝阳区商务局支持。 中展集团党委书记、董事长林舜杰,朝阳区商务局副局长陈弘毅,中展集团相关单位和部门的领导,腾讯文旅首席架构师王志腾,以及本次活动相关板块合作方和企业代表等60人出席本次启动仪式,活动同步在“贸促云展”平台直播。 (活动启动仪式图片) (活动现场嘉宾及观众图片) (中展集团党委书记、董
在今年的敏捷团队建设中,我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢?由此我的Runner探索之旅开始了!
之前自己也写过好几篇关于全链路压测的文章或者博客,最近看了infoQ上infoQ-数列科技杨德华的专栏,复盘了下自己以往在全链路压测实施方面的工作,发觉还有很多可以做的更好的地方。就以这篇文章来做个总结,顺带说说我自己实施全链路压测工作方面的一些收获和经验。
本文根据张伟杰在【第十五届中国系统架构师大会(SACC2022)】线上演讲内容整理而成。
Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常简洁,易于运维,并且可以支持10PB以上的超大数据集。
前言 运营团队主要负责拉新促收,活动直接接触用户,效果好坏都立竿见影,所以部分同学对运营项目特别有兴趣,好奇运营设计什么内容?有哪些活动类型?这里就给大家简单介绍一下运营设计团队主要负责的四种活动类型:大型促销、短线+单品、长线运营、新品发布 今天主要和大家聊一聊关于大型促销这块的设计内容。 什么是运营大促? 运营大促就是根据不同产品策略目标,对多个产品设计不同的创意玩法及套餐方案,集成整合进行大规模的限时售卖活动(如:新春大促、618年中大促、双11大促等活动),为业务及品牌提供明确、连续、一致的销售增
持续优化,是DevOps体系落地的重要理念之一。通过持续优化,可以推进企业研发队伍的自我完善与效能的持续提升,那么,如何才能构建持续优化的体系呢?
Nginx是一块轻量级的Web服务器/反向代理服务器,目前在github上Star 13.3k Fork 4.9k Watch 951,整体关注度也非常高,最近一次更新是2020年12月5日,最新的版本为release-1.19.6。
领取专属 10元无门槛券
手把手带您无忧上云