摘要：本文作者彭明德，介绍了钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...钱大妈与阿里云 Flink 实时计算团队共建实时风控规则引擎，精确识别羊毛党以防营销预算流失。...图一：钱大妈实时风控流程示意图 二、业务架构 钱大妈风控业务架构如图二所示总共分为四个部分：事件接入、风险感知、风险应对、风险回溯。...图二：钱大妈实时风控业务架构图 三、规则模型 风控业务专员通过产品界面简单配置即可实时动态发布风控规则，同时对在线 Flink 作业的规则进行新增、更新以及删除，其中风控规则模型主要分为统计型规则和序列型规则...图六：社区Flink动态CEP规则表 五、回顾展望 基于 Flink 的实时风控解决方案已接应用于钱大妈集团内部生产环境，在此解决方案里未引入新的技术组件和编程语言，最大化复用 Flink 资源实现实时风控场景需求
目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步，经过五年的不断探索与创新，已经可以有效覆盖事前、事中、事后各个环节。...主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...风控系统要进行数据的合并。举个例子，当有一笔支付风控校验，支付BU只抛过来支付信息（支付金额、支付方式、订单号等）。...由于每个风控Event请求，都需要执行数百个规则，以及模型，这时，风控引擎引入了规则执行路径优化方法。
「13章」Flink 从0到1实战实时风控系统Flink 核心技能实操环境搭建在进行 Flink 开发之前，需要先搭建好开发环境。...MyMapFunction()) .startNewChain() .keyBy(value -> value.f0) .sum(1);使用异步 I/O：对于涉及到外部存储（如数据库
性能和复杂度可以兼得 携程的风控系统，和大部分第三方支付平台一样，也是以实时风控系统为主： 支付环节一般留给风控校验的时间不会超过1s，业务风控点上更是希望风控能在100ms内就能通过；对性能的追求，也是对极致用户体验的追求...在实时风控场景里大量部署复杂模型，使模型也能和规则一样能直接拒绝交易；平均来看、执行一个模型以及相关的变量计算所需的资源可能与200条普通规则相当，对系统的架构和性能都是很高的挑战。...携程风控架构变迁简史 ? 携程自建风控系统开始于2011年左右，直到2015年正好赶上公司技术栈从.Net往Java平台转变，风控系统也迎来了一次完全的重写。...每天风控收集上来的数据超过50亿条，其中超过1亿左右的请求需要风控实时校验风险并返回给业务系统当前操作是否可以继续。...支撑风控系统的高可用、高性能，离不开强大的基础设施，下面我向大家展示一下携程风控的几个核心服务和组件： ? 风控引擎： ? 我们给他起了一个名字叫 Matrix，意思是像魔方一样灵活多变。
这要求风控系统一定要有实时性。本文就介绍一种实时风控解决方案。 1.总体架构 风控是业务场景的产物，风控系统直接服务于业务系统，与之相关的还有惩罚系统和分析系统，各系统关系与角色如下： ?...该系统有三条数据流向： 实时风控数据流，由红线标识，同步调用，为风控调用的核心链路； 准实时指标数据流，由蓝线标识，异步写入，为实时风控部分准备指标数据； 准实时/离线分析数据流，由绿线标识，异步写入，...2.1 实时风控 实时风控是整个系统的核心，被业务系统同步调用，完成对应的风控判断。 前面提到规则往往由人编写并且需要动态调整，所以我们会把风控判断部分与规则管理部分拆开。...前边提到，做规则判断需要事实的相关指标，比如最近一小时登陆次数，最近一小时注册账号数等等，这些指标通常有一段时间跨度，是某种状态或聚合，很难在实时风控过程中根据原始数据进行计算，因为风控的规则引擎往往是无状态的...Flink 把汇总的指标结果写入 Redis 或 Hbase，供实时风控系统查询。两者问题都不大，根据场景选择即可。
摘要：本文整理自阿里云开发工程师耿飙&阿里云开发工程师胡俊涛，在 FFA 实时风控专场的分享。...我们这里展示三个典型场景： 第一个场景，实时风控。...比如第一个方案，通常情况下，规则都会存储在数据库中，而典型的对 CepOperator 的修改，则是让 CepOperator 直接和数据库交互，拉取最新规则。...这样当 CEP 作业并发较多的时候，每个 sub_task 都要去连接数据库，这会给数据库带来额外的压力，并且更大的问题是，不同的 sub_task 拉取到的规则一致性难以保证。...然后准备好数据库相关内容，在 RDS 控制台创建 database。 注意在配置好之后，我们要在数据库连接中设置白名单，来保证我们的 Flink 全托管实例能访问 RDS 数据库。
导语 随着部门在业务安全领域的不断拓展，围绕着验证码、金融广告等服务场景，腾讯水滴作为支撑业务安全对抗的实时风控系统，上线的任务实时性要求越来越高，需要支撑的业务请求量也随之增加。...对于业务快速上线和资源快速扩缩容的需求，且公司自研上云项目往全面容器化上云方向推进，水滴风控平台开始进行自研上云的改造。...水滴后台架构 水滴平台主要是用于业务安全对抗的高可用、高性能、低延时的实时风控策略平台，提供一系列的基础组件给策略人员进行构建策略模型，能够帮忙策略人员快速地完成策略模型的构建和测试验证。...水滴系统架构如下图所示： 水滴实时风控平台系统主要由配置处理模块和数据处理模块两部分组成。 配置处理模块主要由前端 web 页面、cgi 、mc_srv 和 Zookeeper 等组成。
目前携程利用自主研发的风控系统有效识别、防范这些风险。携程风控系统从零起步，经过五年的不断探索与创新，已经可以有效覆盖事前、事中、事后各个环节。...图1 主要分三大模块：风控引擎、数据服务、数据运算、辅助系统。 风控引擎：主要处理风控请求，有预处理、规则引擎和模型执行服务，风控引擎所需要的数据是由数据服务模块提供的。...由于携程的业务种类非常多，而且每种业务都有其特性，在进入风控系统（Aegis）后，为了便于整个风控系统对数据进行处理，风控前端有一个适配器模块，把各个业务的数据都按照风控内部标准化配置进行转换，以适合风控系统使用...风控系统要进行数据的合并。 举个例子，当有一笔支付风控校验，支付BU只抛过来支付信息（支付金额、支付方式、订单号等）。...由于每个风控Event请求，都需要执行数百个规则，以及模型，这时，风控引擎引入了规则执行路径优化方法。
12月1日晚间，卓翼科技（002369.SZ）发布公告称，公司控股股东、实控人夏传武因涉嫌内幕交易、操纵证券市场罪，经深圳市中级人民法院批准，于12月1日被深圳市公安局执行逮捕。...资料显示，夏传武生于1973年，2004年起任职卓翼科技，2014年初成为卓翼科技实控人。而夏传武被抓主要以与2018年公司重组期间内幕交易有关。
本篇更新策略篇的规则集性能测算及Python实操，内容选自《100天风控专家》第57期。 首先介绍规则集的完整分析流程，包括五个步骤。 一、规则集分析流程 1....三、案例分析Python代码实操 通过配置决策树参数以及入模变量数量，自动化生成规则100多条，通过规则评估指标如命中率、精准率、召回率、lift进行初步筛选，组成为规则集进行初步的性能测试。...-end- 以上内容节选自《100天风控专家》从0到1的信贷风控训练营
陈建平，后台开发工程师，现就职于TEG安全平台部-业务安全中心，主要负责中心实时策略风控平台开发。...导语 随着部门在业务安全领域的不断拓展，围绕着验证码、金融广告等服务场景，腾讯水滴作为支撑业务安全对抗的实时风控系统，上线的任务实时性要求越来越高，需要支撑的业务请求量也随之增加。...对于业务快速上线和资源快速扩缩容的需求，且公司自研上云项目往全面容器化上云方向推进，水滴风控平台开始进行自研上云的改造。...水滴后台架构 腾讯水滴平台主要是用于业务安全对抗的高可用、高性能、低延时的实时风控策略平台，提供一系列的基础组件给策略人员进行构建策略模型，能够帮忙策略人员快速地完成策略模型的构建和测试验证。...水滴系统架构如下图所示： 水滴实时风控平台系统主要由配置处理模块和数据处理模块两部分组成。 配置处理模块：主要由前端 web 页面、cgi 、mc_srv 和 Zookeeper 等组成。
万达网络科技集团的技术团队，建设和维护着一套实时风控平台。这套实时风控平台，承担着各种关键交易的在线风控数据的写入和查询服务。...实时风控平台后端的数据库系统在高性能，可靠性，可扩展性上有很高的要求，并且需要满足如下核心功能和业务要求： 风控相关业务数据实时入库 实时风控规则计算 通过 BI 工具分析风控历史数据 ETL 入库到...Hadoop 数据仓库 应用开发侧需要兼容 MySQL，降低应用改造门槛为实现上述业务目标，万达网络科技集团的技术团队在实时风控数据库选型的早期阶段，首先选择了 MySQL Galera Cluster...这些问题集中反映在以下几个方面：最终万达的技术团队，通过评估验证，选择了 TiDB 帮助他们实现一个高性能，高可靠性和高扩展能力的实时风控平台后台数据库系统。...并且数据库集群获得了线性提升和扩展的能力。 集群整体 QPS（万级起）和 Latency (毫秒级) 对风控的实时性要求做出了技术保证。
实现了完整的mysqldump逻辑备份、binlog增量备份、xtrabackup物理备份恢复，帮你快速掌握操作要点 TOC 基础环境搭建 本文相关环境均基于docker实现，下面是启动一个最基本的mysql数据库...全量备份 全量备份基本模式： 进入到mysql容器中 创建备份目录 通过mysqldump命令，执行数据库逻辑备份操作，将结果输出到 sql文件中。...，包括mysql库 全量恢复 通过在上述库中，执行drop table t_user1，删除该表后，开展恢复： 通过mysql命令，即可将 dump sql文件执行到对应的数据库中。...mysql -h localhost -u root -p < /data/backups/dmp/dmp1.sql 其他备份 1、导出指定数据库的指定表： --databases 指定备份的数据库 -...-tables 指定备份的具体数据库表 mysqldump --opt --single-transaction --master-data=2 --host=localhost --user=root
一致性 数据库总是从一个一致性的状态转移到另一个一致性的状态，事务只要没有提交那么其中的所做的所有修改都不会落地到数据库。...持久性 事务一旦提交，其所做所有修改都会落地到数据库 2. 隔离级别 SQL标准中定义了四种隔离级别，隔离级别定义了在一个事务中所做的修改，哪些在事务内和事务间是可见的。...Mysql实操 Mysql版本：Server version: 8.0.18 MySQL Community Server - GPL 3.1 查看mysql当前隔离级别 mysql> select
实时监控：风控引擎可以通过分析客户信息、历史交易数据和公共数据库等信息，对客户的信用状况进行评估和风险判断，并通过实时监控各种风险，对交易异常、信用评估、欺诈检测等，通过即时通知进行提醒和预警。...数据是风控引擎的重要组成数据是风控决策引擎中不可或缺的组成部分，包括历史数据、实时风险数据、行为数据等等，不仅提供关键的信息和指示，更有助于做出明智的决策。...例如，金融行业的业务数据一般是通过SQL接入内部数据库；三方数据一般是通过URL接入外部数据厂商的数据；也可以通过映射实现外部数据与风控引擎的字段关联，并且能够对同一外部数据的多次调用。...以顶象Dinsight实时风控引擎为例，首先在控制台接入，然后就可以在引擎配置。...接入控制台 (console) ，在application.properties中配置：接入引擎 (engine)， 在application.properties中配置：顶象Dinsight实时风控引擎可以在营销活动
达梦数据库备份方式：物理备份，逻辑备份 物理备份 冷备：（dmap服务打开的状态下，数据库是关闭的） 热备：（dmap服务一定是打开的，数据库是打开的，数据库要开归档) 逻辑备份 导入导出：dexp...查看的相关命令 SQL> alter database open; #open状态 SQL> select name,status 使用工具开归档 2.备份操作 通过dmrman去做备份 Dmap 要开启，数据库实例关闭
在 7 月 21-22 日深圳 ArchSummit 全球架构师峰会上，来自蚂蚁集团的高级技术专家马希民分享了，基于信贷实时风控，构建数据智能的高可用实时风控决策系统实践。以下是演讲内容整理。...我们团队主要负责的是消费金融产品的实时风控，例如支付宝收银台中花呗、花呗分期、信用卡分期等贷记产品显示时，表示这笔交易已经通过了我们的实时风控系统，被视为无风险交易，我们实时的决策系统面临的主要问题有以下四方面...因此，实时风控除了需要保障日常正常流量压力下的极速响应，还需要在面临一些特殊状态依然保持高可用，例如大促、直播的高峰流量，以及当风险规则因为数据等原因导致异常，进行了远超出预期的拦截，实时风控架构需要对上述特殊状态进行快速的自适应响应...，来将实时风控的响应时间和拦截率始终维持在一个合理的水位。...今天我主要分享了如何使实时风控决策系统实现极速响应和高可用性。实时风控决策系统的在性能方面的核心优化手段是降低 IO，我之前提到的多级决策、分层决策、预决策和规则精简，本质上都是为了减少 IO。
背景 现在越来越流行基于 SpringBoot 开发 web 应用，其中利用 mybatis 作为数据库 CRUD 操作已成为主流，楼主以 mysql为例，总结了九大类使用 mybatis 操作数据库...in 查询 利用if 标签拼装动态 where 条件 利用 choose 和 otherwise组合标签拼装查询条件 动态绑定查询参数：_parameter 利用 set 配合 if 标签，动态设置数据库字段更新值...=null"> and grp_no = #{_parameter} 09 利用 set 配合 if 标签，动态设置数据库字段更新值 <update id="updateById
数据库 – 数据库和表的基本操作（一） MySQL数据库 – 数据库和表的基本操作（二） MySQL数据库 – 单表查询（一） MySQL数据库 – 单表查询（二) MySQL数据库 – 单表查询（三）...MySQL数据库 – 连接查询 MySQL数据库 – 子查询 MySQL数据库 – 复杂查询（一) MySQL数据库 – 复杂查询（二） MySQL数据库 – 使用聚合函数查询 MySQL数据库 –...3-MySQL数据库系统设计实战 MySQL开发技巧 – 查询、索引和完整性 数据库查询 – 选课系统 数据库设计 – 博客系统 数据库开发基础案例 – JDBC 技术应用 数据库开发中级案例 –...PythonWeb框架应用 数据库开发中级案例 -ORM框架应用 数据库开发综合案例 – 仓库管理系统设计 数据库开发综合案例 – 图书管理系统设计 数据库4-层次、网状、关系模型实战 数据模型 特别感谢黄副班...、小青提供代码，有问题联系公众号【学思则安】留言更正 其他作业链接 头歌java实训答案集 数据库1-MySQL数据定义与操作实战 MySQL数据库 – 初识MySQL 数据库部分一条一条的写，可鼠标手动粘贴
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
云直播
