Loading [MathJax]/jax/input/TeX/config.js
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >城市免疫力与“AI营养液”:联邦学习的价值与场景

城市免疫力与“AI营养液”:联邦学习的价值与场景

原创
作者头像
脑极体
修改于 2020-03-01 23:42:26
修改于 2020-03-01 23:42:26
3810
举报
文章被收录于专栏:脑极体脑极体

当抗疫战场上的好消息不断传来,关于“城市免疫力”的话题也不断升温。除了公共医疗与我们自身健康上的免疫能力,一座城市如何提高自己的免疫能力,更好应对相关危险,成为了公共话语讨论的焦点。

我们在相关讨论中,看到了预警机制建设、供应链体系完善、城市数字化升级、信息透明制度等等的话题,可以说益处良多。在这里我们从自身视角出发,贡献一点话题:城市免疫力的提高,还与一些新锐技术的应用息息相关。

比如说,在AI领域这几年有一个“明星技术”,被各种顶会热捧,被无数开发者关注,它叫做联邦学习。而这个大众可能依旧陌生的技术,其实就与城市免疫力话题息息相关。

从这次抗疫过程里,不难看出城市各领域、各部门之间的数据不打通、不协同是一个巨大问题。比如说,基层人员要把宝贵时间浪费在无穷无尽的填表上;居民进出小区、医院、车站等公共场所,要一处一扫码一处一填表;相关部门想要获悉和应用其他领域的最新动态数据,更是难上加难。

这个显著暴露的问题,被称为“城市数据孤岛现象”。每个部门都可能建设一套自己的系统和数据,沿用不同的数据表现形式,积累下来就会造成层层叠叠的孤立数据。然而要实现城市数据的全面打通,全面共享,虽然理论上听起来简单,但实际操作又是不可能的。每个部门的日常工作方式、数据需求和数据保密等级不同,彻底打通既缺乏操作性,也不利于真实工作的开展。

那么有没有既尊重城市数据归属权,又能让AI来全盘洞察城市数据的方案呢?

联邦学习就是一种有效的方案。比如,北京经济技术开发区上线了数字化防疫系统——战疫金盾,能够实时监控返城人员流向分布,还能动态掌握园区企业运行情况,帮助地方政府科学决策。业内首创异步联邦学习的京东数科,就参与了战疫金盾的开发,很可能联邦学习技术也在其中发挥了作用。

联邦学习的火爆,原因在于它并不致力于改变机器学习数据存储的基本实现方式,而是改变了不同AI模型之间的协作模式。

在联邦学习模式下,数据依旧保存在“岛“中,但AI模型可以跨越岛屿来架起桥梁,实现特定需求和整体智能的机器学习目标。这种模式被产学研各界认为是未来数据协同和智能协同的基本实现方式,联邦学习也成为了AI技术发展到今天的几大主要趋势之一。

给城市免疫力注入一支“AI营养液”——联邦学习的进化,也许在未来某天将成为新的城市之盾。

联邦学习:打破数据孤岛的AI明星

2016年,谷歌团队提出了联邦学习的概念,随后引起了整个AI学术界的共同关注。

联邦学习为过往AI技术逻辑带来的最大改变在于,它的数据结构可以在参与各方不披露底层数据的前提下,完成共建模型的搭建,之后利用整个数据联邦内的数据资源进行训练,使每个参与方都将获得能力提升。

而联邦学习最大的价值,就是改变了AI时代每个数据拥有方单打独斗的“常识”,将数据资源以可行的方式联合在了一起。将联邦学习投向产业应用,最直接的目标是可以改变重度数据安全领域,尤其是金融产业的智能化效率;向长远看,联邦学习可能改变每一家企业获取AI、打造自身AI体系的方式与门槛,对智能社会有着举足轻重的价值。

肩负着打破数据孤岛的重任,联邦学习很快成为了AI世界中的未来之星。在欧美流行的AI民主化议题里,联邦学习今天占据着举足轻重的地位。

但在从理论架构向现实产业进化的过程里,联邦学习可能还有很长的路要走。而从它保护数据隐私,确保数据安全的基本能力上来看,科技金融毫无疑问是联邦学习落地的第一站。

在中国,联邦学习走向产业应用的步伐正在逐步加快。京东数科、微众银行等企业对联邦学习,从技术向产业的一系列探索,正在向各行业展现这一技术渗透到现实的种种可能。

异步计算与产业化:京东数科破解的“联邦学习密码”

联邦学习走向产业化,是近两年全球AI产学各界普遍关注的议题。在欧美,联邦学习的提出者谷歌,以及亚马逊、IBM等公司都大力发展联邦学习技术。而在国内BAT、华为等科技公司也都在参与联邦学习的产业化过程。

同时,联邦学习也在成为AI顶会的热门话题。比如去年12月举行的NeurIPS 2019中,就有大量论文集中讨论联邦学习的产业应用与行业标准化。刚刚召开的AAAI 2020中,由微众银行、新加坡南洋理工大学、极视角合著的论文《FedVision: An Online Visual Object Detection Platform powered by Federated Learning》被授予“人工智能创新应用奖”。

同时,联邦学习的产业标准化进程也在推进当中。2018年,IEEE联邦学习标准项目宣布成立,这是国际首个针对AI协同技术框架订立标准的IEEE项目,至2019年已经举行了第三次会议。

而在更具体的产业化落地进程里,不能不提到京东数科。有媒体认为,在金融科技产业中,微众银行由联邦学习的学术探索而广为人知,京东数科则将联邦学习的产业应用做到了更前沿的维度。

比如说,联邦学习走向产业应用最大的问题之一,在于最早提出的联邦学习模型,学习进程都是同步的。但在现实中,不同企业和机构所处的计算环境、网络环境、数据环境各不相同。同步计算的联邦学习,在很多情况下无法应用于产业化的多方联合建模

京东数科发现,破解这一问题的关键在于异步计算能力,于是率先提出了异步联邦学习技术,在底层技术逻辑上改变了联邦学习的工作方式,让它更好进化到产业级需求当中。

以异步联邦学习为基础,京东数科已经打造了一系列联邦学习走向开放和应用的技术基础设施。比如基于联邦学习推出 AI开放平台;积极参与推进IEEE联邦学习标准,助力建立行业标准规范;基于自研联邦学习算法,保证联邦森林算法的模型效果的一致性;借助京东数科的多种技术优势,将联邦学习与安全加密、多方安全计算和同态加密等多项技术并用,构建完善的联邦学习产业体系。

从平台化、产业标准、产业一致性,到技术融合,京东数科围绕联邦学习的产业化,完成了从基础技术到技术应用的多层次进化,将联邦学习的技术原点与产业需求进行对接,通过异步联邦学习构筑了完善的数据协同产业应用生态,实现了联邦学习领域的多项领先。

基于异步联邦学习的技术优势,以及多种安全加密技术的融合,京东数科推出了联邦数字网关。联邦数字网关保证了数据不需要离开储存位置也能够实现数据的融合利用,在不同机构之间搭建起安全、智能、高效的连接,并保证数据接入安全、建模安全、数据交互安全,最终形成数据联盟,实现合作共赢的目标。

基于这一系列联邦学习的产业实践,京东数科在联邦学习领域,实现了商业化和应用场景落地方面的领先。而其领先探索也为我们展示了这样一副图画:未来,联邦学习究竟如何影响和改变我们的生活。

金融风控与城市智能:联邦学习的应用进化纪

在联邦学习的综合场景应用中,金融科技领域毫无疑问是落地第一站。因为金融智能和智能风控领域,涉及大量的数据智能化和数据学习,但同时数据的保密等级高、安全要求严格。而联邦学习技术刚好同时满足了这两种需求,在金融数据安全与金融产业智能化升级之间取得了重要平衡。

京东数科的联邦学习技术,已经在金融风控领域基于联邦学习进行了持续落地。通过联邦算法、安全加密算法,在个人信用评分、企业信用评分、精准营销、精准放贷、精准风控、地块洞察和医疗诊断等场景下实现了跨域学习联合建模和安全可靠的知识共享服务。

而在金融产业之外,下一个最有联邦学习技术应用潜力和落地需求的场景,是近两年如火如荼发展中的智慧城市。

一座城市,是由无数个政务、企业、公共服务系统所构成的。随着数字化城市升级的加快,各个系统都在构建自己的数据体系与智能化系统。然而这些系统大多数时候都是独立存在的,交通不知道物流,水利不了解气象。这就导致城市的整体智能化很难发展起来,智慧城市变成了千百根耸立的数据烟筒。

然而各系统之间数据保密性、数据权责等客观需求,又让数据打通并不那么现实。这种情况下,联邦学习体系可以成为关键的破解方案,在确保数据各有的同时,构建城市整体智能进化方案。京东数科的智能城市体系中,已经大量应用了联邦学习技术与联邦数字网关,构成了京东数科在智慧城市领域的明星技术。

而从金融风控到城市智能化,可以看到联邦学习技术在大量差异化行业场景中,都有着基础应用价值。各行各业都将可能自联邦学习模式中获益,实现智能协同、消弭数据壁垒。

联邦学习带来的改变将是社会化和底层化的,而从理论架构到产业实践、商业落地这关键一步,已经被京东数科探索出了扎实的可能。

一座数据与智能之间、无数数据架构之间、智能社会之间的桥梁正在建设进行时。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
腾讯安全联动头部企业携手验证“数字安全免疫力”模型框架
6月13日,腾讯安全联合IDC发布“数字安全免疫力”模型框架及《加强企业数字安全免疫力,助力数字时代下的韧性发展》白皮书,提出用免疫的思维应对新时期下安全建设与企业发展难以协同的挑战,围绕“数据”和“数字业务”建立三层由内至外的弹性、自适应、可扩展的防御体系。
腾讯安全
2023/06/15
4320
腾讯安全联动头部企业携手验证“数字安全免疫力”模型框架
腾讯丁珂:以数字安全免疫力建设安全新范式
6月13日,腾讯安全联合IDC等多家机构在北京举办研讨论坛,并发布“数字安全免疫力”模型框架,提出用免疫的思维应对新时期下安全建设与企业发展难以协同的挑战。腾讯集团副总裁、腾讯安全总裁丁珂在论坛上表示,数智化新阶段,发展驱动成为安全建设的普遍共识,企业需从被动安全变为主动防御,以数据资产和业务资产为目标,建设一套全新的安全范式和框架。
腾讯安全
2023/06/13
2390
腾讯丁珂:以数字安全免疫力建设安全新范式
澎湃新闻对话腾讯丁珂:从“治已病”到“治未病”,企业需快速构建“安全免疫力”
随着数字化进程加快,企业数字化体系的边界在不断拓展,安全风险和挑战不断增加,传统被动防御的安全应对常显疲态,数字安全时代亟待建立全新的安全范式。
腾讯安全
2023/06/21
3170
澎湃新闻对话腾讯丁珂:从“治已病”到“治未病”,企业需快速构建“安全免疫力”
腾讯安全升级三大原子能力,助力企业构建数字安全免疫力
数字化时代,企业如何治好“发展”与“安全”失调症?近日,腾讯安全、IDC、腾讯研究院等联合举办研讨论坛,发布“数字安全免疫力”模型框架,提出用免疫思维应对新时期下安全建设与企业发展难以协同的挑战。
腾讯安全
2023/06/16
3490
腾讯安全升级三大原子能力,助力企业构建数字安全免疫力
编织联邦学习的产业路径,腾讯向金融智能化的更远处进发
这届人工智能能够化身“新基建”的中流砥柱,避免了重蹈“AI寒冬”的覆辙,一个很大的原因就是,机器学习从产业层面提质增效,真正让技术变成了社会经济的价值推动力。
脑极体
2020/04/21
5380
京东城市郑宇:AI与大数据将“重塑城市” | CCF-GAIR 2019
7 月 12 日-7 月 14 日,2019 第四届全球人工智能与机器人峰会(CCF-GAIR 2019)于深圳正式召开。峰会由中国计算机学会(CCF)主办,雷锋网、香港中文大学(深圳)承办,深圳市人工智能与机器人研究院协办,得到了深圳市政府的大力指导,是国内人工智能和机器人学术界、工业界及投资界三大领域的顶级交流博览盛会,旨在打造国内人工智能领域极具实力的跨界交流合作平台。
AI科技评论
2019/07/16
7340
京东城市郑宇:AI与大数据将“重塑城市” | CCF-GAIR 2019
腾讯安全杨光夫:企业需改变“头痛医头”现状,构建持续进化的安全免疫力
6月13日,腾讯安全联合IDC发布“数字安全免疫力”模型框架,主张将守护企业数据和数字业务两大资产作为企业安全建设的核心目标。腾讯安全副总裁杨光夫在《助力企业持续进化安全免疫力》的主题演讲中表示,在新业态、新威胁、新场景、强监管下,企业需要改变安全“头痛医头”的现状,通过安全左移、以终端为核心重塑信任边界、建设智能化安全运营平台三大举措,构建持续进化的安全免疫力。
腾讯安全
2023/06/21
5560
腾讯安全杨光夫:企业需改变“头痛医头”现状,构建持续进化的安全免疫力
腾讯安全董志强:四大关键步骤促进数据安全治理闭环,提升企业免疫力
高速发展的数字时代,数据已成为推动产业发展的最重要生产要素之一,真正成为了创造经济财富的数字能源,守护数据资产的安全成为企业高质量发展不可回避的重要命题。
腾讯安全
2023/06/15
4830
腾讯安全董志强:四大关键步骤促进数据安全治理闭环,提升企业免疫力
腾讯携手新乡,共建中部智慧城市新范本
12月16日,腾讯与河南省新乡市人民政府正式达成战略合作,双方将充分发挥各自资源优势,在智慧城市底座、数字惠民体系、数字城市治理等方面开展合作,通过大力增强数字基础设施建设,推动新乡市社会治理数字化,助推数字新乡高质量发展。 腾讯云与新乡市政府签订战略合作 新乡市地处河南省北部,拥有丰厚的历史文化底蕴和旅游资源,交通区位优越,工业及新型展业基础较好,科教优势也非常明显,是中西部地区高校数量较多的非省会城市之一。 “十四五”期间,新乡市将大力夯实新乡新型智慧城市底座,全力塑造新乡数字治理新模式。 助力构建
云产品技术支持小助手
2022/06/24
7990
腾讯携手新乡,共建中部智慧城市新范本
腾讯云大学【腾讯工业云在线课堂】系列
如何利用仿真云平台来构建我国工业仿真云生态体系,提供服务化的仿真技术和开放式的仿真服务,让仿真无门槛!
可可爱爱没有脑袋
2020/03/12
50.9K0
11月,邀您一起探索数字化转型、智慧城市发展新路径!
距2020年初疫情暴发已经接近两年时间,但武汉“数字抗疫”的故事对于当地市民来说依然历历在目。 2020年2月8日,由腾讯等企业助力上线的“武汉战疫”小程序成为了武汉民众出行的重要凭证。2月10日,武汉全市约90万学生登陆武汉教育空中课堂,进行网络课程学习...... 在后疫情时代,我们看到了数字化的更多可能:线上会议、AI技术、云会展,从“数字抗疫”到“数实融合”,产业互联网的蓬勃发展重塑数字经济新生态、加速了产业数字化转型。 而身处于数字经济洪流中的我们,如何寻找机遇,把握机遇? 11月3日,202
云产品技术支持小助手
2022/06/24
5960
11月,邀您一起探索数字化转型、智慧城市发展新路径!
腾讯安全周斌:用模型对抗,构建新一代业务风控免疫力
6月13日,腾讯安全联合IDC发布“数字安全免疫力”模型框架,主张将守护企业数据和数字业务两大资产作为企业安全建设的核心目标。腾讯安全副总裁周斌出席研讨论坛并发表主题演讲,他表示,在新技术的趋势影响下,黑灰产的攻击行为会进一步模拟真人行为,传统基于过去行为预测未来行为的风控策略将局部失效,业务风控正在由“规则对抗”进入“模型对抗”时代。
腾讯安全
2023/06/15
5030
腾讯安全周斌:用模型对抗,构建新一代业务风控免疫力
中国人民大学商学院毛基业:以免疫力思维,构建数字经济高质量发展的安全基石
作者:中国人民大学商学院教授 国际信息系统学会中国分会(CNAIS)原主席(理事长) 毛基业
腾讯安全
2023/06/27
2720
中国人民大学商学院毛基业:以免疫力思维,构建数字经济高质量发展的安全基石
大模型引发新安全挑战 腾讯安全助力企业重建安全度量体系
AI大模型席卷全球,为各行业带来颠覆式创新机遇的同时,也打开了网络攻击的潘多拉魔盒。近日,一份报告指出,利用生成式AI制作的恶意软件增长了约700%,网络钓鱼邮件增长了约135%。
用户10744390
2023/09/11
4760
产业互联网时代,为何金融科技和云计算成了“黄金搭档”?
2018年9月,京东金融正式更名京东数科,当一家做金融起家的公司今天在各种场合谈着智慧城市、智能农业、产业互联网时,一时之间外界还很难适应。
罗超频道
2019/06/12
1K0
京东数科业务架构全披露,陈生强发布城市操作系统和京东钼媒
11 月 20 日,在 JDD-2018 京东数字全球探索者大会上,陈生强宣布,京东数字科技(JD Digits)正式成为京东金融的母品牌,这也意味着它的业务架构逐渐明晰,主要下设了京东金融、京东城市、京东农牧、京东钼媒、京东少东家等独立业务品牌。当然,京东金融作为核心业务之一,依然会涵盖个人金融、企业金融、金融科技等业务。
AI科技大本营
2018/12/17
7170
以落地考验价值,大模型的产业大考来了
从 BERT 和 GPT-3 发展至今,大模型已然成为当前 AI 发展的重要方向。大模型增强了 AI 的通用性,构筑了 AI 技术和应用的坚实基座。在这股不可阻挡的大模型发展潮流中,各家大厂纷纷投入大量资金、人才和配套服务,从数据、算法和算力多方面推进大模型的研制、训练和建设。
机器之心
2022/12/16
8630
以落地考验价值,大模型的产业大考来了
一份安平大奖,窥探平安智慧城市的底层逻辑
经过一场场激烈的研讨和角逐后,素有智慧城市领域“奥斯卡”之称的世界智慧城市大奖终于被揭晓。
Alter聊科技
2023/01/13
3360
AI 正在“上岸”:一次关于落地、进阶与趋势的集体答卷
5 月 23~24 日,由极客邦科技旗下 InfoQ 中国主办的 AICon 全球人工智能开发与应用大会·上海站(2025) 圆满落幕。大会吸引了超 800 位 AI 开发者、技术专家与相关从业者齐聚一堂,现场氛围高涨,技术交流深入务实。
深度学习与Python
2025/05/26
7480
AI 正在“上岸”:一次关于落地、进阶与趋势的集体答卷
平安科技王健宗:所有AI前沿技术,都能在联邦学习中大展身手
今天,我们来聊聊联邦学习(Federated Learning)。人工智能和大数据领域的人对于这个新兴词汇一定不陌生,但关于这个连名字都有多种叫法的技术(联邦学习、联合学习、联盟学习......)究竟是如何实现的,很多人只是一知半解。
AI科技大本营
2020/05/29
1.1K0
平安科技王健宗:所有AI前沿技术,都能在联邦学习中大展身手
推荐阅读
腾讯安全联动头部企业携手验证“数字安全免疫力”模型框架
4320
腾讯丁珂:以数字安全免疫力建设安全新范式
2390
澎湃新闻对话腾讯丁珂:从“治已病”到“治未病”,企业需快速构建“安全免疫力”
3170
腾讯安全升级三大原子能力,助力企业构建数字安全免疫力
3490
编织联邦学习的产业路径,腾讯向金融智能化的更远处进发
5380
京东城市郑宇:AI与大数据将“重塑城市” | CCF-GAIR 2019
7340
腾讯安全杨光夫:企业需改变“头痛医头”现状,构建持续进化的安全免疫力
5560
腾讯安全董志强:四大关键步骤促进数据安全治理闭环,提升企业免疫力
4830
腾讯携手新乡,共建中部智慧城市新范本
7990
腾讯云大学【腾讯工业云在线课堂】系列
50.9K0
11月,邀您一起探索数字化转型、智慧城市发展新路径!
5960
腾讯安全周斌:用模型对抗,构建新一代业务风控免疫力
5030
中国人民大学商学院毛基业:以免疫力思维,构建数字经济高质量发展的安全基石
2720
大模型引发新安全挑战 腾讯安全助力企业重建安全度量体系
4760
产业互联网时代,为何金融科技和云计算成了“黄金搭档”?
1K0
京东数科业务架构全披露,陈生强发布城市操作系统和京东钼媒
7170
以落地考验价值,大模型的产业大考来了
8630
一份安平大奖,窥探平安智慧城市的底层逻辑
3360
AI 正在“上岸”:一次关于落地、进阶与趋势的集体答卷
7480
平安科技王健宗:所有AI前沿技术,都能在联邦学习中大展身手
1.1K0
相关推荐
腾讯安全联动头部企业携手验证“数字安全免疫力”模型框架
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档