日前，中国信息通信研究院正式发布《城市大数据平台白皮书》，阐述了城市大数据的概念和内涵，分析了建设城市大数据平台对于破解智慧城市建设难题的意义，并介绍了我国城市大数据平台的发展现状。
4月20日，京东大数据来到了北京大学光华管理学院，这次由京东大数据部平台运营管理负责人葛胜利老师给北大光华管理学院的师生们带来主题为“电子商务大数据平台技术架构与产品架构”的专题讲座，为大家讲述京东大数据平台如何在短短几年的时间里突破技术难关，实现产品创新，建设高效、安全、稳定的大数据平台，并以数据支撑京东的快速发展。 讲座中，葛胜利从京东大数据平台的“使命、架构、产品、运营”四大方面出发，全面的剖析了其中的奥秘。 在讲到平台使命时，胜利总提到，大数据平台在京东集团中的战略地位很重要，因为京东的公司运营是由
后web2.0时代，互联网、物联网每天都在生产大量数据，人们对于这些庞大数据资源的价值渴求，使得“大数据”的概念得以问世。如果说“数据”是支撑未来核心技术的基础“原材料”，那么“大数据”正在演变成一种战略资源，当“用户需求导向”成为企业共识，大数据的收集、挖掘和分析开始支撑企业的业务运转、营销策略乃至战略方向，数据成为企业愈加珍视的宝贵资产。 目前，建设有大数据平台的企业不在少数，对比传统数据库，大数据平台数据大量集中，且蕴含更高价值，其安全建设要求明显更高。然而，由于大数据平台使用非结构化数据库类型，以及
现代商业竞争已经从渠道、资源向系统整体效率倾斜，而效率的竞争很大程度上来自于数据能力的支撑。 当我们从数据平台方的视角出发会发现演进路上存在着诸多挑战，比如： 1. 数据领域的生态非常庞大，针对不同场景在资源、数据规模、时效的权衡下会衍生出不同的架构和组件，以及随之带来的团队碎片化，设备资源的重复投入，数据一致性的焦虑，技术选型的困难和迁移的潜在风险； 2. 在伴随业务扩张的过程中，如何平滑而透明地解决伸缩性，用好自建以及混合多云资源；如何建设一站式多租户的数据工具链，在开发生产以及租户之间做好共享和隔离的
导读：本期“谁是数据英雄？传统企业大数据应用案例”给大家介绍《 兴业银行：信用卡背后的数据生命线》。兴业银行作为首批试水大数据的商业银行之一，借助大数据的关键技术和核心优势，通过对消费者行为的分析和
现在各种新名词层出不穷，顶层的有数字城市、智慧地球、智慧城市、城市大脑；企业层面的有数字化转型、互联网经济，数字经济、数字平台； 平台层面的有物联网，云计算，大数据，5G，人工智能，机器智能，深度学习，知识图谱；技术层面的有数据仓库、数据集市、大数据平台、数据湖、数据中台、业务中台、技术中台等等，总之是你方唱罢他登场，各种概念满天飞…
在业务增涨过程中，每个企业不知不觉积累积累了一些数据。无论数据是多是少，企业都希望让“数据说话”，通过对数据的采集、存储、分析、计算最终提供对业务有价值信息。
声明:本文参考了淘宝/滴滴/美团发表的关于大数据平台建设的文章基础上予以整理。参考链接和作者在文末给出。
现如今每个公司都有自己的大数据平台和大数据团队，可以看出大数据建设在公司的重要地位，不管是用于做数据分析、BI还是做用于机器学习、人工智能等领域，大数据都是基础，海量数据成为了互联网公司的重要资产。
9月9日，由腾讯安全联合北京城市大数据研究院有限公司、中安威士（北京）科技有限公司、闪捷信息科技有限公司、北京三未信安科技有限公司、杭州世平信息科技有限公司等生态合作伙伴，共同举办的《政务大数据平台数据安全体系建设指南》（以下简称《指南》）发布会在线上举办。
本篇内容将通过三个部分来介绍工商银行实时大数据平台建设历程及展望。 一、工行实时大数据平台建设历程 二、工行实时大数据平台建设思路 三、展望
随着数字化转型的不断深入，在企业中，大数据平台建设是许多技术人关心的内容。随着企业的发展，数据量不断增长，原有的数据平台和数据库已经无法满足企业的需求。这时，企业需要对数据平台和数据库进行升级或迁移。但是，这个过程并不容易，需要耗费大量的时间和精力。 在大数据平台升级或迁移过程中，企业需要考虑很多因素，如数据的安全性、可靠性、稳定性等。同时，企业还需要考虑如何保证数据的一致性和完整性。如果在升级或迁移过程中出现问题，可能会导致数据丢失或损坏，给企业带来不可估量的损失。 为你给你提供更多可靠的实践案例，在即将
9月25日，工业和信息化部信息化和软件服务业司将“2018年大数据产业发展试点示范项目名单”进行公示。
本文作者 耿立超，架构师，14年IT系统开发和架构设计经验，CSDN博客专家，著有《大数据平台架构与原型实现：数据中台建设实战》一书。 原文链接： https://laurence.blog.csdn.net/article/details/106851739 故事缘起 我们需要工程原型！ 从2008年Hadoop成为Apache的顶级项目开始，大数据技术迎来了十多年的持续发展，其间随着Spark的异军突起，整个大数据生态圈又经历了一次“装备升级”，变得更加完善和强大。 今天，很多企业已经完成了早期对大数据
百科是这样定义的：精准医学（Precision Medicine）是以个体化医疗为基础、随着基因组测序技术快速进步以及生物信息与大数据科学的交叉应用而发展起来的新型医学概念与医疗模式。
本文目录： 一、大数据时代还需要数据治理吗？ 二、如何面向用户开展大数据治理？ 三、面向用户的自服务大数据治理架构 四、总结 一、大数据时代还需要数据治理吗？ 数据平台发展过程中随处可见的数据问题 大
最近有几个群友问我大数据怎么入门，作为一个零基础大数据入门学习者该看哪些书呢？我结合自己看过的书和了解到的比较好的数据，给大家分享一下。
本文是个人在从零搭建部门数据及运营平台的过程中的笔记。随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。
本文目录 一、大数据时代还需要数据治理吗？ 二、如何面向用户开展大数据治理？ 三、面向用户的自服务大数据治理架构 四、总结 一、大数据时代还需要数据治理吗？ 数据平台发展过程中随处可见的数据问题 大数
践行十四五规划“加快数字化发展 建设数字中国”的重要篇章，各级政府也在加快推进政务服务数字化转型。“数字政府”是建设“数字中国”的有机组成部分，是推动社会经济高质量发展的重要引擎，因此，发力“数字化基建”也成了备受重视的关键举措。
随着大数据在越来越多的企业当中落地，企业要开展大数据相关的业务，那么首先要搭建起自身的数据平台。而企业搭建大数据平台，往往需要结合成本、业务、人员等各方面的因素，来规划数据平台建设方案。今天我们就来聊聊数据平台建设的几种方案。
在大数据平台建设初期，安全也许并不是被重点关注的一环。大数据平台的定位主要是服务数据开发人员，提高数据开发效率，提供便捷的开发流程，有效支持数仓建设。大数据平台的用户都是公司内部人员。数据本身的安全性已经由公司层面的网络及物理机房的隔离来得到保证。那么数据平台建设过程中，需要考虑哪些安全性方面的问题？
本文作者：jayshi，腾讯CSIG产品 1. 背景和市场现状 在过去的2010-2020的十年里，国内大力投资于医疗系统信息化建设，产生并积累了大量医疗数据，迫切需要通过人工智能及大数据等技术来挖掘和实现数据价值，需要整合更加先进的技术基础设施以更有效的方式进行数据集成、数据标准化以及数据分析，最终实现医疗大数据更有效的应用。2020年新冠疫情爆发进一步推动了国内医疗健康产业的数字革命，AI、大数据、数字孪生等技术与医疗健康产业不断结合，促使医疗健康产业对于数据的利用又上了一个新的台阶。 同时，来自不同方
标题图来源：pexels 自治理念 一、趋势 在科幻电影中未来的太空飞船上往往有着人工智能角色，协助人类掌控飞船各方面的状况，或是为飞船上的每个乘客提供贴心的服务。这样的科幻场景离我们现实也不算太远，汽车的自动驾驶能力实际上就是这样一种智能化探索方向。而在我们所关心的大数据平台中，其实也急迫需要这样一个类似大脑的角色，以腾讯大数据平台现阶段的情况为例，我们有着10万+机器的存算集群，上面每天运行千万级别的离在线任务，我们的用户、大数据组件研发者、运维专家们可能会消耗不少精力去处理一些非业务逻辑相关的问
笔者认为数据中台不应该是一个单纯的系统或者是一个软件工具，而应该是一套架构、一套数据流转模式。
用友成功竞标“伊犁州项目” 将建设我国首家财税综合信息大数据平台 近日，用友政务公司成功竞标“伊犁州直财税综合信息大数据平台建设项目”，后期将依托于用友iUAP UDH大数据平台进行建设。据了解，这是
大部分电商大数据平台系统企业在实践项目的时候，并不会把大部分主力资源将品牌能力沉淀成自身的产品和平台，例如很多可以实现共用的大数据服务没有实现真正意义上的服务化、产品化，以致于很多产品总是在执行重复的动作。我们知道目前的大数据中台系统技术带来的不仅仅是数据量的火箭式增长，更重要的是利于大数据网站系统管理能力提升，所以传统的大数据平台建设已经无法满足用户需求。数据中台系统架构体量、产业规模以及云计算高速发展轻松降低基础设施成本，进一步创造企业盈利是大数据平台所关心的重点问题。通过本文我们来简单了解下：企业为什么要搭建大数据中台系统，什么叫大数据中台架构，数据中台系统架构基本构成和如何提升电商大数据平台功能管理。
当前以大数据、人工智能、区块链等为代表的信息技术变革日新月异，国家层面上也相继印发《促进大数据发展行动纲要》及《国家信息化发展战略纲要》等文件，国内科研院所与互联网企业抓住机遇在大数据建设方面成为弄潮儿。数字经济的发展，离不开大数据产业基础。中国要综合运用互联网、大数据、人工智能等技术，发挥数据的最大作用，有效促进政府治理体系和治理能力的提升。
数据猿导读 随着数据量的不断增大、接入的系统越来越多，系统加工效率逐步降低，满足内部数据分析和监管机构的监管数据不断增加的需求，农业银行在2013年开始建设完全自主可控的大数据平台。 本篇案例为数据猿
上篇文章《漫谈大数据平台架构》（阅读原文查看）大家应该对大数据平台有了一个整体架构上的理解和认识，作为姊妹篇，本篇着重讲解大数据平台安全风险与建设。
这个从上至下都在强调数字化转型的时代，越来越多公司重视数据，也越来越多的企业有数据建设的需求。
2月18日，自然资源部办公厅发布关于印发《智慧城市时空大数据平台建设技术大纲（2019版）》我们先来回顾下之前国家对于智慧城市建设的指导性纲要文件：
国家 2035 远景规划提出要加快全面数字化转型的步伐，而“大数据平台”是数字化转型的基础技术之一。经过六年多的探索和实践，微众银行打造了一套在金融领域“自主可控”的开源大数据平台。对于任何企业来说，建立和维护一个大数据平台都不是一件容易的事情，而建设一个有特色的、完整易用的大数据平台，显然更是一件技术难度极高的事情。InfoQ 采访了微众银行 WeDataSphere 主创团队，希望他们的实践经验能给大家带来一些启发和思考。
近日，工信部指导下的数据中心联盟公布第五批大数据产品评测结果，通过评测的产品包括16家大数据供应商的17款大数据产品，覆盖一线云厂商和传统大数据平台供应商。腾讯云大数据平台在SQL、NoSQL和机器学习三方面取得优异成绩，其中NoSQL测试成绩在17款产品中排名第2名。腾讯云大数据平台源自亿万级数据资产，在数据接入、数据处理、数据存储、数据分析等方面积累了丰富的实战经验。
随着大数据政策环境和技术手段的不断完善，大数据行业应用持续升温，中国企 业级大数据市场进入快速发展时期。互联网、电信、金融等开始实际部署大数据平台 并付诸实践，带动软件、硬件和服务市场快速发展。为进一步掌握中国大数据发展和应用情况，中国信息通信研究院开展了2016—2017年度中国大数据发展状况的调查。本报告以调查数据为基础，结合行业专家的访谈，力争详实客 观的反映中国大数据发展现状，为政府和企业了解中国大数据发展状况和制定相关决策提供参考，也为广大关注大数据的从业人员、专家学者和研究机构提供真实可信的大
<数据猿导读> 中国移动（浙江）大数据专家汤人杰在2016年中国信息通信大数据大会上发表了以“浙江移动大数据平台的践行之路”为主题的演讲。他讲到，浙江移动的平台今年主要是PAAS层的建设，主要是两块，
数据治理是推动大型集团企业转型升级、提升竞争优势、实现高质量发展的重要引擎。通过全链数据结构化，实现业务对象、业务规则、业务流程数字化，推进全链业务深度数字化，夯实数据运营底座。
随着数据成为生产要素，数据安全风险与数字经济发展如影随形，如何解决好数据安全领域的突出问题、提升数据安全治理能力都是社会各界的关注重点。
百度糯米上线大数据产品“店铺统计”，解决餐饮商家的运营难题 在2016百度糯米餐饮生态峰会上，百度糯米宣布上线了大数据产品——“店铺统计”。据悉，该产品可通过大数据技术分析，在商家的店铺页上直观展现商
车库咖啡远走厦门建“公场” 欲建设大数据共享平台 北京中关村著名众创空间——车库咖啡入驻海沧区，成立“厦门车库咖啡大数据创新公场”。利用厦门市和海沧区在信息化与智慧城市建设中取得的成果，结合当地的产业
Twitter是最早一批推进数字化运营的硅谷企业之一，其公司运营和产品迭代的很多功能是由其底层的大数据平台提供的。图7-2所示为Twitter大数据平台的基本示意图。
最近遇到了一些朋友在群里讨论数据有哪些工作内容，看了一些讨论后总感觉不是很全面。今晚就顺便整理一波居士自己对数据工作内容的理解，这次会从数据团队的角度出发有哪些工作内容，希望能帮助大家理清思路。
“每天一个数据”分析师新一期内容奉上，请享用~ 采访 | Penny 整理 | Sophie 转载请注明来自CDA数据分析师 否则小编将举报到底！ 人物档案 周宇红，大麦网大数据技术负责人，专注于娱乐行业大数据应用，负责大数据平台建设，机器学习，自然语言处理，社交媒体挖掘等。 DA：能请您先介绍一下自己的基本情况吗？ 周宇红：我其实是从2013年底开始转战互联网的，之前主要在传统的IT行业。到大麦网以后，一开始就接触到大数据。到了2015年初，公司专门设立大数据部门，专门进行大数据的应用分析，我负责整合大
导读 近年来大数据业务规模迅速增长，为大数据平台运营治理带来了新的挑战：海量大数据任务的治理，缺乏统一、标准的数据与评估模型和治理工具，难以支持对大数据任务执行效率、稳定性等进行持续优化。腾讯大数据平台摸索出数据+算法驱动的“平台自治”方案，对于万亿级大数据分析逐步实现“自动化运营”，以一站式的自诊断、自优化、自管理能力，大大降低大数据产品使用门槛。
目前市场上常见的企业级大数据平台型的产品主流的有两个，一个是Cloudera公司推出的CDH，一个是Hortonworks公司推出的一套HDP，其中HDP是以开源的Ambari作为一个管理监控工具，CDH对应的是Cloudera Manager，国内也有像星环这种公司专门做大数据平台。我们公司最初是使用CDH的环境，近日领导找到我让我基于Ambari做一个公司自己的数据平台产品。最初接到这个任务我是拒绝的，因为已经有了很完善很成熟的数据平台产品，小公司做这个东西在我看来是浪费人力物力且起步太晚。后来想想如果公司如果有自己数据平台的产品后续在客户面前也能证明自己的技术实力且我个人也能从源码级别更深入的学习了解大数据生态圈的各个组件。
作为企业数字化转型的基础，数据成为企业建设的重点。如何能够管理好数据，成为各行业的热点问题。 目录： 一、传统数据治理难以满足数字化要求，企业需要新一代大数据治理 二、如何实现以用户为中心的自服务的大数据治理？ 三、自动化是自服务大数据治理的核心 四、总结 一、传统数据治理难以满足数字化要求， 企业需要新一代大数据治理 1、大数据平台建设浪潮过后，企业深刻认识到数据治理的重要性 经历过广泛的大数据平台建设浪潮之后，数据问题变得越来越多，这两年数据治理变得越来越热，各行各业都深刻意识到了数据治理的重要性。这
东方金信CEO王伟哲：金融大数据将推进全社会的诚信建设
浪潮与中国工程院合作，打造国内最高级别“双创平台” 随着移动互联网、大数据、云计算等技术的飞速发展， “智能制造”俨然引领了新一轮的产业变革。 日前，在2016智能制造国际会议上，浪潮集团宣布中国工程
5月8日，作为受邀嘉宾，参加了Intel与Cloudera在北京中国大饭店新闻发布会，两家公司宣布战略合作，该消息成为继Intel宣布放弃大数据平台之后的另外一个热点新闻。对于Intel的放弃早在预料之中，对于Intel与Cloudera合作也在意料之中，但是没有想到的是居然那么快。壮士断腕的Intel反倒让我看出几分勇气可嘉来，Cloudera的顺势而为，也被我所认同，Intel借助Cloudera的技术能力，Cloudera借用Intel的商务平台，然后彼此合作真的就能够成功？换句话说，就一定能在中国成功吗？倒是需要时间的检验？因为到现在为止，大数据应用其实已经不再只是一个平台问题，而是如何与业务应用相结合的问题。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
