首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    2023开放原子全球开源峰会,蚂蚁计算平台开源业内首个工业级流计算引擎

    在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...计算目前已广泛应用在金融、政务、医疗等领域,备受全球研发机构和顶尖科技公司关注。流式计算是一种将流式计算计算结合的交叉创新,融合了流式计算的高度实效性和计算的灵活性,攻坚难度极高。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次开源的工业级流式计算引擎是蚂蚁从2017年开始布局打造,经过五年多工业级应用大考,流式计算做到了在千亿数据规模的“”上秒级延迟计算,是蚂蚁风控的核心基础技术,成功解决了金融场景风险分析难、识别率低...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

    25120

    蚂蚁金服, 开源业内首个工业级流计算引擎

    在高峰论坛上,蚂蚁技术研究院院长、计算负责人陈文光宣布开源 TuGraph 计算平台核心成员——工业级流式计算引擎 TuGraph Analytics。...(:陈文光宣布开源业内首个工业级流式计算引擎 TuGraph Analytics) 去年9月,蚂蚁集团开源了 TuGraph 计算平台中的数据库 TuGraph DB。...据了解,蚂蚁从2015年开始探索计算,布局了数据库、流式计算引擎学习等相关技术,打造了世界规模领先的计算集群,于业界首创了工业级流式计算引擎,多次问鼎数据库行业权威测试 LDBC 世界冠军并保持世界纪录...此次开源的工业级流式计算引擎是蚂蚁从2017年开始布局打造,经过五年多工业级应用大考,流式计算做到了在千亿数据规模的“”上秒级延迟计算,是蚂蚁风控的核心基础技术,成功解决了金融场景风险分析难、识别率低...此次流式计算引擎开源,是延续蚂蚁开源核心基础技术的实际动作,希望通过开放成熟的计算技术,服务更广阔的数字化产业,向世界输出中国科技公司的前沿技术影响力。

    30130

    计算 on nLive:Nebula 的计算实践

    计算之 nebula-plato [计算 on nLive:Nebula 的计算实践] nebula-plato 的分享主要由计算系统概述、Gemini 计算系统介绍、Plato 计算系统介绍以及...计算系统 的划分 [计算 on nLive:Nebula 的计算实践] 计算系统概述部分,着重讲解下图的划分、分片、存储方式等内容。...[计算 on nLive:Nebula 的计算实践] (:以顶点为中心的编程模型) [计算 on nLive:Nebula 的计算实践] (:以边为中心的编程模型) 这两种模式以顶点为中心的编程模型比较常见...Gemini 计算系统 Gemini 计算系统是以计算为中心的分布式计算系统,这里主要说下它的特点: CSR/CSC 稀疏/稠密 push/pull master/mirror 计算/通信 协同工作...Nebula 计算 [计算 on nLive:Nebula 的计算实践] 目前 Nebula 计算集成了两种不同计算框架,共有 2 款产品:nebula-algorithm 和 nebula-plato

    1.5K40

    OLAP计算引擎怎么选?

    大家好,我是一哥,今天聊一聊OLAP技术,一哥认为好的OLAP引擎应该具备以下三个条件:易开发、易维护、易移植。...今天给大家分享一下常见的几种OLAP计算引擎,他们的特性、适用场景,优缺点等,希望对大家在选型应用上有帮助。 Kylin ?...简介 1、Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。...Kylin在如何快速求得预计算结果,以及优化查询解析使得更多的查询能用上预计算结果方面在优化,后续Kylin的版本会优化预计算速度,使得Kylin可以变成一个近似实时的分析引擎。...但是在一些实时性要求很高的场景中,一方面满足实时性要求,一方面提升用户体验。Impala因其快速的响应能力当之无愧作为首选查询分析工具。

    2.1K30

    动态计算

    Pytorch底层最核心的概念是张量,动态计算以及自动微分。 本节我们将介绍 Pytorch的动态计算。...包括: 动态计算简介 计算图中的Function 计算和反向传播 叶子节点和非叶子节点 计算在TensorBoard中的可视化 一,动态计算简介 ?...Pytorch的计算由节点和边组成,节点表示张量或者Function,边表示张量和Function之间的依赖关系。 Pytorch中的计算是动态。这里的动态主要有两重含义。...第一层含义是:计算的正向传播是立即执行的。无需等待完整的计算创建完毕,每条语句都会在计算图中动态添加节点和边,并立即执行正向传播得到计算结果。 第二层含义是:计算在反向传播后立即销毁。...下次调用需要重新构建计算

    1.8K30

    体验PicGo+GitHub+jsDelivr搭建免费体验

    摘要 本文介绍如何通过PicGo上传图片,指定github作为床,并使用jsDelivr对github上图片进行CDN加速。...另外介绍PicGo配置腾讯云作为床,介绍Typora编辑器配置PicGo作为文件上传服务器。...github设置 github创建仓库 如果不想使用main分支,可以新建分支 github获取个人token 生成一个token用于PicGo访问床仓库。...cdn.jsdelivr.net/gh/jquery/jquery/ Typora图片上传PigGo 喜欢使用Typora写markdown格式文章的,可以配置typora让文本中的图片通过PicGo上传到床中去...文件-偏好设置-图像-上传服务器选择PicGo,选择PicGo可执行文件路径 本文有参考: 免费CDN:jsDelivr+Github 使用方法 【免费稳定床最佳实践:PicGo+GitHub+jsDeliver

    14210

    大数据高速计算引擎Spark

    第一部分 Spark Core 第1节 Spark概述 1.1 什么是Spark Spark 是一个快速、通用的计算引擎。Spark的特点: 速度快。...Spark实现了高效的DAG执行引擎,可以通过基于内 存来高效处理数据流; 使用简单。...Spark可以用于批处理、交互式查询 (Spark SQL)、实时流处理(Spark Streaming)、机器学习(Spark MLlib)和计算 (GraphX)。...1.2 Spark 与 Hadoop 从狭义的角度上看:Hadoop是一个分布式框架,由存储、资源调度、计算三部分组 成; Spark是一个分布式计算引擎,由 Scala 语言编写的计算框架,基于内存的快速...,也可以支持SQL即席查询、实时流式计算、机器学习 和计算等 Spark 在资源管理器YARN之上,提供一站式的大数据解决方案 Spark 为什么比 MapReduce 快: 1 Spark

    85920

    流式计算引擎-Storm、Spark Streaming

    目前常用的流式实时计算引擎分为两类:面向行和面向微批处理,其中面向行的流式实时计算引擎的代表是Apache Storm,典型特点是延迟低,但吞吐率也低。...而面向微批处理的流式实时计算引擎代表是Spark Streaming,其典型特点是延迟高,但吞吐率也高。...比如:Storm和Spark Streaming 4、结果存储:将计算结果存储到外部系统,比如:大量可实时查询的系统,可存储Hbase中,小量但需要可高并发查询系统,可存储Redis。...MapReduce的job,由一系列Spout和Blot构成的DAG 4、Spout:Stream的数据源 5、Bolt:消息处理逻辑 基本架构: 1、Nimbus:集群的管理和调度组件 2、Supervisor:计算组件...Spark Streaming: 基本概念:核心思想是把流式处理转化为“微批处理”,即以时间为单位切分数据流,每个切片内的数据对应一个RDD,进而采用Spark引擎进行快速计算

    2.4K20

    落地百余场景、扛过双11,蚂蚁TuGraph流式计算引擎正式开源!

    行业首个工业级流式计算引擎 TuGraph-Analytics,与目前世界范围内有记录的、最快的数据库开源项目 TuGraph DB 来自于一家中国企业,这不仅仅解决了国产基础软件领域的一大难题,健全了开源生态...本次,蚂蚁集团宣布将计算系统中的流计算引擎 TuGraph-Analytics 正式开源。结合蚂蚁计算领域其他项目的优异表现,该引擎又将对开源领域及产业界带来哪些价值?...对于数据模型天然适合模型,同时希望能够更快看到计算的价值的应用,流计算引擎 TuGraph-Analytics 是更加合适的选择。...于是他们将流的能力从两边延伸提供了离在线一体化的能力,使得用户可以基于一套 DSL 支持基于离线的数据进行实验,并在随后的时间内针对计算框架、存储引擎等做了持续性优化,这些工作未来也都将通过开源的方式贡献给社区...TuGraph-Analytics 作为流式计算引擎,偏重于流式实时的分析和计算

    37540
    领券