首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

好的工作想法从哪里来

提出论点 好的研究想法,兼顾摘果子和啃骨头。...两年前,曾看过刘知远老师的一篇文章《好的研究想法从哪里来》,直到现在印象依然很深刻,文中分析了摘低垂果实容易,但也容易撞车,啃骨头难,但也可能是个不错的选择。...初入团队,寻找自己的立足点,需要一个好的工作想法。每年末,抓耳挠腮做规划,想要憋出一个好的工作想法。很多同学,包括我自己,陆陆续续零零散散想到很多点,然后自己不断否掉。...人的三维+时间半维 具体如何找到好的想法,一时半会没有头绪。因此,回到最初的起点,从人的层面,我有什么?我想要有什么?...引用 好的研究想法从哪里来 杜跃进:数据安全治理的基本思路 来都来了。

8.2K40

分布式事务的 6 种解决方案,写得非常好!

介绍 在分布式系统、微服务架构大行其道的今天,服务间互相调用出现失败已经成为常态。如何处理异常,如何保证数据一致性,成为微服务设计过程中,绕不开的一个难题。...这样还是会遇到阻塞式重试相同的问题,即 DB 写入成功了,但推送失败了。 理论上来讲,分布式系统下,涉及多个服务调用的代码都存在这样的情况,在长期运行中,调用失败的情况一定会出现。...这也是分布式系统设计的难点之一。另外,MQ 系列面试题和答案全部整理好了,微信搜索互联网架构师,在后台发送:2T,可以在线阅读。...TCC 在业务上解决了分布式系统下,跨多个服务、跨多个数据库的数据一致性问题。但 TCC 方式依然存在一些问题,实际使用中需要注意,包括上面章节提到的调用失败的情况。...MQ 事务也会存在 prepare状态,需要 MQ 的消费处理逻辑来确认业务是否成功。 总结 从分布式系统实践中来看,要保障数据一致性的场景,必然要引入额外的机制处理。

61620
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    分布式事务的 6 种解决方案,写得非常好!

    ---- 介绍 在分布式系统、微服务架构大行其道的今天,服务间互相调用出现失败已经成为常态。如何处理异常,如何保证数据一致性,成为微服务设计过程中,绕不开的一个难题。...这样还是会遇到阻塞式重试相同的问题,即 DB 写入成功了,但推送失败了。 理论上来讲,分布式系统下,涉及多个服务调用的代码都存在这样的情况,在长期运行中,调用失败的情况一定会出现。...这也是分布式系统设计的难点之一。 TCC 补偿事务 在对事务有要求,且不方便解耦的情况下,TCC 补偿式事务是个较好的选择。...TCC 在业务上解决了分布式系统下,跨多个服务、跨多个数据库的数据一致性问题。但 TCC 方式依然存在一些问题,实际使用中需要注意,包括上面章节提到的调用失败的情况。...MQ 事务也会存在 prepare状态,需要 MQ 的消费处理逻辑来确认业务是否成功。 总结 从分布式系统实践中来看,要保障数据一致性的场景,必然要引入额外的机制处理。

    1.3K20

    分布式事务的 6 种解决方案,写得非常好!

    介绍 在分布式系统、微服务架构大行其道的今天,服务间互相调用出现失败已经成为常态。如何处理异常,如何保证数据一致性,成为微服务设计过程中,绕不开的一个难题。...这样还是会遇到阻塞式重试相同的问题,即 DB 写入成功了,但推送失败了。 理论上来讲,分布式系统下,涉及多个服务调用的代码都存在这样的情况,在长期运行中,调用失败的情况一定会出现。...这也是分布式系统设计的难点之一。另外,MQ 系列面试题和答案全部整理好了,微信搜索Java技术栈,在后台发送:面试,可以在线阅读。...TCC 在业务上解决了分布式系统下,跨多个服务、跨多个数据库的数据一致性问题。但 TCC 方式依然存在一些问题,实际使用中需要注意,包括上面章节提到的调用失败的情况。...MQ 事务也会存在 prepare状态,需要 MQ 的消费处理逻辑来确认业务是否成功。 总结 从分布式系统实践中来看,要保障数据一致性的场景,必然要引入额外的机制处理。

    80520

    saga分布式事务_本地事务和分布式事务

    大家好,又见面了,我是你们的朋友全栈君。...分布式事务:在分布式系统中一次操作需要由多个服务协同完成,这种由不同的服务之间通过网络协同完成的事务称为分布式事务 一、2PC: 2PC,两阶段提交,将事务的提交过程分为资源准备和资源提交两个阶段...但是其他部分未接到commit请求的机器则无法执行事务提交。于是整个分布式系统便出现了数据部一致性的现象。...,则由 Saga 事务协调器协调根据相反顺序调用补偿操作,回滚已提交的参与者,使分布式事务回到最初始的状态。...当最后一个服务执行本地事务并且不发布任何事件时,意味着分布式事务结束,或者它发布的事件没有被任何 Saga 参与者听到都意味着事务结束。 ① 事务发起方的主业务逻辑发布开始订单事件。

    2.7K30

    事务及分布式事务

    分布式事务也可以说是沿着这个思路,尝试建立可以让分布式应用忽略内部各种问题的抽象机制。 分布式事务 1....换句话说,不一致现象是暂时的,最终会达到一致(假设故障会被修复)。 3.分布式事务解决方案 3.1....事务管理器相当于协调者,负责各个本地资源的提交和回滚;而资源管理器就是分布式事务的参与者,通常为数据库。...如果分布式事务T能够正常提交,那么它对数据的影响(最终一致性)就与连续按顺序成功提交子事务T等价。 另一部分是每一个子事务对应的补偿操作,我们命名为C1,C2,...,Ci,...,Cn。...所以,基于这种补偿方式,分布式事务中所涉及的每一个数据源都可以单独提交,然后立刻释放锁和资源。AT事务这种异步提交的模式,相比2PC极大地提升了系统的吞吐量。

    1.5K21

    saga分布式事务_分布式事务原理

    大家好,又见面了,我是你们的朋友全栈君 saga是分布式事务领域里一个非常重要的事务模式,特别适合解决出行订票这类的长事务,本文将深度剖析saga事务的设计原理,以及在解决订票问题上的最佳实践 01...能够把子事务执行的结果保存到状态机,并在后续的子事务中作为输入 允许没有依赖的子事务之间并发执行 这种方式的优点是: 功能强大,事务可以灵活自定义 缺点是: 状态机的使用门槛非常高...一致性要求较高的事务一般都是短事务(一个事务长时间未完成,在用户看来一致性是比较差的,一般没有必要采用TCC这种高一致性的设计),因此TCC的事务分支编排放在了AP端(即程序代码里),由用户灵活调用。...这样用户可以根据每个分支的结果,做灵活的判断与执行。 SAGA的定位是一致性要求较低的长事务/短事务。...最后以一个现实中的问题案例,详细讲解dtm的saga事务使用 dtm是一个一站式的分布式事务解决方案,支持事务消息、SAGA、TCC、XA等多种事务模式,支持Go、Java、Python、PHP、C#、

    1.6K20

    分布式事务

    中小型的创业类型的公司使用的都是大众化的开发技术,学习资料在互联网上都是很容易查找到。阅读代码的能力和熟悉公司技术和文化的能力,以及完成上级的工作任务,就是你个人在公司的存在价值。...分布式微服务有现成的上市框架产品springcloud, 在2018年接触springboot框架之后买了相关的技术书籍阅读。...Java是90年代推广上市的开发语言,而C#是2000年微软发布的后台服务端的开发语言。分布式的开发思想在2015年学习Java开发的时候在教学视频上面接触到。...互联网上面的教学视频是公开的学习资料,和360免费杀毒软件的效果都是一样。分布式事务要是能够实现或者是使用,为企业业务提供服务,路程还有很远。只是多出来的时间和人力才会去专研和尝试一些新的技术和思想。...一个idea的生成,推广之后是在不同的区域有不同的看法和思考方式。广发银行内部系统在使用前端框架vue设计web系统页面,第二次看到的是分布式事务的实现细节和方案。

    95420

    分布式事务

    n6bI335w7mJFoBeR2aJqVwhttps://mp.weixin.qq.com/s/9lHUmLPYBNx_G85g9pT3zghttps://mp.weixin.qq.com/s/MbPRpBudXtdfl8o4hlqNlQ什么是分布式事务...分布式对应的是单体架构(单个数据库),但是随着业务的复杂度提高,逐渐演变出了分布式服务(多个服务),互相协作,每个服务负责不同的业务,架构如下图:这种分布式系统环境下由不同的服务之间通过网络远程协作完成事务称之为分布式事务...简言之:分布式事务就是为了保证不同数据库(微服务)的数据一致性 (跨JVM进程产生分布式事务)分布式理论:CAP定理CAP 原则又叫 CAP 定理,同时又被称作布鲁尔定理(Brewer's theorem...在分布式事务的最终解决方案中一般选择牺牲一致性来获取可用性和分区容错性。一致性可以分为三种:1、强一致性:系统中的某个数据被成功更新后,后续任何对该数据的读取操作都将得到更新后的值。...Saga 事务:由于 Saga 事务不能保证隔离性,需要在业务层控制并发,适合于业务场景事务并发操作同一资源较少的情况。

    10000

    本地事务和分布式事务

    本地事务和分布式事务总结事务概述问:什么是事务?答:逻辑上的一组操作,要么同时成功,要么同时失败问:事务有哪些特性?...答:一个事务,读取到另一个事务,未提交的数据问:什么是不可重复读?...Tolerance分区容错BASEBA 基本可用 S 软状态 E 最终一致概念在(分布式)项目中,业务跨多个服务、多个库(数据源),就会存在分布式事务解决思路1)把一个分布式事务,看成一个【全局事务...2)把一个分布式事务,拆分成多个【本地事务】,都成功则成功,任一失败,失败补偿(基于消息的最终一致性)。...分布式事务框架Seata概念:阿里开源的分布式事务框架作用:解决分布式事务问题角色:TCseata服务端TM事务管理器RM 资源管理使用步骤:一、搭建事务协调器(seata服务端)//...整理笔记(

    83930

    分布式事务

    这类基于单个服务单一数据库资源访问的事务,被称为本地事务 分布式事务 | 产生的场景 随着互联网的快速发展,软件系统由原来的 单体应用 转变 为分布式应用 分布式系统会把一个应用系统拆分为可独立部署的多个服务...,不同的服务还会有不同的库 因此需要服务与服务之间远程协作才能完成事务操作 这种分布式系统环境下由不同的服务之间通过网络远程协作,在不同的数据库之间,完成事务称之为分布式事务 单一服务分布式事务 最早的分布式事务应用架构很简单...多服务分布式事务 一个服务操作访问不同的数据库资源 对于上面介绍的分布式事务应用架构,尽管一个服务操作会访问多个数据库资源,但是毕竟整个事务还是控制在单一服务的内部。...一个服务操作需要调用另外一个服务,这时的事务就需要跨越多个服务了 多服务多数据源分布式事务 在多个服务之间,且不同服务存在不同的数据库,的环境下的分布式事务 好牛啊!...分布式事务解决方案 XA分布式事务协议 分布式事务常见的解决方案有:2pc传统方案 2PC的传统方案是在数据库层面实现的,如Oracle、MySQL都支持2PC协议 为了统一标准减少行业内不必要的对接成本

    8410

    分布式事务

    分布式事务 既然说起分布式事务,那么什么是分布式事务呢?...,尤其是难以保证数据的一致性,那么这也就是常说的分布式事务了。...分布式事务理论基础 说到分布式事务,那么就一定会想到分布式事务相关的两个理论知识,CAP理论、Base理论 CAP理论 什么是CAP理论?...分布式事务解决方案 基于分布式事务的理论基础,那么分布式事务的解决方案可以分为强一致性解决方案和最终一致性解决方案。 强一致性解决方案 什么是强一致性解决方案呢?...doCommit阶段,如果TM收到了所有全局事务参与RM响应的Ack状态,则TM向参与全局事务的RM发送doCommit消息,RM接收到消息后正式提交事务,并释放执行事务期间占用的资源,同时向TM响应事务

    14710

    分布式事务

    事务的隔离型是通过数据库锁机制实现的、持久性通过redo log重做日志来实现。原子性和一致性通过UndoLog来实现。...对数据分布在不同节点的数据来说,如果某个节点更新了数据,其他节点都能读取到这个最新的数据,那就是强一致,如果有节点没有去取到,就是分布式不一致。...基本可用:分布式系统出现故障时,允许损失部分可用功能,保证核心功能可用。...2PC: XA协议中分为两阶段: (1)事务管理器要求每个涉及到事务的数据库预提交此操作,并反映是否可以提交 (2)事务协调器要求每个数据库提交数据或者回滚数据。...优点: 尽量保证了数据的强一致,实现成本较低。 缺点: 单点问题,事务管理器在整个流程中扮演关键的角色。

    1.2K10

    分布式事务的锁

    随着互联网发展,单机应用已经满足不了需求,分布式系统就出现了,假如不同系统或者是同一系统的不同节点(满足高并发实现集群),需要有共享资源(共享变量或者业务方法),控制他们同步访问的方式就叫分布式锁。...但是,随着业务发展的需要,原单体单机部署的系统被演化成分布式系统后,由于分布式系统多线程、多进程并且分布在不同机器上,这将使原单机部署情况下的并发控制锁策略失效,为了解决这个问题就需要一种跨JVM的互斥机制来控制共享资源的访问...,这就是分布式锁要解决的问题。...3.5 分布式锁常见实现方式 借助于数据库实现 要实现分布式锁,最简单的方式可能就是直接创建一张锁表,然后通过操作该表中的数据来实现了。...它不仅提供了一系列的分布式的Java常用对象,还提供了许多分布式服务。Redisson提供了使用Redis的最简单和最便捷的方法。

    15310

    分布式事务

    JavaEE平台中的分布式事务实现 JTA(Java Transaction API):面向应用、应用服务器与资源管理器的高层事务接口。...使用全局事务,数据被Lock的时间跨整个事务,直到全局事务结束。 2PC 是反可伸缩模式,在事务处理过程中,参与者需要一直持有资源直到整个分布式事务结束。...而且只有支持 XA 协议的资源才能参与分布式事务。...不与具体的服务框架耦合(在RPC架构中通用) 位于业务服务层,而非资源层 可以灵活选择业务资源的锁定粒度 TCC里对每个服务资源操作的是本地事务,数据被lock的时间短,可扩展性好(可以说是为独立部署的...SOA服务而设计的) 行业应用案例 支付宝XTS(蚂蚁金融云的分布式事务服务DTS)

    8610

    分布式事务

    在 Seata 中,分布式事务的执行流程:TM 开启分布式事务(TM 向 TC 注册全局事务记录);按业务场景,编排数据库、服务等事务内资源(RM 向 TC 汇报资源准备状态 );TM 结束分布式事务,...TCC方案实现原理TCC方案是采用最终一致性的方式实现的服务层柔性分布式事务方案,采用Try、Confirm、Cancel三个阶段来处理分布式事务,每个阶段具体负责的工作为:Try:完成业务检查及资源预留...,可能回滚完成后,RPC 请求才到达参与者真正执行,而一个 Try 方法预留的业务资源,只有该分布式事务才能使用,该分布式事务第一阶段预留的业务资源就再也没有人能够处理了,对于这种情况,我们就称为悬挂,...与XA方案的区别XA 协议采用刚性事务方案,性能和吞吐率较低,TCC采用柔性分布式事务方案,性能更优越。...以上就是分布式事务的主流解决方案。分布式事务问题无可避免,只能根据具体业务场景去选择设计合理的方式。

    9210

    分布式事务

    (Durability) 分布式事务 什么是分布式事务 分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。...本质上来说,分布式事务就是为了保证不同数据库的数据一致性。 分布式事务产生的原因 从上面本地事务来看,我们可以看为两块,一个是service产生多个节点,另一个是resource产生多个节点。...分布式事务的基础 从上面来看分布式事务是随着互联网高速发展应运而生的,这是一个必然的我们之前说过数据库的ACID四大特性,已经无法满足我们分布式事务,这个时候又有一些新的大佬提出一些新的理论: CAP...是否真的要分布式事务 在说方案之前,首先你一定要明确你是否真的需要分布式事务? 上面说过出现分布式事务的两个原因,其中有个原因是因为微服务过多。...GTS-阿里分布式事务解决方案 GTS是一款分布式事务中间件,由阿里巴巴中间件部门研发,可以为微服务架构中的分布式事务提供一站式解决方案。

    1.6K10
    领券