Loading [MathJax]/jax/output/CommonHTML/config.js
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >使用elastic job 不分片任务加载失败的可能原因

使用elastic job 不分片任务加载失败的可能原因

作者头像
MickyInvQ
发布于 2020-09-27 02:32:50
发布于 2020-09-27 02:32:50
8610
举报
文章被收录于专栏:InvQ的专栏InvQ的专栏
问题

有一个任务是每10分钟,加载一次过去20分钟的内容,但是总有加载漏掉的时候。 此情况出现3次了,事不过三。看了服务也一直跑得很健康。

发现

原来是我们有多个(3个)相同的任务,相同的逻辑,加载不同的内容

原因

我们使用的是 elastic job的不分片作业。所以使用的单线程,所以会存在线程资源竞争的问题。 所以,刚好有幸看到elastic job 创世大神【张亮】亲自回复。非常荣幸! 发文纪念,虽然是亲自回复,不是给我回复的。

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2019/11/05 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
学会这10种定时任务,我有点飘了
最近有几个读者私信给我,问我他们的业务场景,要用什么样的定时任务。确实,在不用的业务场景下要用不同的定时任务,其实我们的选择还是挺多的。我今天给大家总结10种非常实用的定时任务,总有一种是适合你的。
苏三说技术
2021/05/04
3.2K1
学会这10种定时任务,我有点飘了
Java工程师:非科班自学Java是如何获得校招offer的
背景介绍 楼主某末流985渣硕一枚,磕盐不会,偶然接触了下编程,然后又稍微学了学Java,后面就走上了程序猿的道路,今年四月侥幸去菊厂实习了一波(虽然没学到东西)。 秋招拿了几个一般的offer(大佬们别见笑):去哪儿、海康威视、招银网络科技,最后签约招银(四川人,想每天下班吃火锅)。 去年的时候比较迷茫,不知道自学到底需要准备什么,在牛客上看了很多面经,非常受益,今天也分享一下供参考。本篇文章主要讲讲自学的历程即找工作需要注意的地方。 自学经历 楼主去年4、5月开始决定学习Java,最开始主要看《He
牛客网
2018/04/28
2.9K0
分布式任务调度平台XXL-JOB
XXL-JOB是一个轻量级分布式任务调度框架,其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线,开箱即用。
用户1518699
2018/09/12
4.3K0
分布式任务调度平台XXL-JOB
中华石杉Java面试突击第一季笔记三(分布式缓存)
整合了商品名称、价格、图片、简介的商品详情页就是典型的场景,可以把通过复杂操作耗时查询出来的结果,确定短时间内不会频繁更新变化,但是对这个数据会有大量读请求,这个时候就可以直接把结果存放在缓存中,后面的请求就直接读取缓存即可。
chenchenchen
2022/03/09
6240
中华石杉Java面试突击第一季笔记三(分布式缓存)
redis面试必会6题经典_redis 面试
最近囧辉发现自己的 Java 学习交流群 里有不少同学已经“悄悄”的入职了携程、美团、阿里菜鸟等大厂。
全栈程序员站长
2022/11/17
1.8K0
redis面试必会6题经典_redis 面试
Redis详解
如果简单地比较Redis与Memcached的区别,大多数都会得到以下观点:
黄规速
2022/04/14
7780
Redis详解
关于请求被挂起页面加载缓慢问题的追查
最近项目中遇到了请求被pending的状态 本来以为超时候多发几次请求就ok了 后来发现...
lilugirl
2019/05/28
5.7K0
关于请求被挂起页面加载缓慢问题的追查
(三万字长文)面试不怂之redis与缓存大全
点击上方“芋道源码”,选择“设为星标” 管她前浪,还是后浪? 能浪的浪,才是好浪! 每天 10:33 更新文章,每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路,很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
芋道源码
2022/03/04
3900
啰里吧嗦redis
Redis is an open source (BSD licensed), in-memory data structure store, used as a database, cache and message broker.
葫芦娃
2019/03/25
9100
啰里吧嗦redis
亿级流量网站架构核心技术【笔记】(二)
九、应用级缓存 A.缓存简介 1.先从缓存中读取数据,如果没有,再从慢速设备上读取实际数据并同步到缓存 2.经常读取的数据、频繁访问的数据、热点数据、I/O瓶颈数据、计算昂贵的数据、符合5分钟法则和局部性原理的数据都可以缓存 B.缓存命中率 1.缓存命中率=从缓存中读取次数/【总读取次数(从缓存中读取次数+从慢速设备上读取次数)】 C.缓存回收策略 1.基于空间,指缓存设置了存储空间 2.基于容量,指缓存设置了最大大小 3.基于时间
硬核项目经理
2019/08/06
1.4K0
亿级流量网站架构核心技术【笔记】(二)
阿里java高级工程师面试100题「建议收藏」
1,java堆,分新生代老年代,新生代有Eden,from surviver,to surviver三个空间,堆被所有线程共。eden内存不足时,发生一次minor GC,会把from survivor和eden的对象复制到to survivor,这次的to survivor就变成了下次的from survivor,经过多次minor GC,默认15次,达到次数的对象会从survivor进行老年代。1次new如果新生代装不下,则直接进入老年代。
全栈程序员站长
2022/06/27
6.1K0
阿里java高级工程师面试100题「建议收藏」
浅谈缓冲的理论与实践
点击上方“芋道源码”,选择“设为星标” 管她前浪,还是后浪? 能浪的浪,才是好浪! 每天 10:33 更新文章,每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路,很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
芋道源码
2022/09/02
2990
浅谈缓冲的理论与实践
Nginx 面试 40 连问,快顶不住了~~
点击上方“芋道源码”,选择“设为星标” 管她前浪,还是后浪? 能浪的浪,才是好浪! 每天 10:33 更新文章,每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路,很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
芋道源码
2022/07/07
1.4K0
Nginx 面试 40 连问,快顶不住了~~
五万字 | Spark吐血整理,学习与面试收藏这篇就够了!
一、Spark 基础 二、Spark Core 三、Spark SQL 四、Spark Streaming 五、Structured Streaming 六、Spark 两种核心 Shuffle 七、Spark 底层执行原理 八、Spark 数据倾斜 九、Spark 性能调优 十、Spark 故障排除 十一、Spark大厂面试真题
五分钟学大数据
2021/09/22
4.9K0
从操作系统的角度来看,什么是线程与进程
我们平常说的进程和线程更多的是基于编程语言的角度来说的,那么你真的了解什么是线程和进程吗?那么我们就从操作系统的角度来了解一下什么是进程和线程。
淘课之家
2020/03/17
1.9K0
从操作系统的角度来看,什么是线程与进程
一条龙服务: 开服从入门到精通(Minecraft-Server-Starting-Guide)
本文原文发布于 GitHub,完整版可见于 此处 。因为使用了一些非标准 Markdown 语法因此在本页面可能显示不完全,在此处发布仅仅只是为了归档原文。
HikariLan贺兰星辰
2022/10/27
4.4K0
2020年度20多款主流数据库重大更新及技术要点回顾
为方便阅读、重点呈现,本文对各板块内容进行了精简,需阅读完整版可点击文末【阅读原文】或登录云盘下载:https://pan.baidu.com/s/1h8plZz-amxxOMMWTL2eicQ(提取码:dwqg)
jeanron100
2021/02/25
1.8K0
2020年度20多款主流数据库重大更新及技术要点回顾
超硬核,要是当初这么学进程和线程就好了!
我们平常说的进程和线程更多的是基于编程语言的角度来说的,那么你真的了解什么是线程和进程吗?那么我们就从操作系统的角度来了解一下什么是进程和线程。
帅地
2020/03/05
1.1K0
2022下半年盘点:20+主流数据库重大更新及技术要点汇总
2022年,数据库行业发展迅速,并呈现出若干鲜明特点。各数据库厂商及产品均取得长足进步,在部分重点技术领域有所突破,其中以国产化、云及原生、分布式为代表的厂商及产品表现突出。从技术方向上看,以分布式、Serverless、HTAP、云与云原生、生态开放等代表性技术,成为了各产品发展重点。
jeanron100
2023/02/28
1.9K0
2022下半年盘点:20+主流数据库重大更新及技术要点汇总
牛客面经 |这可能不只是一篇面经
这可能不只是一篇面经 作者:_XiaoTeng_ 来源:牛客网 【这可能不只是一篇面经】 精 写了个显眼的标题,就真得说几句有用的话。 5月份一个很偶然的机会,加了叶神的微信,还收到了祝福。一激动就承诺说写篇最详细的面经分享给大家,毕竟用了这么久的牛客网,收获真的很大。 校招真的是段劳心伤神的经历,我把这一路的体会,写在秋招前,也许能给那些和我一样迷茫过,怀疑过,失落过的人一些帮助。 (这篇文章有点长,可能需要点耐心) 0. 写在之前 首先呢我的面试经历和一些面霸和收割机的大
java思维导图
2018/04/08
3.3K0
推荐阅读
相关推荐
学会这10种定时任务,我有点飘了
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档