Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >sentry磁盘占用过大如何清理

sentry磁盘占用过大如何清理

作者头像
ghostsf
发布于 2022-09-09 09:47:15
发布于 2022-09-09 09:47:15
3.7K00
代码可运行
举报
文章被收录于专栏:ghostsfghostsf
运行总次数:0
代码可运行

1. 官方设置方案

修改 .env文件的以下配置

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
SENTRY_EVENT_RETENTION_DAYS=7

2. SENTRY数据软清理

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#登录worker容器
docker exec -it sentry_onpremise_worker_1 /bin/bash 

#保留多少天的数据,cleanup使用delete命令删除postgresql数据,但对于delete,update等操作,只是将对应行标志为DEAD,并没有真正释放磁盘空间
sentry cleanup --days 7

3.POSTGRES数据清理

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
#登录postgres容器
docker exec -it sentry_onpremise_postgres_1 /bin/bash
#运行清理
vacuumdb -U postgres -d postgres -v -f --analyze

4. 定时清理脚本参考

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
0 1 * * * cd /root/onpremise && { time docker-compose run --rm worker cleanup --days 7; } &> /var/log/sentry-cleanup.log

0 8 * * * { time docker exec -i $(docker ps --format "table {{.Names}}"|grep postgres) vacuumdb -U postgres -d postgres -v -f --analyze; } &> /var/logs/sentry-vacuumdb.log

5. 清理kafka磁盘占用

清理kafka占用磁盘过大的问题搜到可以配置 .env,如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
KAFKA_LOG_RETENTION_HOURS=24
KAFKA_LOG_RETENTION_BYTES=53687091200   #50G
KAFKA_LOG_SEGMENT_BYTES=1073741824      #1G
KAFKA_LOG_RETENTION_CHECK_INTERVAL_MS=300000
KAFKA_LOG_SEGMENT_DELETE_DELAY_MS=60000

6. 占满100%处理

如果已经占满100%,可以先去查找筛选出磁盘上其他占用很大的无用文件或者日志等,释放出一部分空间。

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2021-11-02,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
Sentry9-1-2部署
Sentry 是一个开源的实时错误报告工具,支持 web 前后端、移动应用以及游戏,支持 Python、OC、Java、Go、Node.js、Django、RoR 等主流编程语言和框架 ,还提供了 GitHub、Slack、Trello 等常见开发工具的集成。
YP小站
2020/06/04
1.7K0
Kafka学习笔记之Kafka日志删出策略
kafka将topic分成不同的partitions,每个partition的日志分成不同的segments,最后以segment为单位将陈旧的日志从文件系统删除。
Jetpropelledsnake21
2019/07/03
1.9K0
Kafka 提供哪些日志清理策略?
在 Kafka 的日志管理器中会有一个专门的日志删除任务来周期性地检测和删除不符合保留条件的日志分段文件,这个周期可以通过 broker 端参数 log.retention.check.interval.ms 来配置,默认值为300000,即5分钟。当前日志分段的保留策略有3种:
码农架构
2021/03/21
2.7K0
Kafka 提供哪些日志清理策略?
Centos7使用docker搭建Sentry
  Sentry 是一款基于 Django实现的错误日志收集和聚合的平台,它是 Python 实现的,但是其日志监控功能却不局限于python,对诸如 Node.js, php,ruby, C#,java 等语言的项目都可以做到无缝集成,甚至可以用来对iOS, Android 移动客户端以及 Web前端异常进行跟踪。我们可以在程序中捕获异常,并发送到 Sentry服务端进行聚合统计、展示和报警。sentry官方推荐docker方式安装,使用到了docker-compose。docker至少是1.10.3以上的版本。为此需要使用centos7。
用户3773636
2019/10/05
2.5K0
Centos7使用docker搭建Sentry
kafka存储结构以及Log清理机制
如上图所示、kafka 中消息是以主题 topic 为基本单位进行归类的,这里的 topic 是逻辑上的概念,实际上在磁盘存储是根据分区存储的,每个主题可以分为多个分区、分区的数量可以在主题创建的时候进行指定。例如下面 kafka 命令创建了一个 topic 为 test 的主题、该主题下有 4 个分区、每个分区有两个副本保证高可用。
Spark学习技巧
2021/07/29
8150
kafka存储结构以及Log清理机制
【云原生进阶之PaaS中间件】第三章Kafka-2-安装部署
        kafka是依靠zookeeper来实现分布式的,所以再启动前需要先启动zookeeper,如下图
江中散人_Jun
2023/11/18
2830
【云原生进阶之PaaS中间件】第三章Kafka-2-安装部署
k8s部署Kafka集群
本次的目的是通过使用k8s搭建一个三节点的kafka集群,因为kafka集群需要用到存储,所以我们需要准备三个持久卷(Persistent Volume) 简称就是PV。
yukong
2020/07/28
4.3K0
k8s部署Kafka集群
Sentry 监控 - 私有 Docker Compose 部署与故障排除详解
除了公开提供其源代码外,Sentry 还提供并维护了一个最小的设置,可以为简单的用例开箱即用。该存储库还可以作为各种 Sentry 服务如何连接以进行完整设置的蓝图,这对于愿意维护更大安装的人很有用。为简单起见,我们为此选择使用 Docker 和 Docker Compose, 以及基于 bash 的安装和升级脚本。
为少
2021/12/15
3.3K0
Sentry 监控 - 私有 Docker Compose 部署与故障排除详解
系统日志清理问题:系统日志清理不当,占用大量磁盘空间
是山河呀
2025/02/08
2770
Kafka中Topic级别配置
  配置topic级别参数时,相同(参数)属性topic级别会覆盖全局的,否则默认为全局配置属性值。
保持热爱奔赴山海
2021/05/08
1.2K0
系统清理问题:系统清理不彻底,占用大量资源
是山河呀
2025/02/08
1340
系统垃圾文件清理问题:系统垃圾文件清理不当,占用大量磁盘空间
是山河呀
2025/02/08
2690
系统临时文件清理问题:系统临时文件清理不当,占用大量磁盘空间
是山河呀
2025/02/08
1930
kafka集群及与springboot集成
在#192.168.1.128服务器上生产者控制台输入:hello kafka进行测试
全栈程序员站长
2022/08/10
9460
kafka集群及与springboot集成
Kafka伪集群安装
Kafka伪集群安装 Kaka集群安装 一、Kafka下载地址 Kafka下载页面: https://kafka.apache.org/downloads 选择Kafka 3.2.0 版本进行下载:
黑洞代码
2022/07/01
3260
Kafka的2种日志清理策略感受一下
Kafka是一个基于日志的流处理平台,一个topic可以有多个分区(partition),分区是复制的基本单元,在单节点上,一个分区的数据文件可以存储在多个磁盘目录中,配置项是:
Spark学习技巧
2019/08/06
2.2K0
Kafka的2种日志清理策略感受一下
分布式实时消息队列Kafka(五)
分布式实时消息队列Kafka(五) 知识点01:课程回顾 一个消费者组中有多个消费者,消费多个Topic多个分区,分区分配给消费者的分配规则有哪些? 分配场景 第一次消费:将分区分配给消费者 负载均衡实现:在消费过程中,如果有部分消费者故障或者增加了新的消费 基本规则 一个分区只能被一个消费者所消费 一个消费者可以消费多个分区 分配规则 范围分配 规则:每个消费者消费一定范围的分区,尽量均分,如果不能均分,优先分配给标号小的 应用:消费比较少的Top
Maynor
2021/12/07
9770
分布式实时消息队列Kafka(五)
kafka 数据清除机制
在Kafka中,存在数据过期的机制,称为data expire。如何处理过期数据是根据指定的policy(策略)决定的,而处理过期数据的行为,即为log cleanup。
用户1217611
2022/05/06
2.4K0
kafka 数据清除机制
Sentry错误日志监控
sentry 是一个开源的实时错误监控的项目,它支持很多端的配置,包括 web 前端、服务器端、移动端及其游戏端。
iginkgo18
2021/06/23
2K0
快速入门Kafka系列(2)——Kafka集群搭建
作为快速入门Kafka系列的第二篇博客,本篇为大家带来的是Kafka集群搭建~
大数据梦想家
2021/01/27
6790
快速入门Kafka系列(2)——Kafka集群搭建
相关推荐
Sentry9-1-2部署
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验