前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >UEditor导致的上传大文件失败

UEditor导致的上传大文件失败

作者头像
小尘哥
发布于 2018-11-07 09:45:44
发布于 2018-11-07 09:45:44
3.2K00
代码可运行
举报
文章被收录于专栏:小尘哥的专栏小尘哥的专栏
运行总次数:0
代码可运行

之前写过一篇 《闹心的Broken pipe》,nginx导致的请求超时,但是今天又碰到个奇葩事儿,容我喝一口82年的白开水慢慢道来

源起

项目中用到视频上传,两种上传方式,一种直接表单提交,一种内嵌到UEditor中提交,视频文件上传到第三方视频点播服务器,此为前提。

问题

代码写好,测试,提交,发布,没毛病。因为网速不好,所以测试为了方便都使用的大小几M的小视频,上线测试,没问题。第二天得到反馈,上传100M的视频会出现“上传失败,请重试”,而小视频则不会。

问题排查

  1. 先看浏览器返回错误,preview和response下都是空白,明显没返回值。
  1. 查看后台http请求,往第三方发送,是否超时 发现请求还在发送中时候前端已经返回超时
  2. 用表单直接提交100M视频文件,没问题

问题定位

以上排查将问题定位在了UEditor,继续查找UEditor的上传,项目使用的ACE-admin,查找关联,UEditor上传使用了webuploader.js,继续跟下去,看到如下代码:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
Transport.options = {
            server: '',
            method: 'POST',

            // 跨域时,是否允许携带cookie, 只有html5 runtime才有效
            withCredentials: false,
            fileVal: 'file',
            timeout: 6 * 1000,    // 6 s 
            formData: {},
            headers: {},
            sendAsBinary: false
        };

猜测是这里的问题,于是将timeout改长一点,60min(由于网速原因,100M文件单独上传测试10min左右),修改后重新测试,成功

然而,你以为这就结束了吗?至少我以为是的,BUT!!!

问题二、生产环境

生产环境测试上传也没问题,但是第二天突然出现整个服务越来越慢,最后直接整个服务垮掉的情况。生产环境采用微服务架构,nginx代理,由于上次的教训,迅速猜测nginx问题导致。 测试:不通过nginx直接访问网站等,没问题,通过nginx访问挂掉 日志:查看nginx/logs/error.log,出现大量“Too many open files”错误 定位:由于太多的http连接没释放导致卡死 nginx配置

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
keepalive_timeout  600000;

keepalive_timeout (单位:s): 简单说,就是一个请求结束后多久超时,被释放。以上60w秒≈7天释放,手动“我的天啊.gif”,改为默认60s,问题解决

总结

在写每一行代码,改每一个配置之前,一定要知道他是干什么用的,不能盲改。

一切你认为没问题的问题,都是能力不足的表现。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2018-10-18,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 陌与尘埃 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
利用nginx搭建RTMP视频点播、直播、HLS服务器「建议收藏」
配置并编译nginx 使用nginx的默认配置,添加nginx的rtmp模块。
全栈程序员站长
2022/07/01
4.3K0
利用nginx搭建RTMP视频点播、直播、HLS服务器「建议收藏」
【Nginx08】Nginx学习:HTTP核心模块(五)长连接与连接处理
HTTP 基础知识大家掌握的怎么样呀?对于长连接这一块的内容应该也不是什么新鲜东西了吧。毕竟 HTTP1.1 都已经发布这么久了。今天主要来看的就是长连接相关的配置,另外还会介绍几个和连接有关的内容。同时,今天的内容除了 HTTP 外,还需要一点 TCP 的知识。没办法,毕竟 Ngxin 本身就是一个网络代理服务器软件,离不开的就是各种网络相关的知识。相信大家肯定没问题的,毕竟很早前在短视频中就说过,基础能比我差的程序员估计在全国范围内都找不到几个了。
硬核项目经理
2023/09/07
1.3K0
【Nginx08】Nginx学习:HTTP核心模块(五)长连接与连接处理
香港服务器Nginx上传大文件超时怎么办?
  情况如下:用nginx作代理服务器,上传大文件时(本人测试上传50m的文件),提示上传超时或文件过大。
会长君
2023/04/26
2.2K0
tengine配置详解
主配置文件 nginx.conf ########### 每个指令必须有分号结束。################# user root root; #配置用户或者组,默认为nobody nobody。 worker_processes 2; #允许生成的进程数,默认为1 pid /usr/local/tengine/run/nginx.pid; #指定nginx进程运行文件存放地址 worker_rlimit_nofile 102400; #一个进程打开的最大文件数目 events {
用户6792968
2022/08/30
1.7K0
ASP.NET MVC基于WebUploader大文件分片上传、断网续传、秒传
我们这里只讲分片上传,至于断网续传和秒传已经写好Demo,下载地址放在文末,有兴趣的可以下载自己玩玩。
郑子铭
2023/08/30
4950
ASP.NET MVC基于WebUploader大文件分片上传、断网续传、秒传
Nginx配置文件详解
这个指令是指当一个nginx进程打开的最多文件描述符数目,理论值应该是最多打开文件数(ulimit -n)与nginx进程数相除,但是nginx分配请求并不是那么均匀,所以最好与ulimit -n 的值保持一致。
用户8449980
2021/07/12
8730
wsl 2 unbuntu 部署 asp.net core 使用 nginx 做反向代理,调试文件上传失败
继上一篇 asp.net core 3.1多种身份验证方案,cookie和jwt混合认证授权 的公司内部项目上线后发现文件上传功能有问题。
SpringSun
2020/08/20
1.5K0
wsl 2 unbuntu 部署 asp.net core 使用 nginx 做反向代理,调试文件上传失败
Nginx从入门到放弃03-Nginx调优
笔者把自己总结的文档分为几遍,合集在 https://g.xgss.net/nginx/
星哥玩云
2022/06/24
3610
Nginx从入门到放弃03-Nginx调优
nginx keepalive_timeout 设置策略问题分析
1.项目环境:nginx(前段代理,仅作代理用途)+3个tomcat(都在同一个服务器上),做的web项目 2.涉及到的业务逻辑:文件上传(可能有大文件,比如说android游戏,100m);客户端接口请求;网站后台管理 3.问题重现流程: 3.1 配置好tomcat后,直接加上nginx前段代理(仅配置了http代理) 3.2 问题一:当管理员后台上传文件时,大文件无法上传成功,出现time-out,经重复测试,发现上传时间超过1分钟以后,就会返回超时信息,小文件没有问题 3.2 经调研得知ng
老七Linux
2018/05/31
4.1K0
nginx调优
运行工作进程数、运行CPU亲和力、最大打开文件数、gzip调优、防盗链、隐藏版本号、隐藏软件名、优化woeker进程数、优化nginx连接超时时间
summerking
2022/09/19
4710
Nginx配置文件nginx.conf全解
nginx配置文件nginx.conf的配置http、upstream、server、location等;
青山师
2023/05/05
7560
『学习笔记』如何使用Nginx搭建高并发Web服务器
🎈今日推荐——https://cloud.tencent.com/developer/article/2472008
数字扫地僧
2024/11/28
2840
nginx优化指南
  nginx是一款高性能的开源Web服务器和反向代理服务器。它由俄罗斯的工程师Igor Sysoev开发,并于2004年首次公开发布。Nginx的设计目标是提供高性能、稳定性和低资源消耗的解决方案,以应对大流量的网站和应用程序。
码农心语
2024/04/09
1.1K0
nginx优化指南
Nginx软件优化
1.1 Nginx优化分类 安全优化(提升网站安全性配置) 性能优化(提升用户访问网站效率) 1.2 Nginx安全优化 1.2.1 隐藏nginx版本信息优化 官方配置参数说明:http://nginx.org/en/docs/http/ngx_http_core_module.html#server_tokens 官方参数: Syntax: server_tokens on | off | build | string; Default: server_tokens on; Context: http
惨绿少年
2018/03/30
1.4K0
nginx访问日志报错:[error] 4560#4560_ _117823 client intended to send too large body_ 7562419 bytes,错误码413
对接其他系统接口时,对方说请求我们接口报错,让对方发了相关请求报文,查看后台程序日志,发现并没有相关请求报文日志,也没有任何访问信息,猜测是在nginx代理时候就已经出错被拦截。
共饮一杯无
2022/11/28
8350
闲聊k8s的优雅关闭连接
当数据在进行交互的时候,如果连接发生了改变,就必然会涉及到是否是无损关闭连接,主要就是看结束连接的时候是否是四次挥手关闭,短连接其实还好,最关键的是长连接如何关闭。
SRE运维实践
2024/12/09
1900
闲聊k8s的优雅关闭连接
一篇不大靠谱的nginx 1.11.10配置文件
网站是前后端分离,前端打包站点部署需要自力更生,为了避免跨域问题. 选择了nginx这个知名的反向代理服务器. 这里不探究安装这种问题。。。
CRPER
2018/08/28
4770
使用AB对Nginx压测和并发预估
ab命令会创建多个并发访问线程,模拟多个访问者同时对某一URL地址进行访问。它的测试目标是基于URL的;
iginkgo18
2020/09/27
2.4K0
nginx限制上传大小和超时时间设置说明/php限制上传大小
现象说明: 在服务器上部署了一套后台环境,使用的是nginx反向代理tomcat架构,在后台里上传一个70M的视频文件,上传到一半就失效了! 原因是nginx配置里限制了上传文件的大小 client_max_body_size:这个参数的设置限制了上传文件的大小,可以在http、server、location三个区域里配置 [root@dev-huanqiu ~]# cat /Data/app/nginx/conf/nginx.conf ....... ....... http { include
洗尽了浮华
2018/01/23
8.5K0
解决gitpush的时候因为误加入特大文件,导致push失败
起因:在add和commit-push时手快了,直接导致误操作将某个视频文件也push进去了,然后等了半天,没有上传完,然后就一直报错,连续三天没法提交代码,
十四君
2019/11/28
5520
推荐阅读
相关推荐
利用nginx搭建RTMP视频点播、直播、HLS服务器「建议收藏」
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验