百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

记录一次Ng+.NetCore大文件上传的错误排查

off999 2025-02-03 14:31 15 浏览 0 评论

今天在客户现场碰到个问题,说起来也挺简单的,但是解决的过程有点曲折:

早上上班客户反馈:有个文件上传不了,然后我意识到肯定是Nginx的请求体的大小配置错误导致的,但是上客户的机器看了下,提示的错误是网络连接重置,传小文件没啥问题,超过100M的文件就会报错,但是也不是平常的413。见下图

不管是什么,先上服务器看下是不是猜测这个问题导致的,看了下Ng的配置没问题,限制的消息体配置是200M,瞬间感觉这问题没那么简单,因为早上太忙了,就先去看其它问题了,处理完已经下午了。

这会儿把服务器的配置拷贝本地,验证了下,也是同样的效果,直接调后端接口上传超过100M的文件是可以的,但是一旦使用ng转发就会有问题,看了下服务器ng的错误日志 (An existing connection was forcibly closed by the remote host) while r...,本地测试浏览器的话就是提示这个报错 NET::ERR_INCOMPLETE_CHUNKED_ENCODING 200,又去后端看了下日志,没发现有访问日志(这是个坑)。

判断应该是Ng的配置导致的,依据就是直接调用可以但是经过Ng转发就会报错。

掏出百度大法,用Ng的错误信息在网上搜了一大堆问题,大部分都反映Ng配置的 长连接没配置、代理的超时时间太短等等类似的问题,实际按这些加上,没一点用。。。看来百度也靠不住啊。

而且看报错的时间基本上就是几秒后就直接报错了,所以怀疑不是超时问题。。。

疑惑了一会儿,决定再看看是不是后端问题,虽然相关的接口都加了配置但是也不确定是不是真的是这个问题。

果然,打好断点,启动项目,看下直接进了模型验证的过滤器,一看直接模型验证没过,感觉有点奇怪,这个方法除了带了一个文件 没有参数啊,看了下断点报错的信息:Failed to read the request form. Multipart body length limit 134217728 exceeded.

一下就反应过来,这个是啥问题,看了下相关接口配了 `[RequestSizeLimit(200 << 20)]` 这个注解 应该是没超过,但是看了下这个注解没有其它可配置的参数了,所以就去这个命名空间下碰碰运气,果然被我找到一个差不多的注解 `RequestFormLimitsAttribute` 看了下类的内容和文档 确定应该加这个配置就没问题了。



话不多说 把这个注解 `[RequestFormLimits(MultipartBodyLengthLimit = 200 << 20)]` 按这个加到对应接口,试了下果然好了。



回顾下整个过程,再怀疑Ng配置那里花了不少的时间,为啥嘞,就是在服务器看了半天发现后端没有任何接入日志,结果我看了下代码,丢!!!竟然模型验证的过滤器和接入日志的过滤器的顺序是反的。。。

而且还有个奇怪的地方是后端返回的错误信息也被Ng吃了,还显示200,笑死,算了问题解决了,赶紧编译打包发布。

最后整理下原因:考虑直接调后端的接口上传文件没问题,通过Ng转化有问题,猜测应该是Ng转化后上传文件的消息体被分片了,正好后端开始没有对这块进行配置,所以直接拒绝了上传的请求。

解决的方法就是:在需要的接口配置了 请求体限制的情况下,再配置RequestFormLimitsAttribute 按需要限制就可以了。

相关推荐

咱村里有个老爷子,居然自学起了Python编程

咱村里有个老爷子,没什么文化,居然自学起了Python编程,还搞出个“智能喂鸡系统”,这事儿可把整个村子都惊到了。要说这老爷子,平时就爱琢磨些新鲜玩意儿。一开始,大家还以为他是瞎折腾,毕竟都一把年纪了...

真上头!清华打造的最全Python教程,通俗易懂,学不会我退出IT圈

前言随着人工智能的发展,Python近两年也是大火,越来越多的人加入到Python学习大军,对于毫无基础的人该如何入门Python呢?小编这里整理了一套python编程零基础自学教程,清华大佬196小...

如何学好Python技术(怎么才能学会python)

现在python发展势头很猛,都想快速学好它,其实学任何一个语言没有太多好的秘诀,一般情况下,还是少不了你努力刻苦的样子。学好一门技术并不容易,很多人推荐学习python,在于比其他语言的约束,或者...

如何高效且系统地自学Python?(自己学python怎么学)

关于这个问题,我也算有些话语权吧!5年多经验的我,今天和大家分享一套系统性学习Python的方法,几周内系统性地学会Python并不是啥难事!首先,学习Python确立明确的学习目标至关重要。要系统性...

使用 Python 监控文件系统(基于python的监控系统)

前言在我们使用服务器的时候,有时候需要监控文件或文件夹的变化。例如,定期扫描文件夹下是否有某一类型的文件生成。今天,我们介绍如何使用Python来监控文件系统。在Python中,主要有两个监控...

Python文件读写最佳实践:关键操作的异常处理

在Python中进行文件操作时,合理的异常处理是保证程序健壮性的关键。以下是针对文件操作异常处理的全面指南。一、为什么需要异常处理?文件操作可能失败的常见原因:文件不存在(FileNotFoundEr...

Python编程笔记(python编程入门与案例详解)

1.Python简介Python是一种解释型、高级和通用的编程语言。它通过显著的缩进使用来强调代码的可读性。#HelloWorldprogramprint("Hello,World...

Python目录与文件操作教程(python word目录)

大家好,我是ICodeWR。今天要记录的是如何使用Python进行常见的目录和文件操作。Python提供了强大的内置模块来处理文件和目录操作。1.基本模块介绍Python中主要使用以下模块进行文件...

自动创建 Python 的 requirements.txt 文件

技术背景在Python开发中,requirements.txt文件用于记录项目所依赖的第三方库及其版本,方便在不同环境中部署项目。然而,当从GitHub下载Python源代码时,有时会缺...

Python文件操作指南(python 操作文件)

一、核心函数open()精解基本语法open(file,mode='r',encoding=None,errors=None,newline=None)关键参数解析1.f...

Python 实现从文本文件提取数据并分析保存

一、引言在日常的数据处理工作中,我们经常会遇到从文本文件中提取特定信息并进行分析的需求。本文将详细介绍如何使用Python编写代码,从一个包含用户网络使用信息的文本文件中提取用户姓名、入站流量和出...

22-3-Python高级特性-上下文管理器

4-上下文管理器4-1-概念上下文管理器是一种实现了`__enter__()`和`__exit__()`方法的对象;用于管理资源的生命周期,如文件的打开和关闭、数据库连接的建立和断开等。使用...

python:最简单爬虫之使用Scrapy框架爬取小说

python爬虫框架中,最简单的就是Scrapy框架。执行几个命令就能生成爬虫所需的项目文件,我们只需要在对应文件中调整代码,就能实现整套的爬虫功能。以下在开发工具PyCharm中用简单的Demo项目...

Python爬取小说技术指南(python爬取文章)

在Python中爬取小说需要遵循法律法规和网站的服务条款,请确保你有权获取目标内容。以下是使用Python爬取小说的通用技术流程安装依赖库pipinstallrequestsbeauti...

python原始套接字socket下载http网页文件到txt

python原始套接字socket下载http网页文件到txtimportsocketdefdownload_webpage(url,output_file):try:...

取消回复欢迎 发表评论: