python上传文件到linux服务器_python上传大文件到服务器报错

项目需要,在mac上将打包好的文件(四五百兆)自动上传到web后台,用了两种方式上传,都报了类似的错误,在windows和linux上测试不会报错,但是到了mac打包机上就会报错:

①第一种报错:

Traceback (most recent call last):

File "my_upload.py", line 61, in <module>

upload_pack(f)

File "my_upload.py", line 54, in upload_pack

r = requests.post(url, form, files=files)

File "/Library/Python/2.7/site-packages/requests-2.9.1-py2.7.egg/requests/api.py", line 107, in post

return request('post', url, data=data, json=json, **kwargs)

File "/Library/Python/2.7/site-packages/requests-2.9.1-py2.7.egg/requests/api.py", line 53, in request

return session.request(method=method, url=url, **kwargs)

File "/Library/Python/2.7/site-packages/requests-2.9.1-py2.7.egg/requests/sessions.py", line 468, in request

resp = self.send(prep, **send_kwargs)

File "/Library/Python/2.7/site-packages/requests-2.9.1-py2.7.egg/requests/sessions.py", line 576, in send

r = adapter.send(request, **kwargs)

File "/Library/Python/2.7/site-packages/requests-2.9.1-py2.7.egg/requests/adapters.py", line 426, in send

raise ConnectionError(err, request=request)

requests.exceptions.ConnectionError: ('Connection aborted.', error(32, 'Broken pipe'))

代码:

# -*- coding: UTF-8 -*-

import requests

import json

import sys

reload(sys)

sys.setdefaultencoding("utf-8")

url = 'http://10.242.12.121:9096/auto_upload/'

# config

channel = unicode('test2').encode('utf-8')

form = {'platform': 'Android', 'channel': channel, 'publish_time': '2016-08-01 00:00', 'remarks': 'auto_test', 'code': 'HH'}

files = {'file': ('D3174449.apk', open('D3174449.apk', 'rb'), 'application/octet-stream')}

print 'upload...'

s = requests.session()

r = s.post(url, form, files=files, timeout=500)

print r.text

# print unicode(json.loads(r.text)).encode('utf-8')

print 'upload_end'

第二种报错:urllib2.URLError:

代码:

#!/usr/bin/python

# -*- coding: utf-8 -*-

import sys

reload(sys)

sys.setdefaultencoding("utf-8")

# buld post body data

import urllib2

import time

boundary = '----WebKitFormBoundary3hYfNZFUuz8yiMid'

data = []

data.append('--%s' % boundary)

data.append('Content-Disposition: form-data; name="%s"\r\n' % 'platform')

data.append('Android')

data.append('--%s' % boundary)

data.append('Content-Disposition: form-data; name="%s"\r\n' % 'channel')

data.append('360')

data.append('--%s' % boundary)

data.append('Content-Disposition: form-data; name="%s"\r\n' % 'publish_time')

data.append('2016-08-23 00:00')

data.append('--%s' % boundary)

data.append('Content-Disposition: form-data; name="%s"\r\n' % 'remarks')

data.append('hh2')

data.append('--%s' % boundary)

data.append('Content-Disposition: form-data; name="%s"\r\n' % 'code')

data.append('HH')

data.append('--%s' % boundary)

fr = open(u'./D3174449.apk', 'rb')

data.append('Content-Disposition: form-data; name="%s"; filename="D3174449.apk"' % 'file')

data.append('Content-Type: %s\r\n' % 'application/octet-stream')

data.append(fr.read())

fr.close()

data.append('--%s--\r\n' % boundary)

http_url = 'http://10.242.12.121:9096/auto_upload/'

http_body = '\r\n'.join(data)

print 'upload...'

try:

# buld http request

req = urllib2.Request(http_url, data=http_body)

# header

#req.add_header('Content-Type', 'multipart/form-data; boundary=%s' % boundary)

#req.add_header('User-Agent', 'Mozilla/5.0')

#req.add_header('Referer', 'http://10.246.13.129:9099/auto_upload/')

req.add_header('Accept', 'application/json, text/javascript, */*; q=0.01')

req.add_header('Accept-Encoding', 'gzip, deflate')

req.add_header('Accept-Language', 'zh-CN,zh;q=0.8')

req.add_header('Connection', 'keep-alive')

#req.add_header('Content-Length', '620')

req.add_header('Content-Type', 'multipart/form-data; boundary=%s' % boundary)

req.add_header('Cookie', 'session=.eJyrVkosLclQsjLUUUrOT0lVsqpWUkhSslIKdgmsUqoFCRYVALkZGXkmBhYGSjpKqbmJmTkIEQeQAr281JLUxOJUveT8XKCStNKcnLzEXKBhSjGlFgaphjGlZilmlkq1AP-KIUg.Cp7ldw.cDtv8It9wXz12qb7JbI5gf08rew')

req.add_header('Origin', 'http://10.246.13.129:9096')

req.add_header('Referer', 'http://10.246.13.129:9096/auto_upload/')

req.add_header('User-Agent', 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36')

req.add_header('X-Requested-With', 'XMLHttpRequest')

# post data to server

resp = urllib2.urlopen(req, timeout=500)

# get response

qrcont = resp.read()

print qrcont

except Exception, e:

print e

print 'upload end'

搜索能力有限,去谷歌搜了下没有找到合适的解决办法,或者是理解不够:

https://github.com/kennethrei…

服务端代码:

def auto_upload():

"""

上传文件

"""

try:

file = request.files['file']

except:

print 'file fail'

print 'myautofile_debug', file

platform = request.form.get('platform')

channel = request.form.get('channel')

publish_time = request.form.get('publish_time')

remarks = request.form.get('remarks')

code = request.form.get('code')

#create channel if channel does not exist

data = {'platform': platform, 'channel': channel, 'remarks': '', 'app_num': 0, 'code': code}

result = app.config['mongo'].insert_channel_data(data)

print 'result:', result

#if result is not False:

# 增加渠道目录

platform_dir = os.path.join(app.config['UPLOAD_FOLDER'], code, platform)

channel_dir = os.path.join(platform_dir, channel)

print 'add_channel', platform_dir, channel_dir, os.path.exists(platform_dir), os.path.exists(channel_dir)

#try:

if not os.path.exists(platform_dir):

os.mkdir(platform_dir)

if not os.path.exists(channel_dir):

os.mkdir(channel_dir)

#except:

#return Response(json.dumps('fail'), mimetype='application/json')

# channel = channel.encode('utf-8')

relative_path = code + os.sep + platform + os.sep + channel + os.sep

#print 'upload_file', relative_path

if file:

# filename = secure_filename(file.filename)

filename = file.filename

filename = gen_file_name(filename, relative_path)

mimetype = file.content_type

#print 'auto_mimetype:', mimetype

if not allowed_file(file.filename, platform):

#print 'not allowed'

result = uploadfile(name=filename, type=mimetype, size=0, not_allowed_msg="文件类型错误!")

else:

# save file to disk

uploaded_file_path = os.path.join(app.config['UPLOAD_FOLDER'], relative_path + filename)

file.save(uploaded_file_path)

# get file size after saving

size = os.path.getsize(uploaded_file_path)

size_str = _formatFileSize(size)

#print 'size', size, size_str

# save data into database

data = {}

data['code'] = code

data['platform'] = platform

data['channel'] = channel

data['filename'] = filename

data['url'] = uploaded_file_path

data['size'] = size_str

data['publish_time'] = publish_time

data['upload_time'] = datetime.now().strftime("%Y-%m-%d %H:%M:%S")

data['remarks'] = remarks

app.config['mongo'].insert_app_data(data)

# return json for js call back

result = uploadfile(name=filename, type=mimetype, size=size, relative_path = relative_path)

return json.dumps({"files": [result.get_file()]})

你这个一般都需要结合服务器端的软件代码、框架版本之类的来解决啊,不过既然你特意说了Windows、Linux和MAC的差异,我只知道一个比较重要的差异,就是MAC操作系统在对方shutdown的情况下不能保持半连接状态,一段时间后悔自动关闭,所以如果你的服务器端在还没有传输完文件的情况下就以某种方式SHUTDOWN了写的一端,就会在传输中出错,比如说先发送了返回值,再慢慢接收数据。没有别的信息的话只能先这么猜了。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/346762.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

mysql 更改root密码及 主机_设置更改root密码(远程,本地)、连接mysql、mysql常用命令...

设置更改root密码1、将mysql加入环境变量中[rootcentos7 ~]# grep mysql /etc/profileexport PATH/usr/local/mysql/bin/:$PATH2、直接登录&#xff0c;无密码[rootcentos7 ~]# mysql -uroot3、方式一&#xff1a;设置密码[rootcentos7 ~]# mysqladmin -uroot password 123456W…

从NetBeans运行和调试WildFly Swarm应用程序

使用NetBeans的Java EE开发人员习惯于直接在NetBeans所选择的应用程序服务器中运行和调试其瘦战应用程序。 在开发打包为ber或镂空jars的微服务时&#xff0c;您期望使用相同的轻松方式进行运行和调试。 好消息是您可以。 在本文中&#xff0c;我将逐步演示如何在NetBeans中运行…

mysql 事实表 维度表_数据库的事实表与维度表

维度表示你要对数据进行分析时所用的一个量&#xff0c;比如你要分析产品销售情况&#xff0c;你可以选择按类别来进行分析&#xff0c;或按区域来分析&#xff0c;这样的按照什么分析就构成一个维度。前面的实例就可以有两个维度&#xff1a;类型和区域。另外每个维度还可以有…

hazelcast入门教程_Hazelcast入门

hazelcast入门教程7月&#xff0c;我写了一个博客向Java开发人员介绍erlang&#xff0c;重点介绍了这两种语言之间的一些异同。 erlang虚拟机具有许多令人印象深刻的内置功能&#xff0c;其中之一是它们独立于位置且可以相互通信。 这意味着可以通过编写很少的代码行在VM之间同…

tcp java实例_实现了基于TCP的Java Socket编程实例代码

实现了基于TCP的Java Socket编程&#xff0c;功能很简单&#xff1a;客户端向服务器端输出一名话"connect"&#xff0c;服务器端接收输出到控制台并向客户端输出一名话"Hello",客户端接收并输出。1.服务器端package javase.net.socket;import java.io.Data…

java 批量上传图片插件_java多文件上传plupload控件实现多图片上传(一)

使用的是plupload-2.1.2 控件。网上资源挺多的&#xff0c;很好下载。plupload 官方地址 : http://www.plupload.com/plupload 示例: http://www.plupload.com/examples/plupload Github: https://github.com/moxiecode/plupload整体框架用的是easyui springMVC。1、前台jsp页…

java servlet_Java Servlet的前100个问题

java servlet1&#xff09;是“ servlets”目录还是“ servlet”目录&#xff1f; 回答&#xff1a; 对于Java Web Server&#xff1a; 在文件系统上&#xff0c;它是“ servlet” c&#xff1a;\ JavaWebServer1.1 \ servlets \ DateServlet.class 在URL路径中&#xff0c;…

精通java ee项目案例_精通JavaEE项目案例

第1章 Java EE开发入门 11.1 基本概念 11.1.1 Java EE API 11.1.2 MVC模型 21.1.3 JSP讨论 31.1.4 Servlet讨论 41.1.5 Model1和Model2 51.2 Eclipse 51.2.1 Eclipse的平台简介 61.2.2 Eclipse的体系结构 61.3 Struts 71.3.1 认识Struts 71.3.2 Strut…

java调用php session_php读取memcahed java session

情景&#xff1a;1&#xff1a;现在有两个系统&#xff0c;一个是Java做的系统&#xff0c;一个是PHP的系统&#xff0c;现在要把两个系统弄成一个单点登录。2&#xff1a;两个系统两个库&#xff0c;两个库的表结构完全不同&#xff0c;现在要解决的就是session共享问题和用户…

[MEGA DEAL]完整的Java编程训练营(94%折扣)

成为Java Master的10门课程&#xff08;83.5小时&#xff09;&#xff1a;使用JavaFX的设计UI&#xff0c;利用设计模式&#xff0c;Master Multithreading等 嘿&#xff0c;怪胎&#xff0c; 本周&#xff0c;在我们的JCG Deals商店中 &#xff0c;我们提供了另一个超值优惠…

怎么把java程序放进php_如何在php脚本中执行Java程序?

I have been struggling with this for awhile trying all sorts of options withno results – the file is never created(the file is created with an absolutepath so it’s not being created and Ijust can’t find the file). Does anyonehave any ideas?我认为问题是…

java重排序_Java内存模型FAQ(四)重排序意味着什么?

译者&#xff1a;Alex在很多情况下&#xff0c;访问一个程序变量(对象实例字段&#xff0c;类静态字段和数组元素)可能会使用不同的顺序执行&#xff0c;而不是程序语义所指定的顺序执行。编译器能够自由的以优化的名义去改变指令顺序。在特定的环境下&#xff0c;处理器可能会…

javafx响应式布局_JavaFX的响应式设计

javafx响应式布局使用CSS技术&#xff0c;为您的网站创建响应式设计相对容易。 根据屏幕的大小&#xff0c;您可以使用其他CSS文件和布局。 在JavaFX中&#xff0c;乍一看似乎有些困难&#xff0c;因为CSS仅负责样式&#xff0c;而不负责布局。 但是&#xff0c;为各个屏幕尺寸…

pojo java_什么是POJO,JavaBean?

什么是POJO&#xff0c;JavaBean&#xff1f;总结&#xff1a;POJO&#xff1a;一个简单的Java类&#xff0c;这个类没有实现/继承任何特殊的java接口或者类&#xff0c;不遵循任何主要java模型&#xff0c;约定或者框架的java对象。在理想情况下&#xff0c;POJO不应该有注解。…

JVM体系结构101:了解您的虚拟机

Java虚拟机&#xff08;JVM&#xff09;架构和Java字节码101的初学者速成班 Java应用程序无处不在&#xff0c;它们在我们的手机&#xff0c;平板电脑和计算机上。 在许多编程语言中&#xff0c;这意味着要多次编译代码才能使其在不同的OS上运行。 对于作为开发人员的我们来说…

flask对mysql数据库增删改查_Flask学习(三) - Flask-SQLAlchemy对数据库增删改查

Flask-SQLAlchemy对数据库增删改查安装pip install flask-sqlalchemy具体不多说了&#xff0c;主要是对数据库进行简单的增删改查&#xff0c;上代码&#xff0c;看注释app.route(/)def index():#增加article1 Article(titletest1, contentthe first test)db.session.add(arti…

逸出 java_【java】知识系谱-基础篇-线程-发布、逸出

java并发编程实战的解释&#xff0c;不够详细&#xff0c;尤其this引用逸出让人理解有些费解&#xff0c;java并发编程实战里面的内容就直接拷贝过来发布&#xff1a;使对象能够在当前作用域之外的代码中使用逸出&#xff1a;当某个不该被发布的对象被发布时&#xff0c;这种情…

lambda java_Java Lambdas简介

lambda javaJava 8的主题是lambdas。 我已经注意到&#xff0c;对于许多Java程序员来说&#xff0c;lambda都是非常难的材料。 因此&#xff0c;让我们尝试对它们有一个基本的了解。 首先&#xff0c;lambda到底是什么&#xff1f; Lambda是一个匿名函数&#xff0c;与常规函数…

java mousepress_Java线程原语弃用

为什么是线程停止不赞成&#xff1f;因为它本质上是不安全的。停止线程会使其解锁其锁定的所有监视器。(当ThreadDeath异常在堆栈上传播时&#xff0c;监视器将被解锁。)如果以前受这些监视器保护的任何对象处于不一致状态&#xff0c;其他线程现在可能会以不一致的状态查看这些…

带有Jersey的JAX-RS教程,用于RESTful Web服务

在当今世界&#xff0c;数据扮演着非常重要的角色。 如此众多的应用程序将各种类型的数据用于不同的操作&#xff0c;所以最重要的方面是应用程序之间的通信。 当应用程序可以通信时&#xff0c;它们之间的数据共享变得容易。 就像在亚洲运行的应用程序向在欧洲运行的应用程序…