【四、http】go的http的文件下载

一、日常下载图片到本地

//下载文件func downloadfile(url, filename string) {r, err := http.Get(url)if err != nil {fmt.Println("err", err.Error())}defer r.Body.Close()f, err := os.Create(filename)if err != nil {fmt.Println("err", err.Error())}defer f.Close()n, err := io.Copy(f, r.Body)fmt.Println(n, err)
}func main() {var url = "https://img-s-msn-com.akamaized.net/tenant/amp/entityid/AA1jjNfg.img?w=1920&h=1080&q=60&m=2&f=jpg"downloadfile(url, "test.jpg")
}

这里以一张图片为例子

在这里插入图片描述
从后台可以看到图片的url地址

修改main函数中的url地址,可以下载到本地

结果如下
在这里插入图片描述

二、显示文件下载进度

package mainimport ("fmt""io""net/http""os"
)func downloadFile(url, filename string) {r, err := http.Get(url)if err != nil {panic(err)}defer func() {_ = r.Body.Close()}()f, err := os.Create(filename)if err != nil {panic(err)}defer func() {_ = f.Close()}()n, err := io.Copy(f, r.Body)fmt.Println(n, err)
}type Reader struct {io.ReaderTotal int64Current int64
}func (r *Reader) Read(p []byte) (n int, err error){n, err = r.Reader.Read(p)r.Current += int64(n)fmt.Printf("\r进度 %.2f%%", float64(r.Current * 10000/ r.Total)/100)return
}func DownloadFileProgress(url, filename string) {r, err := http.Get(url)if err != nil {panic(err)}defer func() {_ = r.Body.Close()}()f, err := os.Create(filename)if err != nil {panic(err)}defer func() {_ = f.Close()}()reader := &Reader{Reader: r.Body,Total: r.ContentLength,}_, _ = io.Copy(f, reader)
}func main() {// 自动文件下载,比如自动下载图片、压缩包url := "https://user-gold-cdn.xitu.io/2019/6/30/16ba8cb6465a6418?w=826&h=782&f=png&s=279620"filename := "poloxue.png"DownloadFileProgress(url, filename)
}

io.copy函数实现原理

func Copy(dst Writer, src Reader) (written int64, err error) {// Copy 函数 调用了 copyBuffer 函数来实现return copyBuffer(dst, src, nil)
}func copyBuffer(dst Writer, src Reader, buf []byte) (written int64, err error) {// 如果 源Reader 实现了 WriterTo 接口,直接调用该方法 将数据写入到 目标Writer 当中if wt, ok := src.(WriterTo); ok {return wt.WriteTo(dst)}// 同理,如果 目标Writer 实现了 ReaderFrom 接口,直接调用ReadFrom方法if rt, ok := dst.(ReaderFrom); ok {return rt.ReadFrom(src)}// 如果没有传入缓冲区,此时默认 创建一个 缓冲区if buf == nil {// 默认缓冲区 大小为 32kbsize := 32 * 1024// 如果源Reader 为LimitedReader, 此时比较 可读数据数 和 默认缓冲区,取较小那个if l, ok := src.(*LimitedReader); ok && int64(size) > l.N {if l.N < 1 {size = 1} else {size = int(l.N)}}buf = make([]byte, size)}for {// 调用Read方法 读取数据nr, er := src.Read(buf)if nr > 0 {// 将数据写入到 目标Writer 当中nw, ew := dst.Write(buf[0:nr])// 判断写入是否 出现了 错误if nw < 0 || nr < nw {nw = 0if ew == nil {ew = errInvalidWrite}}// 累加 总写入数据written += int64(nw)if ew != nil {err = ewbreak}// 写入字节数 小于 读取字节数,此时报错if nr != nw {err = ErrShortWritebreak}}if er != nil {if er != EOF {err = er}break}}return written, err
}func Copy(dst Writer, src Reader) (written int64, err error) {// Copy 函数 调用了 copyBuffer 函数来实现return copyBuffer(dst, src, nil)
}func copyBuffer(dst Writer, src Reader, buf []byte) (written int64, err error) {// 如果 源Reader 实现了 WriterTo 接口,直接调用该方法 将数据写入到 目标Writer 当中if wt, ok := src.(WriterTo); ok {return wt.WriteTo(dst)}// 同理,如果 目标Writer 实现了 ReaderFrom 接口,直接调用ReadFrom方法if rt, ok := dst.(ReaderFrom); ok {return rt.ReadFrom(src)}// 如果没有传入缓冲区,此时默认 创建一个 缓冲区if buf == nil {// 默认缓冲区 大小为 32kbsize := 32 * 1024// 如果源Reader 为LimitedReader, 此时比较 可读数据数 和 默认缓冲区,取较小那个if l, ok := src.(*LimitedReader); ok && int64(size) > l.N {if l.N < 1 {size = 1} else {size = int(l.N)}}buf = make([]byte, size)}for {// 调用Read方法 读取数据nr, er := src.Read(buf)if nr > 0 {// 将数据写入到 目标Writer 当中nw, ew := dst.Write(buf[0:nr])// 判断写入是否 出现了 错误if nw < 0 || nr < nw {nw = 0if ew == nil {ew = errInvalidWrite}}// 累加 总写入数据written += int64(nw)if ew != nil {err = ewbreak}// 写入字节数 小于 读取字节数,此时报错if nr != nw {err = ErrShortWritebreak}}if er != nil {if er != EOF {err = er}break}}return written, err
}

从中可以看出,io.copy函数是通过read读取文件进行写入新创建的文件,因此,重写后的read函数除了实现原来的read功能,还增加了进度条功能。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/130872.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Python开发技能实战-通过配置的代理服务器在具有外网连接的环境中在Pycharm中运行python代码

实现功能 打开科学上网工具&#xff0c;使得能够在浏览器科学上网&#xff0c;通过科学上网工具的配置文件&#xff0c;可以看出本地和远程代理的映射关系&#xff0c;此时&#xff0c;远程地址本地地址&#xff0c;远程端口本地端口。 1、在程序中配置请求网页代理请求。不需…

系统设计中的缓存技术:完整指南

Image.png 缓存是软件工程中用于提高系统性能和用户体验的基本技术。它通过临时存储频繁访问的数据在缓存中&#xff0c;缓存比数据的原始来源更容易访问。 作为一名软件工程师&#xff0c;了解缓存以及它在不同类型的系统中的工作方式是至关重要的。在本文中&#xff0c;我们将…

NocoDB任意文件读取漏洞复现

简介 NocoDB是一个开源 Airtable 替代品&#xff0c;可以将 MySql、PostgreSql、Sql Server、Sqlite 和 MariaDb 等转换为智能电子表格。 (CVE-2023-35843) NocoDB 0.106.0版本及之前版本存在安全漏洞。攻击者利用该漏洞可以访问服务器上的任意文件。 漏洞复现 FOFA语法&…

C++高级教程学习---文件和流

文章目录 前言文件和流打开文件关闭文件写入文件读取文件检查文件读取和写入实例 前言 学习如何从文件读取流和向文件写入流。 文件和流 fstream标准库 中定义了三个新的数据类型&#xff1a; ofstream&#xff1a;该数据类型表示输出文件流&#xff0c;用于创建文件并向文件…

Iceberg教程

目录 教程来源于尚硅谷1. 简介1.1 概述1.2 特性 2. 存储结构2.1 数据文件(data files)2.2 表快照(Snapshot)2.3 清单列表(Manifest list)2.4 清单文件(Manifest file)2.5 查询流程分析 3. 与Flink集成3.1 环境准备3.1.1 安装Flink3.1.2 启动Sql-Client 3.2 语法 教程来源于尚硅…

基于单片机的滚筒洗衣机智能控制系统设计

收藏和点赞&#xff0c;您的关注是我创作的动力 文章目录 概要 一、系统整体设计方案2.1控制系统的功能2.2设计的主要内容 二、硬件设计3.1 控制系统整体框图3.2 电源电路 三 软件设计主程序设计仿真设计 四、 结论 概要 因此我们需要一个完善的智能系统来设计一个全自动滚筒洗…

代码随想录算法训练营第23期day43|518. 零钱兑换II、377. 组合总和Ⅳ

目录 一、&#xff08;leetcode 518&#xff09;零钱兑换II 二、&#xff08;leetcode 377&#xff09;组合总和 Ⅳ 完全背包问题和01背包在描述上的区别是&#xff1a;完全背包中的物品可以被无限使用&#xff1b;在代码上的区别是&#xff1a;遍历顺序中都是从小到大遍历&a…

GCN火车票识别项目 P2 图卷积神经网络介绍

深度学习一直都是被几大经典模型统治着&#xff0c;常见的有CNN、RNN网络&#xff0c;它们在CV和NLP领域都取得了优异的效果。但人们发现了很多CNN、RNN无法解决&#xff0c;或者效果不好的问题——图结构数据&#xff0c;如社交网络、人物关系、分子结构等&#xff0c;所以就有…

MySQL 为什么在 8.0 版本中移除了查询缓存功能?

MySQL 在 8.0 版本中移除了查询缓存功能。查询缓存是在较早版本的 MySQL 中存在的一个功能&#xff0c;其主要目的是缓存查询结果&#xff0c;以便在之后相同的查询再次被执行时&#xff0c;可以直接返回缓存的结果&#xff0c;而不必再次执行查询&#xff0c;从而提高性能。 …

VMware产品收集日志方法汇总

概述 vCenter日志是一个用于存储与vSphere环境相关的各种活动、事件和警告的日志系统。通过收集并分析vCenter日志&#xff0c;管理员可以获得有关其虚拟化环境的重要洞察和故障排除信息。 vCenter日志由多个组件组成&#xff0c;包括vCenter Server、ESXi主机和其他vSphere组…

Tomcat运行日志乱码问题/项目用tomcat启动时窗口日志乱码

文章目录 一、问题描述&#xff1a;二、产生原因三、解决方法 一、问题描述&#xff1a; 项目在idea中运行时日志是正常的&#xff0c;用Tomcat启动时发现一大堆看不懂的文字&#xff0c;如 二、产生原因 产生乱码的根本原因就是编码和解码不一致&#xff0c;举个例子就是翻…

SLAM从入门到精通(参数标定)

【 声明&#xff1a;版权所有&#xff0c;欢迎转载&#xff0c;请勿用于商业用途。 联系信箱&#xff1a;feixiaoxing 163.com】 标定是slam开发过程中很重要的一个环节。这部分内容涉及到很多方面&#xff0c;比如说传感器、比如说算法、比如说机械&#xff0c;总之好的标定不…

Ubuntu18.04系统镜像制作

安装使用systemback # 添加源 sudo add-apt-repository --remove ppa:nemh/systemback sudo add-apt-repository "deb http://ppa.launchpad.net/nemh/systemback/ubuntu xenial main"# 下载 sudo apt update sudo apt install systemback打开systemback,点击创建li…

【Python机器学习】零基础掌握VotingClassifier集成学习

为什么一些数据预测模型在复杂场景下表现不如预期? 在当今数据驱动的世界中,企业和研究者面临着如何从大量数据中提取有价值信息的挑战。假设一个电商公司想要通过用户行为数据预测产品销量,通常会使用单一的算法模型,如逻辑回归、随机森林或朴素贝叶斯。但问题来了,如果…

树结构及其算法-二叉排序树

目录 树结构及其算法-二叉排序树 C代码 树结构及其算法-二叉排序树 事实上&#xff0c;二叉树是一种很好的排序应用模式&#xff0c;因为在建立二叉树的同时&#xff0c;数据已经经过初步的比较&#xff0c;并按照二叉树的建立规则来存放数据&#xff0c;规则如下&#xff1…

人们常常下定决心“不改变”

"因为我的性格很悲观" 有的人会觉得一些事情发生&#xff0c;是自己性格使然&#xff0c;改变不了。 但其实性格是可以改变的。 这听起来似乎不太现实&#xff0c;自己的性格就是这样&#xff0c;怎么会改变&#xff1f; 那换种表达&#xff0c;我们看待世界的方式可…

源码编译 7z

源码编译 7z 2023.11.04 ChrisZZ 1. 目的 在 macOSX 电脑上&#xff0c;编译 7zip 的控制台应用程序 7zz&#xff0c; 复刻官方给的/homebrew 提供的 7zz 程序。 2. 下载源码 https://www.7-zip.org/a/7z2301-src.tar.xz 3. 查询编译规则描述文件 7zz 是控制台程序&…

【蓝桥每日一题]-倍增(保姆级教程 篇1)

今天讲一下倍增 目录 题目&#xff1a;忠诚 思路&#xff1a; 题目&#xff1a;国旗计划 思路&#xff1a; 查询迭代类倍增&#xff1a; 本质是一个一个选区间使总长度达到 M,类似凑一个数。而我们会经常用不大于它最大的二的次幂&#xff0c;减去之后&#xff0c;再重复这…

element UI DatePicker 日期选择器 点击时间点可选限制范围前后十五天

<el-date-picker v-model"timeRange" type"datetimerange" align"right" :default-timedefaultTimevalue-format"yyyy-MM-dd HH:mm:dd" range-separator"至" start-placeholder"开始日期"end-placeholder"…

编码器的分类

目录 光电编码器 一、增量式编码器 二、绝对式编码器 三、混合式绝对值编码器 四、旋转变压器 五、正余弦伺服电机编码器 光电编码器 光电编码器主要有增量式编码器、绝对式编码器、混合式绝对值编码器、旋转变压器、正余弦伺服电机编码器等&#xff0c;其中增量式编码器…