Golang实现Minio获取文件转压缩文件下载

命运对每个人都是一样的,不一样的是各自的努力和付出不同,付出的越多,努力的越多,得到的回报也越多,在你累的时候请看一下身边比你成功却还比你更努力的人,这样,你就会更有动力。

导读:本篇文章讲解 Golang实现Minio获取文件转压缩文件下载,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

根据Minio文件直接返回下载

方案一

首先创建一个名为 DownloadFile 的方法它接受一个 types.DownloadReq 类型的参数,并返回一个 byte 类型的切片和一个 error 类型的错误。

在该方法中从 Minio 客户端获取一个 object 对象,并使用 minio.GetObjectOptions 结构体获取该对象的详细信息。随后,我们使用 ioutil 包的 ReadAll 方法将对象读取到 chunk 切片中。最后返回我们读取到的内容

func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}

	chunk, err := ioutil.ReadAll(object)
	if err != nil {
		fmt.Println("read to fd fail", err)
		return nil, nil
	}

	return chunk, nil
}

方案二

我们可以再将上一个方案稍作改进,并使用 bytes.Buffer 类型的变量 bowl 代替 ioutil 包。

func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}

	bowl := bytes.Buffer{}
	num, err := bowl.ReadFrom(object)
	fmt.Println(num)
	return bowl.Bytes(),nil
	
}

方案三

这个方案与前两个方案有所不同。我们采用了一个循环来读取对象的每个块,并将它们添加到一个 chunk 切片中。

func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}

	var chunk []byte
	buf := make([]byte, 1024)
	for {
		// 从file读取到buf中
		// Read reads up to len(b) bytes into b.
		// It returns the number of bytes read (0 <= n <= len(b)) and any error encountered.
		// Returns io.EOF upon end of file.
		n, err := object.Read(buf)
		if err != nil && err != io.EOF {
			fmt.Println("read buf fail", err)
			return err, nil
		}
		// 读取结束
		if n == 0 {
			fmt.Println("n=0")
			break
		}
		// 读取到最终的缓冲区中
		chunk = append(chunk, buf[:n]...)
	}
	return chunk, nil
}

方案四

类似第三个方案,这个方案通过一个 bufio.Reader 来逐块读取文件,并将每个块添加到一个 chunk 切片中。

func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}
	r := bufio.NewReader(object)
	var chunk []byte
	buf := make([]byte, 1024)
	for {
		n, err := r.Read(buf)
		if err != nil && err != io.EOF {
			panic(err)
		}
		if 0 == n {
			break
		}
		//fmt.Println(string(buf))
		chunk = append(chunk, buf...)
	}
	return chunk, nil
}

Minio文件压缩返回Zip文件

在这个示例中我们将会从 Minio 中获取一个文件,将其添加到一个新的 Zip 文件中,并将 Zip 文件返回给客户端。

func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}
	buf := new(bytes.Buffer)
	w := zip.NewWriter(buf)
	f, err := w.Create(req.GetObjectName)
	if err != nil {
		return nil, err
	}
	if _, err := io.Copy(f, object); err != nil {
		return nil, err
	}
	if err := w.Close(); err != nil {
		return nil, err
	}
	return buf.Bytes(), nil
}

生成带压缩密码ZiP文件

如果你想创建带有压缩密码的 Zip 文件,可以使用 zipWriter.Encrypt 方法来为每个文件项设置密码。在下面的示例中,我们遵循与上一个示例相同的基本格式,只是这次我们在 zipWriter.Encrypt 中传递了一个字符串作为密码。

import (
"bytes"
"context"
"github.com/alexmullins/zip"
"github.com/minio/minio-go/v6"
"github.com/zeromicro/go-zero/core/logx"
"io"
)


func (l *DownloadFileLogic) DownloadFile(req *types.DownloadReq) (byte []byte, err error) {

	// 获取MinIO对象
	var object *minio.Object
	object, err = l.svcCtx.Minio.Client.GetObject(l.svcCtx.Config.Minio.Bucket, req.GetObjectName, minio.GetObjectOptions{})
	if err != nil {
		l.Logger.Error("Download from minio error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}
	// 创建一个新的字节数组缓冲区和zip文件写入器
	buf := new(bytes.Buffer)
	zipWriter := zip.NewWriter(buf)
	// 向zip文件写入器中添加一个文件项,并将原始数据复制到该文件项中
	file, err := zipWriter.Encrypt(req.GetObjectName, "pwd")
	if err != nil {
		l.Logger.Error("DownloadFile zipWriter.Create error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}
	if _, err = io.Copy(file, object); err != nil {
		l.Logger.Error("DownloadFile io.Copy error:{} object: {}", err, objectName)
		return nil, err
	}
	// 关闭zip文件写入器以刷新所有缓冲区并生成完整的ZIP文件
	if err = zipWriter.Close(); err != nil {
		l.Logger.Error("DownloadFile zipWriter.Close() error:{} object: {}", err, req.GetObjectName)
		return nil, err
	}
	// 返回ZIP文件的字节切片
	return buf.Bytes(), nil
    
}

小结

在这篇文章中我们以 Golang 实现 Minio 获取文件转压缩文件下载为主题,介绍了四种方案。方案一是直接从 Minio 客户端获取一个对象,并使用 ioutil 包读取到一个切片中。方案二则是利用 bytes.Buffer 类型的变量来代替 ioutil 包进行读取。方案三和方案四则采用了不同方式通过循环分块读取文件内容,并将其添加到一个切片中。

此外也介绍了如何使用 Minio 执行文件压缩并返回 Zip 文件,以及如何生成带有压缩密码的 Zip 文件。这些示例让您可以更好地理解使用 Golang 实现 Minio 获取文件转压缩文件下载的方式,并能够将其应用于自己的项目中。

总而言之,论您是初学者还是高级程序员,在阅读本文之后,您都能够更好地理解如何使用 Golang 实现 Minio 获取文件转压缩文件下载,并能够将其应用于自己的项目中。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

文章由极客之音整理,本文链接:https://www.bmabk.com/index.php/post/144210.html

(0)
飞熊的头像飞熊bm

相关推荐

发表回复

登录后才能评论
极客之音——专业性很强的中文编程技术网站,欢迎收藏到浏览器,订阅我们!