0

0

如何用Golang的compress库处理压缩 gzip/zlib实战案例

P粉602998670

P粉602998670

发布时间:2025-08-14 19:56:01

|

1012人浏览过

|

来源于php中文网

原创

go语言中compress/gzip和compress/zlib均基于deflate算法,gzip适用于文件和http压缩,因包含头部和校验信息,而zlib更轻量,适合协议传输;通过newwriter压缩数据并需调用close刷新,newreader解压后也需close释放资源;可实现http中间件自动压缩响应体,或读写.gz文件用于日志归档;两者api相似,但封装格式不同,gzip多用于存储,zlib用于体积敏感场景,正确使用可有效减少传输体积,完整掌握后可用于多种实际场景。

如何用Golang的compress库处理压缩 gzip/zlib实战案例

Go语言标准库中的

compress
包提供了对多种压缩格式的支持,其中
gzip
zlib
是最常用的两种。它们都基于 DEFLATE 算法,但在封装格式和用途上略有不同。本文通过几个实用案例,带你掌握如何在实际项目中使用 Golang 的
compress/gzip
compress/zlib
库。


1. 使用
compress/gzip
压缩和解压数据

gzip
常用于 HTTP 响应压缩、文件压缩(如
.gz
文件)等场景。

压缩字符串为 gzip 数据

package main

import (
    "bytes"
    "compress/gzip"
    "fmt"
    "io"
)

func compressGzip(data string) ([]byte, error) {
    var buf bytes.Buffer
    writer := gzip.NewWriter(&buf)
    _, err := io.WriteString(writer, data)
    if err != nil {
        return nil, err
    }
    if err := writer.Close(); err != nil {
        return nil, err
    }
    return buf.Bytes(), nil
}

func main() {
    original := "Hello, this is a test string for gzip compression."
    compressed, err := compressGzip(original)
    if err != nil {
        panic(err)
    }
    fmt.Printf("Original: %d bytes\n", len(original))
    fmt.Printf("Compressed: %d bytes\n", len(compressed))
}

解压 gzip 数据

func decompressGzip(data []byte) (string, error) {
    reader, err := gzip.NewReader(bytes.NewReader(data))
    if err != nil {
        return "", err
    }
    defer reader.Close()
    var buf bytes.Buffer
    _, err = io.Copy(&buf, reader)
    if err != nil {
        return "", err
    }
    return buf.String(), nil
}

main
中调用:

立即学习go语言免费学习笔记(深入)”;

decompressed, err := decompressGzip(compressed)
if err != nil {
    panic(err)
}
fmt.Printf("Decompressed: %s\n", decompressed)
注意:gzip.NewReader 必须调用 Close() 释放内部资源,即使只读取一次。

2. 使用
compress/zlib
进行轻量级压缩

zlib
格式比
gzip
更轻,常用于协议传输、数据库存储等对体积敏感但不需要文件头信息的场景。

超会AI
超会AI

AI驱动的爆款内容制造机

下载

压缩数据为 zlib 格式

import "compress/zlib"

func compressZlib(data string) ([]byte, error) {
    var buf bytes.Buffer
    writer := zlib.NewWriter(&buf)
    _, err := io.WriteString(writer, data)
    if err != nil {
        return nil, err
    }
    if err := writer.Close(); err != nil {
        return nil, err
    }
    return buf.Bytes(), nil
}

解压 zlib 数据

func decompressZlib(data []byte) (string, error) {
    reader, err := zlib.NewReader(bytes.NewReader(data))
    if err != nil {
        return "", err
    }
    defer reader.Close()
    var buf bytes.Buffer
    _, err = io.Copy(&buf, reader)
    if err != nil {
        return "", err
    }
    return buf.String(), nil
}

用法与

gzip
类似,只是换用了
zlib
包。


3. 实战:HTTP 中间件支持 gzip 压缩响应

在 Web 服务中,我们可以使用

gzip
来压缩响应体,减少传输体积。

package main

import (
    "compress/gzip"
    "net/http"
)

type gzipResponseWriter struct {
    http.ResponseWriter
    *gzip.Writer
}

func (w gzipResponseWriter) Write(data []byte) (int, error) {
    return w.Writer.Write(data)
}

func gzipMiddleware(next http.Handler) http.Handler {
    return http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {
        if !strings.Contains(r.Header.Get("Accept-Encoding"), "gzip") {
            next.ServeHTTP(w, r)
            return
        }

        writer := gzip.NewWriter(w)
        defer writer.Close()

        w.Header().Set("Content-Encoding", "gzip")
        w.Header().Set("Vary", "Accept-Encoding")

        gzResp := gzipResponseWriter{ResponseWriter: w, Writer: writer}
        next.ServeHTTP(gzResp, r)
    })
}

func handler(w http.ResponseWriter, r *http.Request) {
    w.Write([]byte("This is a large response that will be compressed with gzip."))
}

func main() {
    mux := http.NewServeMux()
    mux.HandleFunc("/", handler)
    http.ListenAndServe(":8080", gzipMiddleware(mux))
}

这个中间件检查客户端是否支持

gzip
,如果支持,则包装
ResponseWriter
并设置编码头。


4. 处理
.gz
文件:读写压缩文件

Go 可以直接读写

.gz
文件,适合处理日志归档等场景。

写入 gzip 文件

import (
    "os"
    "compress/gzip"
)

func writeGzipFile(filename, content string) error {
    file, err := os.Create(filename)
    if err != nil {
        return err
    }
    defer file.Close()

    gz := gzip.NewWriter(file)
    defer gz.Close()

    _, err = gz.Write([]byte(content))
    return err
}

读取 gzip 文件

func readGzipFile(filename string) (string, error) {
    file, err := os.Open(filename)
    if err != nil {
        return "", err
    }
    defer file.Close()

    gz, err := gzip.NewReader(file)
    if err != nil {
        return "", err
    }
    defer gz.Close()

    content, err := io.ReadAll(gz)
    return string(content), err
}

小结关键点

  • gzip
    zlib
    都使用
    NewWriter
    NewReader
    ,API 高度相似。
  • 压缩后必须调用
    Close()
    触发 flush,否则数据不完整。
  • gzip.NewReader
    zlib.NewReader
    返回的 reader 必须
    Close()
  • gzip
    包含文件头和校验和,适合文件存储;
    zlib
    更紧凑,适合嵌入协议。
  • 在 HTTP 服务中启用压缩可显著减少带宽。

基本上就这些。掌握这几个模式后,你可以灵活应用于日志压缩、API 响应、配置传输等场景。

相关专题

更多
golang如何定义变量
golang如何定义变量

golang定义变量的方法:1、声明变量并赋予初始值“var age int =值”;2、声明变量但不赋初始值“var age int”;3、使用短变量声明“age :=值”等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

173

2024.02.23

golang有哪些数据转换方法
golang有哪些数据转换方法

golang数据转换方法:1、类型转换操作符;2、类型断言;3、字符串和数字之间的转换;4、JSON序列化和反序列化;5、使用标准库进行数据转换;6、使用第三方库进行数据转换;7、自定义数据转换函数。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

224

2024.02.23

golang常用库有哪些
golang常用库有哪些

golang常用库有:1、标准库;2、字符串处理库;3、网络库;4、加密库;5、压缩库;6、xml和json解析库;7、日期和时间库;8、数据库操作库;9、文件操作库;10、图像处理库。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

334

2024.02.23

golang和python的区别是什么
golang和python的区别是什么

golang和python的区别是:1、golang是一种编译型语言,而python是一种解释型语言;2、golang天生支持并发编程,而python对并发与并行的支持相对较弱等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

204

2024.03.05

golang是免费的吗
golang是免费的吗

golang是免费的。golang是google开发的一种静态强类型、编译型、并发型,并具有垃圾回收功能的开源编程语言,采用bsd开源协议。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

387

2024.05.21

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

193

2025.06.09

golang相关判断方法
golang相关判断方法

本专题整合了golang相关判断方法,想了解更详细的相关内容,请阅读下面的文章。

184

2025.06.10

golang数组使用方法
golang数组使用方法

本专题整合了golang数组用法,想了解更多的相关内容,请阅读专题下面的文章。

191

2025.06.17

笔记本电脑卡反应很慢处理方法汇总
笔记本电脑卡反应很慢处理方法汇总

本专题整合了笔记本电脑卡反应慢解决方法,阅读专题下面的文章了解更多详细内容。

1

2025.12.25

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
golang socket 编程
golang socket 编程

共2课时 | 0.1万人学习

nginx浅谈
nginx浅谈

共15课时 | 0.8万人学习

golang和swoole核心底层分析
golang和swoole核心底层分析

共3课时 | 0.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号