当前位置: 首页 > article >正文

go语言zero框架通过chromedp实现网页在线截图的设计与功能实现

在 GoZero 框架中实现网页在线截图的功能,可以通过集成 `chromedp` 库来控制 Chrome 浏览器进行截图。`chromedp` 是一个基于 Chrome DevTools 协议的 Go 包,可以用来在 Go 程序中模拟浏览器操作,如页面截图、DOM 操作、表单提交等。

下面是一个设计方案,展示如何使用 `chromedp` 在 GoZero 中实现网页截图功能。

### 1. 项目设计

我们将创建一个 GoZero 服务,提供一个 API 接口,通过 `chromedp` 实现网页截图。

#### 主要组件:
- **chromedp**:用于控制浏览器进行截图。
- **GoZero**:作为 API 网关,处理客户端请求,并调用 `chromedp` 来生成截图。
- **接口设计**:提供一个 API 接口,接收网页 URL 和一些截图参数,返回截图的图片。

### 2. 安装依赖

首先需要安装 `chromedp` 库以及 GoZero 框架。

```bash

go get github.com/chromedp/chromedp
go get github.com/tal-tech/go-zero


```

### 3. 实现步骤

#### 3.1 创建截图功能

我们先使用 `chromedp` 实现截图功能,返回网页截图的二进制数据。```go

package main

import (
    "context"
    "fmt"
    "github.com/chromedp/chromedp"
    "golang.org/x/net/context"
    "io/ioutil"
    "log"
    "time"
)

// TakeScreenshot 截取网页并返回图片二进制数据
func TakeScreenshot(url string) ([]byte, error) {
    // 创建一个 Chrome 浏览器实例
    opts := append(chromedp.DefaultExecAllocatorOptions[:],
        chromedp.Flag("headless", true), // 无头浏览模式
        chromedp.Flag("disable-gpu", true),
        chromedp.Flag("no-sandbox", true),
    )

    allocCtx, cancel := chromedp.NewExecAllocator(context.Background(), opts...)
    defer cancel()

    // 创建一个新的浏览器会话
    ctx, cancel := chromedp.NewContext(allocCtx)
    defer cancel()

    // 设置浏览器超时时间
    ctx, cancel = context.WithTimeout(ctx, 30*time.Second)
    defer cancel()

    var buf []byte
    // 截图的目标操作:打开页面并截取网页
    err := chromedp.Run(ctx,
        chromedp.Navigate(url),
        chromedp.Sleep(2*time.Second), // 等待页面加载完成
        chromedp.CaptureScreenshot(&buf), // 截取页面
    )
    if err != nil {
        return nil, fmt.Errorf("failed to capture screenshot: %v", err)
    }

    return buf, nil
}

func main() {
    url := "https://www.example.com" // 你可以替换为任意网页 URL
    img, err := TakeScreenshot(url)
    if err != nil {
        log.Fatalf("Error: %v", err)
    }

    // 将截图保存为本地文件
    err = ioutil.WriteFile("screenshot.png", img, 0644)
    if err != nil {
        log.Fatalf("Failed to save screenshot: %v", err)
    }
    log.Println("Screenshot saved successfully")
}


```

#### 3.2 创建 GoZero API 接口

接下来,我们在 GoZero 中创建一个 API 接口,允许客户端传递 URL 参数并获取截图。

1. **创建 API 结构**:我们需要一个请求结构体来接收 URL 和返回的图片数据。```go

// api/screenshot.api
type ScreenshotRequest struct {
    URL string `json:"url"`
}

type ScreenshotResponse struct {
    ImageData string `json:"image_data"`
}


```

2. **API 处理逻辑**:在 `screenshot` 的处理函数中调用 `chromedp` 实现截图功能。```go

package handler

import (
    "context"
    "github.com/tal-tech/go-zero/rest/httpx"
    "your_project/api"
    "your_project/service"
    "net/http"
)

// ScreenshotHandler 处理网页截图请求
func ScreenshotHandler(ctx context.Context, w http.ResponseWriter, r *http.Request) {
    var req api.ScreenshotRequest
    if err := httpx.Parse(r, &req); err != nil {
        httpx.Error(w, err)
        return
    }

    // 调用截图服务
    imgData, err := service.TakeScreenshot(req.URL)
    if err != nil {
        httpx.Error(w, err)
        return
    }

    // 返回截图的 Base64 编码(或者返回二进制图片数据)
    httpx.OkJson(w, api.ScreenshotResponse{
        ImageData: "data:image/png;base64," + imgData,
    })
}


```

3. **服务层实现截图**:将 `chromedp` 截图逻辑提取到服务层。```go

package service

import (
    "fmt"
    "github.com/chromedp/chromedp"
    "golang.org/x/net/context"
    "time"
)

// TakeScreenshot 截取网页并返回图片二进制数据
func TakeScreenshot(url string) (string, error) {
    opts := append(chromedp.DefaultExecAllocatorOptions[:],
        chromedp.Flag("headless", true),
        chromedp.Flag("disable-gpu", true),
        chromedp.Flag("no-sandbox", true),
    )

    allocCtx, cancel := chromedp.NewExecAllocator(context.Background(), opts...)
    defer cancel()

    ctx, cancel := chromedp.NewContext(allocCtx)
    defer cancel()

    // 设置浏览器超时时间
    ctx, cancel = context.WithTimeout(ctx, 30*time.Second)
    defer cancel()

    var buf []byte
    err := chromedp.Run(ctx,
        chromedp.Navigate(url),
        chromedp.Sleep(2*time.Second),
        chromedp.CaptureScreenshot(&buf),
    )
    if err != nil {
        return "", fmt.Errorf("failed to capture screenshot: %v", err)
    }

    // 将图片转成 Base64 编码并返回
    return base64.StdEncoding.EncodeToString(buf), nil
}


```

4. **注册路由**:在 `main.go` 中设置 API 路由并启动服务。```go

package main

import (
    "github.com/tal-tech/go-zero/rest"
    "your_project/handler"
)

func main() {
    // 创建 GoZero 路由
    r := rest.NewRouter()

    // 注册网页截图接口
    r.Add("POST", "/api/screenshot", handler.ScreenshotHandler)

    // 启动服务
    r.Start(":8080")
}


```

### 4. 运行与测试

1. 启动 GoZero 服务:

```bash

go run main.go


```

2. 通过 `curl` 或者 Postman 向 `/api/screenshot` 发送请求,传递 `url` 参数:

```bash

curl -X POST http://localhost:8080/api/screenshot -d '{"url": "https://www.example.com"}' -H "Content-Type: application/json"


```

3. 如果一切正常,您将会得到返回的 Base64 编码的截图数据,或者直接返回图片文件。

### 5. 总结

- 我们利用 `chromedp` 来实现在 GoZero 框架中通过浏览器截图网页。
- 通过 API 接口,客户端传入网址,服务端处理后返回截图。
- `chromedp` 可以通过无头浏览器模式,模拟真实用户浏览网页,完成截图操作。

这个方案具有很好的可扩展性,可以支持更多功能,比如截图尺寸调整、延时加载、设置代理等。


http://www.kler.cn/a/511636.html

相关文章:

  • Oracle 可观测最佳实践
  • Wi-Fi 7、Wi-Fi 6 与 5G、4G 的全方位对比
  • STL--set(集合)
  • 《自动驾驶与机器人中的SLAM技术》ch8:基于预积分和图优化的紧耦合 LIO 系统
  • python爬虫报错日记
  • 20250118-读取并显示彩色图像以及提取彩色图像的 R、G、B 分量
  • SQLMAP的下载安装和使用(Windows)
  • HTML 的基础知识及其重要性
  • go语言 goc覆盖率统计
  • 如何安装linux版本的node.js
  • 本地仓库管理之当前分支内的操作
  • Stata应用:将数据“画”在中国地图上|Python数据分析
  • springboot财务管理系统
  • Unity3D仿星露谷物语开发24之创建时间管理器
  • 【Kafka】Linux+KRaft集群部署指南
  • 在 Ubuntu 上安装 Jetzig 框架指南
  • 【Java数据结构】优先级队列(堆)
  • KubeSphere 与 Pig 微服务平台的整合与优化:全流程容器化部署实践
  • ChatGPT 写作系列
  • 汇编与逆向(一)-汇编工具简介
  • 【24】Word:小郑-准考证❗
  • Windows 通过 openssh 连接 Ubuntu 24.04 LTS
  • leetcode300.最长递增子序列
  • css‘s hover VS mobile
  • UnderTow服务器
  • 第10章:Python TDD优化货币类方法与引入工厂方法