网站建设的维护范围,wordpress菜单注册,西安建网站价格,国内咨询公司排名前十名什么是 Browserless#xff1f;
Browserless 是一款基于云的浏览器解决方案#xff0c;旨在实现高效的浏览器自动化、网页抓取和测试。
它利用 Nstbrowser 的指纹库#xff0c;实现随机指纹切换#xff0c;确保流畅的数据收集和自动化。得益于其强大的云基础设施#xf…
什么是 Browserless
Browserless 是一款基于云的浏览器解决方案旨在实现高效的浏览器自动化、网页抓取和测试。
它利用 Nstbrowser 的指纹库实现随机指纹切换确保流畅的数据收集和自动化。得益于其强大的云基础设施Browserless 简化了对多个浏览器实例的访问从而更轻松地管理自动化任务。 您对网页抓取和 Browserless 有什么奇思妙想和疑问吗 让我们看看其他开发者在 Discord 和 Telegram 上分享了什么 Browserless 如何运作
Browserless 通过提供一个无头浏览器服务来运作允许用户在无需图形界面的情况下执行浏览器自动化任务。
它使开发者能够通过 API 运行基于浏览器的任务例如网页抓取、自动化测试和渲染网页。通过在云环境中运行Browserless 简化了浏览器自动化过程无需手动设置或维护浏览器基础设施。
Browserless 支持 Puppeteer 和 Playwright 等流行库允许用户以编程方式与网站交互。其基于 Docker 的基础设施支持可扩展和灵活的部署使其适用于小型和企业级应用程序。它可以集成到工作流程中以自动化重复性任务或从需要浏览器的网站收集数据。
如何在 Docker 中部署 Headlesschrome
第 1 步获取您的 API 密钥
为了获得更好的体验请在 Nstbrowser 上创建一个新帐户。
使用您注册的信息登录 Nstbrowser 客户端。成功登录后不要忘记从 API 菜单中生成您的唯一 API 密钥 第 2 步获取 Nstbrowserless 镜像并运行
您需要获取 API Key 并替换以下 {YOUR_API_KEY} 部分。
docker run -it -e TOKEN{YOUR_API_KEY} -e SERVER_PORT8848 -p 8848:8848 --name nstbrowserless nstbrowser/browserless:0.0.1-beta 如何在 Docker 容器中使用 Browserless
您可以通过 Puppeteer、Playwright、Chromedp 或其他 CDP 库连接到无头浏览器以实现无头浏览器的操作和截图功能。
Puppeteer
Puppeteer 是一个 Node.js 库它提供了一个高级 API 来控制 Chrome 浏览器并支持通过 DevTools 协议进行操作。
安装 Puppeteer
npm install puppeteer
准备 puppeteer.js 文件
const puppeteer require(puppeteer);(async () {const host 127.0.0.1:8848; // 替换为您的 Docker 容器 IPconst browserWSEndpoint ws://${host}/ws/connect;try {const browser await puppeteer.connect({browserWSEndpoint: browserWSEndpoint,});const page await browser.newPage();await page.goto(https://google.com, { waitUntil: networkidle2 }); // 等待网络空闲await page.screenshot({ path: screenshot.png, fullPage: true }); // 拍摄全页面截图console.log(Screenshot taken and saved as screenshot.png);await browser.close(); // 关闭浏览器连接} catch (err) {console.error(Error occurred:, err);}
})();
运行您的脚本
node puppeteer.js
运行后您可以看到无头浏览器按我们预期工作 现在项目已完成您可以找出生成的 screenshot.png Playwright CDP
Playwright 是一个用于 Web 测试和自动化的框架允许通过单个 API 测试 Chrome 浏览器。
安装 Playwright
npm install playwright
准备 playwright.js 文件
import { chromium } from playwright;(async () {const host 127.0.0.1:8848; // 替换为您的 Docker 容器 IPconst browserWSEndpoint ws://${host}/ws/connect;try {const browser await chromium.connectOverCDP(browserWSEndpoint);const context await browser.newContext();const page await context.newPage();await page.goto(https://www.google.com/, { waitUntil: networkidle }); // 等待网络空闲await page.screenshot({ path: screenshot.png }); // 拍摄全页面截图console.log(Screenshot taken and saved as screenshot.png);await browser.close(); // 关闭浏览器连接} catch (err) {console.error(Error occurred:, err);}
})();
运行您的脚本
node playwright.js
与 Puppeteer 相同运行后您也可以找出生成的 screenshot.png。 总结
Browserless 使网页抓取和自动化变得容易。在本博客中您可以看到
在 Docker 中部署 headlesschrome 的有效方法。在 Docker 容器中使用 Browserless 的详细步骤。 在容器中运行浏览器提供了很大的灵活性和可扩展性。它也比传统的基于 VM 的实例便宜得多。
