PowerScan
VI
EnglishEspañolFrançais中文हिन्दीالعربية繁體中文РусскийDeutschУкраїнськаPortuguêsTürkçeไทยTiếng ViệtItalianoBahasa Indonesia한국어日本語

Tự động hóa hồ sơ trình duyệt bằng API cục bộ

Tự động hóa · 8 phút đọc · bởi PowerOps

Ảnh: Unsplash

Khởi động một hồ sơ từ script, nhận về một điểm cuối gỡ lỗi, và gắn Playwright hoặc Puppeteer vào một trình duyệt đã có sẵn danh tính và proxy.

Tự động hóa một trình duyệt antidetect thường được trình bày như một bài toán khó. Thực ra không phải vậy, miễn là công cụ đưa cho bạn đúng thứ mà thư viện tự động hóa của bạn đã biết cách dùng: một điểm cuối gỡ lỗi.

Hình dạng của nó

PowerOps chạy một API HTTP gắn với địa chỉ loopback. Script của bạn yêu cầu nó khởi động một hồ sơ; nó chạy trình duyệt với danh tính, lưu trữ và proxy của hồ sơ đó đã được gắn sẵn, rồi trả về điểm cuối WebSocket của trình duyệt đang chạy. Script của bạn kết nối tới điểm cuối đó bằng Playwright, Puppeteer hoặc bất cứ thứ gì nói được giao thức DevTools.

Thư viện tự động hóa không bao giờ cần biết vân tay trình duyệt là gì. Đến lúc nó kết nối, môi trường đã được thiết lập sẵn.

Khởi động một hồ sơ

curl -s -H "Authorization: Bearer $POWEROPS_API_KEY" \
  http://127.0.0.1:50326/status

Mọi route trừ việc kiểm tra trạng thái đều yêu cầu khóa bearer. Khởi động một trình duyệt sẽ trả về điểm cuối để gắn vào:

curl -s -X POST \
  -H "Authorization: Bearer $POWEROPS_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{"profileId": "..."}' \
  http://127.0.0.1:50326/browser/start

Gắn thư viện của bạn

import { chromium } from "playwright";

const res = await fetch("http://127.0.0.1:50326/browser/start", {
  method: "POST",
  headers: {
    "Authorization": `Bearer ${process.env.POWEROPS_API_KEY}`,
    "Content-Type": "application/json",
  },
  body: JSON.stringify({ profileId }),
});

const { ws } = await res.json();

// The profile's identity, storage and proxy are already in place.
const browser = await chromium.connectOverCDP(ws);
const [context] = browser.contexts();
const page = context.pages()[0] ?? await context.newPage();

await page.goto("https://example.com");

Dòng quan trọng là dòng chú thích. Trong script của bạn không có cấu hình vân tay trình duyệt nào, vì việc cấu hình môi trường không phải việc của script. Nó thuộc về hồ sơ, và nó giữ nguyên dù hồ sơ được mở bởi một người nhấp vào một hàng hay bởi một tác vụ theo lịch lúc ba giờ sáng.

API bao gồm những gì

Cách giữ nó ở phạm vi cục bộ

Một API điều khiển các trình duyệt đang giữ tài khoản đã đăng nhập xứng đáng được nói rõ về ranh giới của nó.

Một mẫu đáng sao chép

Truy vấn các hồ sơ trong một nhóm, khởi động từng hồ sơ, làm việc, rồi dừng nó. Chạy chúng vài cái một lần thay vì tất cả cùng lúc. Ràng buộc là bộ nhớ trên máy của chính bạn, vì mỗi hồ sơ là một tiến trình trình duyệt thực.

const { profiles } = await api("/profiles?groupId=" + groupId);

for (const batch of chunk(profiles, 5)) {
  await Promise.all(batch.map(async (profile) => {
    const { ws } = await api("/browser/start", { profileId: profile.id });
    try {
      await doTheWork(ws);
    } finally {
      await api("/browser/stop", { profileId: profile.id });
    }
  }));
}

Dừng hồ sơ trong `finally` quan trọng hơn vẻ ngoài của nó: đóng một cách sạch sẽ là điều ghi trạng thái trình duyệt ra, và một hồ sơ bị ngắt đột ngột giữa phiên có thể mất phiên vừa thiết lập.

Tất cả bài viết · Chạy quét

Xem thêm về Tự động hóa

Tự động hóa

Tác nhân AI duyệt web cần một trình duyệt riêng

Giao trình duyệt hằng ngày cho một tác nhân tự động đồng nghĩa với việc trao cho nó cookie, thông tin đăng nhập và thiết bị của bạn. Vì sao tác nhân nên ở trong một hồ sơ cô lập, và cách cấp cho chúng một hồ sơ như vậy.

· 9 phút đọc