Cách Dùng Proxy Trong Puppeteer: Code Mẫu Chuẩn Và Chiến Lược Tăng Tỷ Lệ Scraping Thành Công 2026

1. Cấu hình Proxy tĩnh cơ bản qua tham số --proxy-server

Puppeteer cho phép cấu hình Proxy thông qua mảng args khi khởi tạo trình duyệt. Theo tài liệu từ MDN Web Docs, việc sử dụng Proxy giúp ẩn danh địa chỉ IP nguồn hiệu quả:

const puppeteer = require('puppeteer');

(async () => {
  const browser = await puppeteer.launch({
    args: ['--proxy-server=http://proxy-ip:port']
  });
  const page = await browser.newPage();
  // Kiểm tra IP thực tế sau khi gán
  await page.goto('https://api.ipify.org?format=json');
  const response = await page.evaluate(() => document.body.innerText);
  console.log('IP hiện tại:', JSON.parse(response).ip);
  await browser.close();
})();

2. Xử lý Proxy Authentication chuyên nghiệp trong Node.js

Khi sử dụng các dòng Proxy cao cấp yêu cầu xác thực, bạn bắt buộc phải sử dụng hàm page.authenticate(). Lưu ý: Hàm này cần được thực thi ngay sau khi khởi tạo newPage() để áp dụng cho mọi yêu cầu mạng tiếp theo.

await page.authenticate({
  username: '1ip_user',
  password: '1ip_password'
});

3. Rotating Proxy Puppeteer: Chiến lược xoay IP tầng mạng

Để đạt hiệu suất cao nhất, kỹ sư nên sử dụng Endpoint của Proxy xoay dân cư. Thay vì can thiệp phức tạp vào code, hệ thống 1IP.VN sẽ điều phối IP mới ở cấp độ Server cho mỗi Port, giúp phiên làm việc của Puppeteer luôn duy trì được độ tàng hình mà không cần khởi động lại trình duyệt.

4. Code mẫu Retry Logic: Tự động thử lại khi Proxy lỗi hoặc bị chặn

Sử dụng cơ chế Retry giúp hệ thống vượt qua các lỗi mạng nhất thời hoặc khi Proxy IP bị Rate Limit. Dưới đây là kiến trúc mã nguồn an toàn:

async function fetchWithRetry(url, maxRetries = 3) {
  for (let i = 0; i < maxRetries; i++) {
    try {
      await page.goto(url, { waitUntil: 'networkidle2', timeout: 30000 });
      return; // Thành công thì thoát
    } catch (error) {
      console.log(`Lần thử ${i + 1} thất bại. Đang thử lại...`);
      if (i === maxRetries - 1) throw error;
      await new Promise(r => setTimeout(r, 2000 * (i + 1))); // Exponential backoff
    }
  }
}

5. Ma trận lựa chọn loại Proxy tối ưu cho dự án Puppeteer

6. FAQ - Khắc phục lỗi DNS Leak và Authentication trong Puppeteer