Check proxy sống chết hàng loạt: từ công cụ web đến script tự động

Thế nào là proxy sống

Một proxy chỉ thật sự sống khi vượt qua đủ bốn điều kiện: kết nối được tới IP và port, xác thực user và mật khẩu thành công, mở được trang HTTPS qua đường hầm, và IP mà website thấy chính là IP proxy. Nhiều công cụ chỉ kiểm tra port có mở không, nên báo sống cho cả proxy sai mật khẩu.

Vì vậy hãy kiểm tra bằng một trang trả về IP qua HTTPS, và so sánh IP trả về với IP trong danh sách. Cách check một proxy đơn lẻ chi tiết có trong bài cách kiểm tra proxy; bài này tập trung vào kiểm tra hàng loạt.

Cách 1: công cụ check proxy trên web

Nhanh nhất cho người không dùng dòng lệnh. Dán danh sách theo định dạng ip:port:user:pass vào công cụ check proxy, mỗi dòng một proxy. Nếu danh sách của bạn đang ở định dạng khác như user:pass@ip:port, đổi trước bằng công cụ chuyển định dạng proxy.

Hạn chế của cách này là kết quả đo từ máy chủ của công cụ, không phải từ máy bạn. Proxy sống trên công cụ nhưng chết trên máy bạn thường là do mạng hoặc tường lửa phía bạn.

Cách 2: vòng lặp curl trên Linux hoặc macOS

Lưu danh sách vào file proxies.txt, mỗi dòng ip:port:user:pass, rồi chạy:

while IFS=: read ip port user pass; do r=$(curl -s -m 10 -x "http://$user:$pass@$ip:$port" https://api.ipify.org || echo FAIL); echo "$ip:$port -> $r"; done < proxies.txt

Mỗi dòng kết quả cho biết proxy và IP trả về. Nếu IP trả về trùng IP proxy, proxy sống. Nếu là FAIL, proxy không phản hồi trong 10 giây hoặc bị từ chối. Cách này chạy tuần tự nên chậm với danh sách dài, nhưng không cần cài gì thêm. Trên Windows, chạy trong WSL hoặc Git Bash.

Cách 3: script Python chạy song song

Với hàng trăm proxy, chạy song song giúp rút thời gian từ vài chục phút xuống còn vài phút. Ý tưởng của script gồm các bước sau, dùng thư viện requests và concurrent.futures có sẵn:

• Đọc file, tách mỗi dòng thành ip, port, user, pw = line.strip().split(":").
• Tạo URL proxy p = f"http://{user}:{pw}@{ip}:{port}" và gọi requests.get("https://api.ipify.org", proxies={"http": p, "https": p}, timeout=10).
• Ghi lại thời gian phản hồi, IP trả về, và bắt riêng các loại lỗi: ProxyError, ConnectTimeout, ReadTimeout, mã 407.
• Chạy bằng ThreadPoolExecutor(max_workers=20); không cần đặt quá cao, vì mục tiêu là kiểm tra chứ không phải tạo tải.
• Xuất kết quả ra CSV với các cột proxy, trạng thái, IP trả về, thời gian phản hồi để lọc và so sánh.

Kiểm tra định kỳ cho danh sách đang dùng

Nếu bạn chạy tool hoặc quản lý nhiều tài khoản, kiểm tra mỗi ngày một lần hoặc trước mỗi đợt chạy lớn là đủ. Đừng kiểm tra quá dày, vì gửi liên tục yêu cầu tới cùng một trang kiểm tra IP cũng là lưu lượng không cần thiết. Lưu lịch sử kết quả để phân biệt proxy chết hẳn với proxy chỉ chập chờn trong một lần đo. Cách tổ chức danh sách lớn, loại bỏ và thay thế IP có trong bài quản lý pool proxy.

Thấy proxy chết thì làm gì

• Kiểm tra lại từ mạng khác trước khi kết luận. Một lần timeout chưa đủ để gọi là chết.
• Xem hạn sử dụng trên dashboard. Proxy hết hạn sẽ ngừng hoạt động; gia hạn trước khi hết hạn để giữ nguyên IP.
• Kiểm tra lỗi 407 riêng: đây là lỗi thông tin xác thực, không phải proxy chết. Xem lỗi 407.
• Gửi ticket kèm danh sách IP lỗi, loại lỗi và thời điểm kiểm tra nếu proxy còn hạn mà vẫn không hoạt động. Lỗi kỹ thuật được xử lý theo chính sách hoàn tiền.

Câu hỏi thường gặp