Chuyển công việc crawl qua máy khác
Chúng ta có thể bắt đầu crawl ở 1 máy tính có sẵn, dùng chung với hệ thống khác: laptop, dev, web, AI, ... Nhưng do nhu cầu mở rộng, chuyên nghiệp. Hoặc đơn giản việc crawl thiếu ổn định cũng như gây mất ổn định cho hệ thống khác mà nó đang "ở ké" nên chúng ta cần chuyển nó ra ở riêng.
Một số nguyên tắc:
- Chưa xóa dữ liệu đích nhé. Chỉ xóa khi bạn đã chắc chắn live tất cả công việc trên Crawl-Server
Bước 1. Cài đặt máy chủ Crawl
- Tham khảo bài viết:
Bước 2. Dừng crawl lại
Gồm cả lệnh thủ công hay tự động qua cron
