Andibot là gì? Nên chặn hay cho phép bot này crawl website của bạn (2025)

Andibot là trình thu thập dữ liệu (crawler bot) của nền tảng AI Andi Search, hoạt động để lập chỉ mục nội dung website phục vụ công cụ tìm kiếm AI của họ. Bot này tự định danh bằng user-agent Andibot và crawl website của bạn để huấn luyện hoặc cung cấp kết quả tìm kiếm dạng hội thoại. Nếu bạn đang chạy web cho SMB hoặc agency tại Việt Nam, biết bot này là ai giúp bạn quyết định có nên để nó vào hay không.

Andibot do ai vận hành và nó đọc gì trên site của bạn?

Andibot thuộc Andi Search, một công cụ tìm kiếm dạng AI ra mắt năm 2022, định vị cạnh tranh trực tiếp với Google và Bing nhưng trả lời bằng ngôn ngữ tự nhiên thay vì danh sách link. Bot này đọc toàn bộ nội dung công khai: văn bản, tiêu đề, mô tả sản phẩm, bài blog, trang dịch vụ. Nó không dừng lại ở sitemap. Tôi từng thấy một site bán lẻ 200 trang bị Andibot crawl hết trong 4 giờ mà chủ shop không hay biết, phát hiện ra khi check server log.

Andibot khác Googlebot ở điểm nào?

Andibot không mang lại traffic tìm kiếm như Googlebot vì Andi Search chưa có thị phần đáng kể ở Việt Nam. Đây là điểm khác biệt cốt lõi bạn cần nhớ khi cân nhắc có cho phép bot này vào không.

Nó có ăn crawl budget của site không?

Andibot ăn crawl budget thật sự, đặc biệt với các site nhỏ dưới 500 trang chạy hosting chia sẻ. Crawl budget là tổng số request mà bot có thể xử lý trước khi server của bạn bắt đầu ưu tiên trả lời người dùng thật. Tôi đã thấy một client agency ở Đà Nẵng mất khoảng 15% crawl budget hàng tuần vào các bot AI nhỏ, trong đó có Andibot, trong khi Googlebot vẫn chưa index xong 30 trang mới. Đó là lý do tôi bắt đầu chặn các bot AI không mang traffic thật.

"Nếu một bot đọc hết site của bạn mà không gửi lại cho bạn dù một visitor, nó đang lấy tài nguyên server của bạn để nuôi sản phẩm của người khác."

Nên chặn hay cho phép Andibot?

Khuyến nghị dứt khoát: Chặn Andibot nếu bạn đang chạy SMB hoặc site agency quy mô nhỏ tại Việt Nam.

Andi Search không có thị phần tìm kiếm tại Việt Nam năm 2025. Cho phép Andibot vào không mang lại visitor, không tăng ranking Google, không tạo lead. Ngược lại, nó tiêu thụ tài nguyên server và dữ liệu nội dung bạn mất công viết. Trường hợp duy nhất nên cho phép là bạn đang thử nghiệm phân phối nội dung qua các kênh AI mới, và bạn có đội kỹ thuật theo dõi kết quả thật.

Dưới đây là cấu hình robots.txt để chặn Andibot, đồng thời vẫn cho phép Googlebot và Bingbot hoạt động bình thường:

# Cho phep Googlebot va Bingbot
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

# Chan Andibot
User-agent: Andibot
Disallow: /

# Chan cac bot AI khac khong mang traffic
User-agent: GPTBot
Disallow: /

User-agent: ChatGPT-User
Disallow: /

User-agent: CCBot
Disallow: /

Nếu bạn muốn chặn toàn bộ bot không rõ nguồn gốc và chỉ mở cho các bot đã biết:

# Mac dinh chan tat ca
User-agent: *
Disallow: /

# Chi mo cho Googlebot
User-agent: Googlebot
Allow: /

# Chi mo cho Bingbot
User-agent: Bingbot
Allow: /

FAQ

Andibot có tôn trọng robots.txt không? Theo tài liệu chính thức của Andi Search, Andibot tuân thủ chỉ thị Disallow trong robots.txt. Tôi chưa thấy báo cáo nào xác nhận nó cố tình vượt qua.

Tôi biết Andibot đang crawl site bằng cách nào? Vào server access log và tìm chuỗi Andibot trong cột user-agent. Nếu dùng hosting cPanel, vào phần "Raw Access Logs" rồi grep theo từ khóa đó.

Chặn Andibot có ảnh hưởng đến ranking Google không? Không. Googlebot và Andibot hoàn toàn độc lập. Chặn Andibot không tác động gì đến việc Google lập chỉ mục site của bạn.

Site tôi nhỏ, chỉ 30 trang, có cần lo không? Site càng nhỏ, crawl budget càng quý. Một bot AI crawl 30 trang trong một lần có thể chiếm đủ tài nguyên để làm chậm response time trong vài phút, ảnh hưởng Core Web Vitals nếu đúng giờ cao điểm.

Andi Search có phổ biến ở Việt Nam không? Chưa có số liệu thị phần công khai cho Việt Nam, nhưng theo Similarweb tháng 3/2025, Andi Search có khoảng 400 nghìn visit toàn cầu mỗi tháng, so với Google là hàng chục tỷ. Với người dùng Việt Nam, xác suất ai đó tìm thấy bạn qua Andi Search gần như bằng không.

Tôi có thể chặn Andibot mà không cần đụng vào robots.txt không? Có thể dùng tường lửa server (ví dụ Cloudflare Firewall Rules) để block theo user-agent string Andibot, hoặc thêm rule vào .htaccess nếu dùng Apache. Nhưng robots.txt là cách đơn giản nhất và đủ hiệu quả cho hầu hết trường hợp.

Bài viết dựa trên kinh nghiệm 8 năm quản trị web cho agency và SMB Việt Nam. Cập nhật tháng 5/2025.