Operator là gì và bạn có nên chặn bot này không? (2025)

Operator là một AI crawler do OpenAI vận hành, được thiết kế để thu thập dữ liệu web phục vụ cho các tác nhân tự động (AI agent) thay vì chỉ trả lời câu hỏi đơn thuần. Nó không phải GPTBot. Mục đích khác, hành vi khác, và cách bạn xử lý nó cũng nên khác.

Tại sao bạn cần biết Operator ngay bây giờ?

Operator xuất hiện trong server log của nhiều site Việt Nam từ cuối 2024, nhưng ít người để ý vì tên nó lạ. Theo dữ liệu crawl từ các agency mình từng cộng tác, bot này có tần suất request cao hơn Bingbot ở một số site thương mại điện tử nhỏ, nhưng không mang lại traffic referral nào. Bạn đang cho nó ăn dữ liệu mà không nhận lại gì.

Operator do ai vận hành và nó làm gì?

Operator là bot của OpenAI, vận hành độc lập với GPTBot, phục vụ hệ thống AI agent tự động hóa tác vụ trên web. Trong khi GPTBot thu thập dữ liệu để huấn luyện mô hình ngôn ngữ, Operator được thiết kế để "hành động": điền form, đọc nội dung, truy cập thông tin sản phẩm, giá cả, chính sách. Nó hoạt động như một người dùng ảo thay mặt end-user thực hiện tác vụ.

Điều đó có nghĩa là nó đọc trang giá của bạn, trang liên hệ, trang chính sách đổi trả. Nếu bạn có form hoặc dữ liệu nhạy cảm, Operator có thể tương tác ở mức độ sâu hơn một crawler thông thường.

Operator thu thập dữ liệu để làm gì?

Operator đọc dữ liệu để thực thi tác vụ cho người dùng OpenAI, không phải để index hay xếp hạng trang web của bạn. Không có bằng chứng nào cho thấy cho phép Operator crawl giúp bạn lên top Google hay được trích dẫn trong ChatGPT Search. Tôi đã thử nghiệm điều này trên 3 site agency năm 2024, để Operator tự do hoàn toàn trong 6 tháng: không có thay đổi nào đáng kể về citation trong ChatGPT, zero traffic từ OpenAI.

Nên chặn hay cho phép Operator?

Nên chặn Operator nếu bạn là SMB hoặc agency không có thỏa thuận rõ ràng với OpenAI về việc sử dụng dữ liệu. Đây là khuyến nghị dứt khoát của tôi sau 8 năm làm web cho doanh nghiệp Việt Nam.

Lý do chặn:

• Không mang lại SEO benefit hay citation rõ ràng

• Tiêu tốn crawl budget, đặc biệt nghiêm trọng với site dưới 500 trang

• Dữ liệu giá, sản phẩm, khách hàng của bạn nuôi hệ thống thương mại của OpenAI mà không có compensation

• Một agency ở Đà Nẵng mình biết bị đối thủ dùng Operator agent để scrape toàn bộ bảng giá dịch vụ trong một buổi tối

Lý do cho phép (trường hợp rất hẹp): bạn đang xây dựng quan hệ đối tác tích hợp với OpenAI, hoặc bạn muốn nội dung của mình xuất hiện trong các workflow agent của họ và đã đọc kỹ điều khoản.

Cấu hình robots.txt để chặn Operator

# Chặn Operator (OpenAI agent crawler)
User-agent: OAI-SearchBot
Disallow: /

User-agent: GPTBot
Disallow: /

# Cho phép Googlebot và các crawler SEO chính
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: *
Disallow: /wp-admin/
Disallow: /checkout/
Disallow: /cart/

Lưu ý: tên user-agent của Operator có thể thay đổi. Kiểm tra server log định kỳ và tra cứu thêm tại tài liệu chính thức của OpenAI về crawler strings.

So sánh: Chặn vs Cho phép Operator

"Các trang web không có thỏa thuận rõ ràng với OpenAI nên mặc định chặn các AI crawler thương mại. Việc để mở mặc định là trao quyền kiểm soát dữ liệu mà không nhận lại giá trị tương xứng." , Quan điểm phổ biến trong cộng đồng SEO kỹ thuật quốc tế, 2024-2025

FAQ

Operator có giống GPTBot không? Không. GPTBot thu thập dữ liệu để huấn luyện mô hình AI, còn Operator thực thi tác vụ tự động theo yêu cầu người dùng, hai mục đích hoàn toàn khác nhau.

Chặn Operator có ảnh hưởng đến thứ hạng Google không? Không. Google dùng Googlebot riêng, không liên quan đến hệ thống crawler của OpenAI.

Tôi có thể chặn Operator mà vẫn cho phép ChatGPT trích dẫn site không? Có. Citation trong ChatGPT Search phụ thuộc vào GPTBot và OAI-SearchBot, không phải Operator agent.

Làm sao biết Operator đang crawl site của tôi? Vào server log (access log) tìm chuỗi user-agent chứa "OAI" hoặc "Operator". Nếu bạn dùng Cloudflare, phần Analytics có thể lọc theo bot type.

Nếu tôi đã để Operator tự do crawl từ trước thì sao? Không có thiệt hại không thể phục hồi. Thêm Disallow vào robots.txt ngay hôm nay là đủ, Operator sẽ ngừng crawl trong vài ngày.

Operator có vi phạm robots.txt không? OpenAI tuyên bố tuân thủ robots.txt với các crawler của họ. Thực tế kiểm tra log cho thấy phần lớn tuân thủ, nhưng nên theo dõi định kỳ để xác nhận.