❖
PD Tools
🤖

Trình Tạo File Robots.txt, Kiểm Soát AI Bot & Thẩm Định Đường Dẫn Pro

Chuẩn RFC 9309, khiên chặn cào dữ liệu AI, kiểm thử URL trực quan 100% Client-Side

🛡️
Lá Chắn AI Bot (AI Crawler Shield) Bảo vệ bản quyền

Tự động chặn GPTBot, ClaudeBot, CCBot, Google-Extended thu thập dữ liệu (Không ảnh hưởng đến SEO Google)

Không có đường dẫn nào bị cấm (Cho phép toàn bộ)
Chưa có ngoại lệ nào được thêm
Độ trễ cào dữ liệu (Crawl-delay cho Bing/Yandex)
Kiểm Thử Đường Dẫn Ảo (Path Tester)
RFC 9309 Engine
Nội Dung File robots.txt UTF-8 / RFC 9309
💡 Vị trí tải file lên:

https://yourdomain.com/robots.txt

Đặt file tại thư mục gốc (public hoặc root) của máy chủ hosting.

Bảo Mật Cấp Doanh Nghiệp Trên Trình Duyệt 100% Trình Duyệt

Không thu thập dữ liệu, không lưu trữ đám mây. Mã nguồn, mật khẩu và tài liệu của bạn được bảo vệ 100% tại máy khách.

✓ Cách Tạo File Robots.txt Chuẩn SEO Trong 3 Bước Nhanh Gọn

1 Bước 1

Chọn Mẫu Nền Tảng Hoặc Bật Khiên AI

Chọn cấu hình sẵn cho WordPress, Shopify, Astro và bật Lá Chắn AI Bot để chặn bot cào trộm nội dung.

2 Bước 2

Tùy Chỉnh Thư Mục Cấm & Sitemap

Thêm thư mục Disallow, ngoại lệ Allow và điền đường dẫn sitemap.xml của trang web.

3 Bước 3

Kiểm Thử Đường Dẫn Ảo & Tải File

Nhập thử URL vào ô Path Tester để kiểm tra trạng thái Xanh/Đỏ, rồi bấm Tải robots.txt về máy.

? Câu Hỏi Thường Gặp (FAQ)

Q1 Chặn Google-Extended có làm website của tôi bị tụt hạng trên Google Search không?
Hoàn toàn không. Google-Extended là token độc lập chỉ dùng cho việc huấn luyện AI Gemini, hoàn toàn tách biệt với Googlebot của Google Search.
Q2 File robots.txt có ngăn được người dùng bình thường truy cập vào trang quản trị không?
Không. robots.txt chỉ là hướng dẫn lịch sự cho bot tìm kiếm. Bạn phải cài mật khẩu hoặc phân quyền máy chủ để bảo vệ trang riêng tư.
Q3 Tại sao tôi đã cấm đường dẫn trong robots.txt mà URL đó vẫn xuất hiện trên Google?
Do có liên kết ngoài trỏ về. Nếu muốn trang biến mất hoàn toàn khỏi Google, hãy dùng thẻ meta name="robots" content="noindex".
Q4 File robots.txt phải đặt ở vị trí nào trên hosting/máy chủ?
Bắt buộc đặt tại thư mục gốc cao nhất của website: https://yourdomain.com/robots.txt.
Q5 Giữa lệnh Allow: và Disallow:, lệnh nào được ưu tiên áp dụng theo chuẩn RFC 9309?
Theo chuẩn RFC 9309, lệnh nào có độ dài chuỗi ký tự khớp dài hơn (longest match) sẽ được ưu tiên áp dụng.
Hệ Sinh Thái

Công Cụ Dành Cho Lập Trình Viên

Xem trọn bộ danh mục →

100% Miễn phí · Dữ liệu luôn nằm trên thiết bị của bạn

Chuẩn BigInt

Định Dạng JSON & Sinh Kiểu

Bảo toàn số 64-bit BigInt, 1-click sửa lỗi dấu phẩy & sinh kiểu TypeScript/Go tức thì.

Mở công cụ →
Chuẩn Patch

So Sánh JSON Ngữ Nghĩa

Bỏ qua thứ tự khóa A-Z, lọc bỏ trường tự sinh (timestamp/id) & xuất chuẩn RFC 6902.

Mở công cụ →
Tự Sửa Lỗi

Kiểm Tra Cú Pháp JSON

Bắt lỗi chính xác từng dòng cột, nút tự động sửa lỗi 1-chạm & xác thực JSON Schema.

Mở công cụ →
Chuẩn UTF-8

Mã Hóa Base64 Toàn Năng

Bảo toàn UTF-8 tiếng Việt, chuẩn Base64URL, chuyển File sang Data URI & nhận diện Magic Bytes.

Mở công cụ →

🎲 Khám Phá Công Cụ Ngẫu Nhiên

Đề xuất tiện ích ngẫu nhiên trong hệ sinh thái 180+ công cụ bảo mật

Tất cả công cụ →
developer
Kiểm Thử Biểu Thức Regex

Tô màu đa sắc nhóm bắt $1-$2, giải thích cú pháp tiếng Việt, chống treo ReDoS & sinh code 5 ngôn ngữ.

Khám phá ngay →
math
Tính Tiền Xăng & Chi Phí Xe

Tính lượng xăng xe tiêu thụ, phí cầu đường cao tốc BOT, chi phí hành trình khứ hồi và chia đều tiền nhóm bạn.

Khám phá ngay →
math
Tính Lãi Vay Ngân Hàng & Lịch Trả Nợ Amortization

Tính lãi vay mua nhà, mua xe chuyên nghiệp: dư nợ giảm dần, niên kim cố định EMI, mô phỏng lãi thả nổi và xuất lịch trả nợ Excel/CSV.

Khám phá ngay →
random
Vòng Quay May Mắn Trực Tuyến Canvas 60FPS

Bánh xe vòng quay may mắn online: đồ họa Canvas 60FPS, âm thanh kim chỉ chân thực, mẫu quà tặng phong phú và pháo hoa rực rỡ 100% Client-Side.

Khám phá ngay →