Công cụ
Danh mục
Speedtest
Infra Test
Giới thiệu
Tìm công cụ...
⌘K
VI
EN
Tìm công cụ... (WHOIS, DNS, SSL, Ping...)
Tìm kiếm trong danh sách công cụ
Trang chủ
SEO & Website
Tạo Robots.txt
Tạo Robots.txt
Quy tắc User-agent
+ Thêm User-agent
Disallow (chặn, mỗi dòng 1 path)
Allow (cho phép, mỗi dòng 1 path)
Chặn nhanh (áp dụng cho *):
/admin/ — Trang quản trị
/wp-admin/ — WordPress Admin
/wp-includes/ — WordPress Core
/cgi-bin/ — CGI Scripts
/tmp/ — Thư mục tạm
/private/ — Thư mục riêng
/?* — Query strings
/*.php$ — PHP files
URL Sitemap
Crawl-delay (giây, tùy chọn)
Tạo robots.txt →
1
Cách sử dụng Tạo Robots.txt
2
Khi nào cần dùng Tạo Robots.txt
📊
Cần Hosting SEO nhanh?
NVMe Hosting tối ưu tốc độ — giúp website lên top Google
Xem Hosting SEO
3
Thông tin kỹ thuật
Câu hỏi thường gặp
File robots.txt là gì và tại sao nó quan trọng cho SEO?
Robots.txt có ảnh hưởng đến xếp hạng Google không?
Làm thế nào để upload file robots.txt lên website?
Disallow và Allow trong robots.txt khác nhau như thế nào?
Có cần phải tạo robots.txt cho tất cả website không?