File Robots.txt trong Website
Đây là 1 file dùng để điều hướng trong Website, nếu không có file này thì Website của bạn sẽ không Index được với Google đồng nghĩa với việc thứ hạng từ khóa website sẽ không xuất hiện khi tìm kiếm.
Thực chất file này chỉ là câu lệnh được nhập vào chương trình soạn thảo văn bản Notepad sau đó được lưu lại với tên robots.txt
Câu lệnh:
User-agent: * Allow: /
Bạn có thể kiểm tra Website của bạn xem đã có file Robots.txt chưa thì làm theo cách sau:
Ví dụ Website của tôi: www.vlc.edu.vn/robots.txt
Sau khi gõ đoạn URL trên và Enter lúc đó sẽ xuất hiện báo cáo như hình bên dưới
Câu lệnh chuẩn File Robots.txt
Nếu kết quả kiểm tra không hiển thị giống như hình mô tả trên thì câu lệnh đang không đúng, cần kiểm tra lại "Người lập trình"
Ví dụ câu lệnh hiển thị ở dạng sau là sai:
User-agent: *
Disallow: /
Nếu câu lệnh như trên thì Website của bạn sẽ không Index được.
Tham khảo thêm các công cụ SEO hữu ích
