Thêm File Robots.txt Vào Blog

Thêm File Robots.txt vào Blog rất đơn giản, mục đích sử dụng File Robots.txt là để quản lý lưu lượng thu thập dữ liệu của Google tác động tới Blog của bạn, giúp Blog có thể SEO tốt hơn.

 

Cách Thêm File Robots.txt Cho Web

User-agent: *
Disallow: /wp-admin/
Disallow: /readme.html
Disallow: /license.txt
Disallow: /?s=*
Allow: /wp-admin/admin-ajax.php
Allow: /wp-admin/images/*
Sitemap: https://taomaytinh.com/sitemap_index.xml

Lưu ý ở chỗ Sitemap, các bạn nhớ thay https://taomaytinh.com thành địa chỉ website của các bạn.

 

Một Vài Nguyên Tắc Về File robots.txt

  1. Bắt buộc phải đặt tên File là robots.txt
  2. Blog của bạn chỉ có thể có duy nhất một File robots.txt (đây là lý do tại sao mình chọn Overwrite existing files ở bước 4 -> Mục đích là để ghi đè lên File robots.txt cũ khi thêm File Robots.txt vào Blog)
  3. Một cú pháp đầy đủ của File robots.txt bao gồm các phần tử: (các bạn có thể tham khảo cách thêm tại đây)
    • user-agent
    • disallow
    • allow
    • sitemap
  4. Khi thêm File robots.txt cho web thì File buộc phải nằm ở thư mục gốc của máy chủ tương ứng với web của bạn. (đây là lý do tại sao ở bước 3 mình phải đăng nhập vào trang azdigi.com để vào trang Quản lý File website taomaytinh.com)

 

Hướng Dẫn Thêm File Robots.txt Vào Blog

Trả lời

Email của bạn sẽ không được hiển thị công khai. Các trường bắt buộc được đánh dấu *