robots.txt có tác dụng hướng dẫn robot (bọ tìm kiếm của công cụ tìm kiếm) làm thế nào để thu thập dữ liệu và index các pages trên trang web.Bạn có thể dùng file robots.txt để cho phép hoặc ngăn cản robot thu thập dữ liệu trên website.
Đề xuất file robots.txt chuẩn cho mã nguồn Opencart:
User-agent: *
Disallow: /cgi-bin/
Disallow: /admin/
Disallow: /download/
Disallow: /system/
Disallow: /vqmod/
Disallow: /*&limit
Disallow: /*&sort
Disallow: /*?route=checkout/
Disallow: /*?route=account/
Disallow: /*?route=product/search
Disallow: /*?route=affiliate/
Sitemap: http://domain-của-bạn/index.php?route=feed/google_sitemap
