feat: 更新 robots.txt、base.tsx 和 sitemap.xml，增強 SEO 設定與多語言支援

2026-01-25 15:03:57 +08:00 · 2026-01-25 15:03:57 +08:00 · d38505f6fa
commit d38505f6fa
parent 906f112999
4 changed files with 80 additions and 4 deletions
--- a/public/robots.txt
+++ b/public/robots.txt
@ -1,2 +1,14 @@
+# ConvertX-CN robots.txt
+# 允許所有搜尋引擎爬蟲抓取網站內容
+
 User-agent: *
-Disallow: /
+Allow: /
+
+# 禁止抓取的路徑（API 端點與內部資源）
+Disallow: /api/
+Disallow: /data/
+Disallow: /uploads/
+Disallow: /output/
+
+# Sitemap 位置
+Sitemap: https://convertx-cn.bioailab.qzz.io/sitemap.xml