مولد Robots.txt
أنشئ ملف robots.txt صحيحًا في ثوانٍ. اختر ما يمكن لمحركات البحث زحفه، واحظر مجلدات مثل /admin/، وأضف خريطة موقعك، وحدد تأخير الزحف، واحظر زواحف تدريب الذكاء الاصطناعي إن أردت. نزّله جاهزًا للرفع.
robots.txt
طريقة استخدام مولد Robots.txt
- اختر ما إذا كان يمكن للزواحف زيارة الموقع كله.
- اكتب المجلدات أو الصفحات المراد حظرها وعنوان خريطة الموقع.
- نزّل robots.txt وارفعه إلى المجلد الرئيسي لموقعك.
بياناتك تبقى على جهازك. تعمل هذه الأداة بالكامل في متصفحك. لا يُرسل ما تكتبه أو تلصقه إلى خادمنا ولا يُحفظ. اقرأ سياسة الخصوصية.
الأسئلة الشائعة
أين يوضع robots.txt؟
في المجلد الرئيسي لموقعك، ليُفتح على example.com/robots.txt. في InfinityFree ومعظم الاستضافات هو مجلد htdocs أو public_html.
هل يخفي robots.txt الصفحات عن Google؟
ليس تمامًا. فهو يطلب من الزواحف عدم زيارة الصفحات، لكن الصفحة المحظورة قد تظهر في النتائج إن ربطت بها مواقع أخرى. لإبقاء صفحة خارج نتائج البحث، استخدم وسم الميتا noindex.
هل أحظر زواحف الذكاء الاصطناعي؟
القرار لك. حظر زواحف مثل GPTBot وCCBot يطلب من شركات الذكاء الاصطناعي عدم استخدام صفحاتك في التدريب. ولا يؤثر على نتائج بحث Google أو Bing.