האם קובץ העונה לשם robots.txt.dist ראוי לשבת בשרת עם האתר שאני מקדם יום וליל? או שהוא יגרום רק נזק? לא יודע מה הוא מכיל
עשיתי עדכון גרסה לאתר
http://homecomp.co.il/
בג'ומלה ל2.5.14 והוא בא עם הקובץ הזה ובפורומים בחול אומרים שהוא תורם ויותר טוב לקידום בגוגל אבל אני סקפטי
User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/