◀ חדש! הצטרפו לקבוצה הסגורה שלנו בפייסבוק ושאלו את המומחים להצטרפות >>
קולות
0
352 צפיות

קובץ robots מסנן את כל האתר אך הקובץ ריק

על ידי 120 צפיות
שלום, ניסיתי להבין דרך שאלות קודמות באתר אך לא הצלחתי. כלי המנהלים מודיע לי שקובץ robots מסנן לי 40 דפים, שזה בערך כמעט כל האתר, אבל אני לא מצליחה להבין למה. הדברים שניסיתי:
User-agent: *

Disallow:

וגם:
User-agent: *

allow:

וגם קובץ ריק לחלוטין.
אשמח לעזרה.
כתובת האתר: shavey-shomron.co.il
תודה רבה.

2 Answers

קולות
0
על ידי <סרן> 8.8k צפיות
בדקתי את ה-robots.txt אצלך (http://shavey-shomron.co.il/robots.txt) והוא נראה נכון.

(לרגע שבדקתי התוכן היה:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/)

אופטימיזציה קטנה לקובץ: תוסיף בסוף לינק ל-sitemap.xml בצורה כזאת (כמובן בהתאם למה שיש אצלך):
Sitemap: http://www.maran-be-well.com/sitemap.xml

עוד עצה: תעשה refetch
(Health -> Fetch as Google: robots.txt and the home page. Then, submit to index.)

ותוודא גם שהדומיין שלך "מכוון" נכון.
(Settings -> Preffered domain: Display URL as www.maran-be-well.com)

קח 48 שעות ותעדכן.
בהצלחה :)
קולות
0
על ידי <רב אלוף> 178k צפיות
40 קבצים אינם בהכרח כל האתר.
נראה שאתה מתייחס רק לדפי התוכן קח בחשבון ששישנם גם קבצים רבים נוספים כמו תמונות, סקריפטים וקבצי CSS שלרוב חסומים בתור ברירת מחדל ברוב מערכות התוכן.

במקרה שלך תוכל לראות שישנם תיקיות חסומות שאולי יכילו חלק מהקבצים של מערכת התוכן.
בכדי לראות אילו קבצים חסומים תוכל להיעזר בכלי יחסית חדש בכלי המנהלים של גוגל תחת Google Labs ואז בתפריט יש לך כלי בשם: תצוגה מוקדמת מיידית
בכל דף שתריץ תקבל רשימה של קבצים שנחסמו ע"י ROBOTS.TXT.

4,352 שאלות

7,382 תשובות

9,947 תגובות

2,014 משתמשים

שאלות קשורות

1 תשובה
קולות
0
שאלה נשאלה על ידי 1/01/21 על ידי guy waldman <סגן משנה> 1.0k צפיות
2 תשובות
קולות
0
שאלה נשאלה על ידי 23/04/12 על ידי rotem 120 צפיות
2 תשובות
קולות
+1
שאלה נשאלה על ידי 9/10/11 על ידי zanasurf <סגן> 4.5k צפיות
1 תשובה
קולות
+2
שאלה נשאלה על ידי 20/02/11 על ידי smadar-e <סגן משנה> 1.0k צפיות
...