פרומפט: הכנה ל-Pre-Render
פרומפט 4 – הכנת האתר ל־Pre-Render ולסריקה מלאה של מנועי חיפוש
הכן את האתר כך שגרסת ה־Pre-Render תכלול את כל התוכן המשמעותי של כל עמוד. ודא שכל הטקסט החשוב מופיע כבר ב־DOM הראשוני, שאזורים נפתחים כמו אקורדיונים, טאבים או “קרא עוד” מוצגים במלואם עבור גרסת הסריקה, ושאין תוכן קריטי שתלוי בפעולת משתמש כדי להופיע. הפלט הסופי חייב להיות HTML תקני, שלם ובעל היררכיה ברורה של תוכן וכותרות. המטרה היא להגיש למנועי חיפוש עמוד שנראה ונקרא כאילו נבנה ב־SSR.
כאשר השכבות הקודמות קיימות –
ה-Pre-Render הופך לכלי הגשה, לא לפתרון קסם.
קובץ robots.txt
קובץ robots.txt - הקובץ הראשון שמנועי חיפוש קוראים באתר שלכם
פרומפט 5 - יצירת קובץ robots.txt מנוהל דרך ה־CMS
צור קובץ robots.txt שיהיה זמין בכתובת /robots.txt וניתן לעריכה מלאה דרך ה־CMS. הקובץ צריך לאפשר שליטה על הנחיות הסריקה למנועי חיפוש, כולל אפשרות לחסום או לאפשר נתיבים מסוימים באתר. ה־robots.txt חייב לכלול הפניה למפת האתר בכתובת /sitemap.xml, וכל שינוי שמתבצע דרך ה־CMS צריך להתעדכן מיידית בקובץ עצמו ללא צורך בהתערבות בקוד. הקובץ צריך להיות בפורמט תקני, קריא וברור למנועי חיפוש.
המטרה: שליטה מלאה בהתנהגות הסריקה של מנועי חיפוש דרך ממשק ניהול, בדיוק כמו במערכות תוכן בשלות.
מפת אתר
מפת אתר - חשובה ביותר, הקובץ השני (אחרי רובוטס) אותו מנוע החיפוש סורק.
פרומפט 6: יצירת מפת אתר XML דינמית ונגישה
בנה מפת אתר XML דינמית שתהיה זמינה בכתובת /sitemap.xml. מפת האתר צריכה להיווצר אוטומטית על בסיס העמודים הקיימים ב־CMS ולהתעדכן בכל שינוי, הוספה או הסרה של עמוד. כל כתובת URL שמוגדרת כעמוד פעיל ב־CMS חייבת להיכלל במפת האתר, ורק כתובות שאמורות להיות מאונדקסות יוצגו בה. מפת האתר צריכה להיות בפורמט XML תקני, קריא למנועי חיפוש, ולשקף בצורה מדויקת את מבנה העמודים באתר כפי שמוגדר ב־CMS.
המטרה: לאפשר למנועי חיפוש לגלות, לסרוק ולהבין את כל העמודים הרלוונטיים באתר בצורה מסודרת ומבוקרת.