קובץ Robots.txt
קובץ robots.txt הוא קובץ היושב בתיקייה הראשית של האתר ונועד להנחות את מנועי החיפוש אילו אזורים באתר יש לסרוק ולאנדקס ואילו לא.
השימוש העיקרי בקובץ רובוטס הוא חסימת חלקים באתר שלא רוצים שמנועי החיפוש יגיעו אליהם. אחד השימושים הנפוצים בקובץ robots.txt הוא חסימה של אתר הנמצא בהקמה. כשהאתר מוכן, חשוב לזכור לשחרר את החסימה על מנת שמנועי החיפוש ימשיכו לסרוק אותו
מונחים נוספים
סיפורי הצלחה
פורטל Onlife
גידול שנתי של יותר מ-100 אחוז בתנועה האורגנית לפורטל בשנת 2012 לעומת 2011.
פורטל Onlife - סיפור הצלחה >
שטראוס מים
צמיחה דו ספרתית בכל שנה (בשנתיים האחרונות 2013 מול 2012 מול 2011) בהיקפי הפעילות באספקטים המכירתיים, וצמיחה חדה בהיקפי השימוש באתר
שטראוס מים - סיפור הצלחה >
