|
|
 21 בינואר, 2007 תגובות (3)תפוז לא מכבד את robots.txt חיפוש במנוע של תפוז (שכבר נטשתי, אבל זה סיפור אחר) הציג לי תוצאות מתוך אתר שתיל (שאותו אני מנהל) שלא היו אמורות להופיע. מדובר במודעות דרושים וחיפוש עבודה עם פרטים אישיים של אנשים שלא ראוי שיגיעו ויוצגו במנועי החיפוש. כדי להגביל את הופעת המודעות במנועי החיפוש יצרתי את הקובץ robots.txt שעל פיו אמורים מנועי החיפוש להימנע מאינדוקס תכנים מסויימים באתר. גוגל ויהאו מכבדים את ההנחיות בקובץ. הרובוט של תפוז לא כיבד את ההנחיות בקובץ ואינדקס את המודעות. חלק מהמודעות זמינות לצפיה בגרסת המטמון וזה מאד מכעיס אותי. בבקשה לתקן. מהר. תודה.  
|
אודות האתר About hanan@info.org.il נייד: 0506.234863 RSS קבלת עדכונים באימיילחוק ההסדרים - איזכורים בבלוגים ובעיתונות |
פועל על וורדפרס בעברית העיצוב מבוסס בחלקו על Arcsin והתאמה לעברית על ידי רן יניב הרטשטיין.
