תוֹכֶן
- הגדרה - מה המשמעות של עכביש?
- מבוא ל- Microsoft Azure ו- Microsoft Cloud | במהלך מדריך זה תוכלו ללמוד על אודות מיחשוב ענן וכיצד Microsoft Azure יכולה לעזור לכם להעביר ולנהל את העסק שלכם מהענן.
- Techopedia מסביר את ספיידר
הגדרה - מה המשמעות של עכביש?
במצבו של האינטרנט, עכביש הוא תוכנה מיוחדת המיועדת לסרוק באופן שיטתי ולעיין ברשת האינטרנט בדרך כלל לצורך אינדקס דפי אינטרנט על מנת לספק אותם כתוצאות חיפוש עבור שאילתות חיפוש משתמשים. המפורסם מבין עכבישים כאלה הוא הסורק הראשי של Googlebot, המסייע להבטיח כי תוצאות רלוונטיות יוחזרו לשאילתות חיפוש.
עכבישים ידועים גם כסורקי רשת, בוטים לחיפוש או פשוט בוטים.
מבוא ל- Microsoft Azure ו- Microsoft Cloud | במהלך מדריך זה תוכלו ללמוד על אודות מיחשוב ענן וכיצד Microsoft Azure יכולה לעזור לכם להעביר ולנהל את העסק שלכם מהענן.
Techopedia מסביר את ספיידר
עכביש הוא למעשה תוכנית המשמשת לקטיף מידע מהאינטרנט. זה זוחל בין דפי אתרים המוציא מידע ומוסיף אותו לאינדקס לשימוש מאוחר יותר, בדרך כלל לתוצאות של מנועי חיפוש. העכביש מבקר באתרים ובדפים שלהם דרך הקישורים השונים אל הדפים וממנה, כך שדף ללא קישור בודד שיגיע אליו יהיה קשה לאינדקס ועשוי להיות מדורג ממש נמוך בדף תוצאות החיפוש. ואם יש הרבה קישורים שמפנים לדף, פירוש הדבר שהדף פופולרי והוא יופיע למעלה בתוצאות החיפוש.
שלבים המעורבים בסריקת רשת:
- העכביש מוצא אתר ומתחיל לסרוק את דפיו.
- העכביש באינדקס של מילות האתר ותכניו.
- העכביש מבקר בקישורים שנמצאים באתר.
עכבישים או סורקי אתרים הם רק תוכניות, וככאלה הם מקפידים על כללים שיטתיים שנקבעו על ידי המתכנתים. בעלי אתרים יכולים להיכנס לעניין זה על ידי אמירת העכביש אילו חלקים באתר יש להוסיף לאינדקס ומי לא צריך. הדבר נעשה על ידי יצירת קובץ "robots.txt" המכיל הוראות לעכביש ביחס לאילו חלקים לאינדקס וקישורים לעקוב ואילו מהם עליו להתעלם. העכבישים המשמעותיים ביותר שם הם אלו שבבעלות מנועי חיפוש גדולים כמו גוגל, בינג ויאהו, וכאלה המיועדים לכריית נתונים ולמחקר, אך ישנם גם כמה עכבישים זדוניים שנכתבו כדי למצוא ולאסוף s עבור המשתמש למכור לפרסומת. חברות או כדי למצוא פגיעויות באבטחת רשת.