Ένα «λογισμικό αράχνης» είναι ένα μη επανδρωμένο πρόγραμμα που λειτουργεί από μια μηχανή αναζήτησης που περιηγείται στον Ιστό όπως θα κάνατε. Καθώς επισκέπτεται κάθε ιστότοπο, καταγράφει (αποθηκεύει στον σκληρό δίσκο του) όλες τις λέξεις σε κάθε ιστότοπο και σημειώνει κάθε σύνδεσμο προς άλλους ιστότοπους. Στη συνέχεια «κάνει κλικ» σε έναν σύνδεσμο, και μετά πηγαίνει για ανάγνωση, ευρετήριο και αποθήκευση άλλης τοποθεσίας Web.
Η αράχνη λογισμικού διαβάζει συχνά και στη συνέχεια ευρετηριάζει ολόκληρο το κείμενο κάθε τοποθεσίας Web που επισκέπτεται στην κύρια βάση δεδομένων της μηχανής αναζήτησης για την οποία εργάζεται. Πρόσφατα, πολλοί κινητήρες όπως το AltaVista έχουν αρχίσει να δημιουργούν ευρετήριο μόνο για έναν ορισμένο αριθμό σελίδων ενός ιστότοπου, συχνά περίπου 500 συνολικά και στη συνέχεια να σταματούν. Προφανώς, αυτό συμβαίνει επειδή ο Ιστός έχει γίνει τόσο μεγάλος που δεν είναι εφικτό να ευρετηριάσουμε τα πάντα. Πόσες σελίδες θα ευρετηριάσει η αράχνη δεν είναι πλήρως προβλέψιμη. Επομένως, είναι καλή ιδέα να υποβάλετε συγκεκριμένα κάθε σημαντική σελίδα στον ιστότοπό σας που θέλετε να ευρετηριαστεί, όπως αυτές που περιέχουν σημαντικές λέξεις-κλειδιά.
Μια αράχνη λογισμικού μοιάζει με έναν ηλεκτρονικό βιβλιοθηκονόμο που κόβει τον πίνακα περιεχομένων κάθε βιβλίου σε κάθε βιβλιοθήκη στον κόσμο, τα ταξινομεί σε ένα γιγαντιαίο κύριο ευρετήριο και στη συνέχεια δημιουργεί μια ηλεκτρονική βιβλιογραφία που αποθηκεύει πληροφορίες για τα κείμενα που αναφέρονται σε άλλα κείμενα. Ορισμένες αράχνες λογισμικού μπορούν να ευρετηριάσουν περισσότερα από ένα εκατομμύριο έγγραφα την ημέρα! Είναι σημαντικό να κατανοήσουμε ότι οι αράχνες των μηχανών αναζήτησης κάνουν μόνο δύο πράγματα:
- Ευρετήριο κειμένου.
- Ακολουθούν συνδέσμους.
Σε ένα πρόσφατο συνέδριο Search Engine Strategies που έθεσε το SearchEngineWatch.com, ένας από τους προσκεκλημένους ομιλητές, Shari Thurow of Grantastic Designs, έκανε αυτό το σημείο και το επανέλαβε αρκετές φορές για να δείξει τη σημασία του: Ευρετηριάζουν κείμενο και ακολουθούν συνδέσμους. Αυτό είναι το μόνο που κάνουν. '
Το σημείο της είναι σημαντικό και κεντρικό για την κατανόηση της φύσης των αραχνών των μηχανών αναζήτησης. Εάν το κείμενο του ιστότοπού σας περιέχεται σε ένα γραφικό, οι μηχανές αναζήτησης δεν μπορούν να το ευρετηριάσουν. Εάν όλες οι σημαντικές λέξεις-κλειδιά σας για τις οποίες ελπίζετε να επιτύχετε βαθμολογίες περιλαμβάνονται στα γραφικά και όχι στο κείμενο HTML, ο ιστότοπός σας δεν θα επιτύχει βαθμολογίες. Θυμηθείτε, οι μηχανές αναζήτησης δεν ευρετηριάζουν εικόνες ή διαβάζουν εικόνες, ευρετηριάζουν κείμενο και ακολουθούν συνδέσμους. Αυτό είναι όλο. Εάν δεν έχετε κείμενο στη σελίδα με δυνατότητα προβολής, κανένας αριθμός λέξεων-κλειδιών στη μετα-ετικέτα λέξεων-κλειδιών δεν θα σας βοηθήσει να επιτύχετε βαθμολογίες.
Αυτό που βλέπει η αράχνη στον ιστότοπό σας θα καθορίσει πώς εμφανίζεται ο ιστότοπός σας στο ευρετήριό του. Οι μηχανές αναζήτησης καθορίζουν τη συνάφεια ενός ιστότοπου με βάση ένα πολύπλοκο σύστημα βαθμολογίας που οι μηχανές αναζήτησης προσπαθούν να κρατήσουν μυστικά. Αυτό το σύστημα προσθέτει ή αφαιρεί σημεία με βάση πράγματα όπως πόσες φορές εμφανίστηκε η λέξη-κλειδί στη σελίδα, πού στη σελίδα εμφανίστηκε και πόσες συνολικές λέξεις βρέθηκαν. Οι σελίδες που επιτυγχάνουν τα περισσότερα σημεία επιστρέφονται στην κορυφή των αποτελεσμάτων αναζήτησης. τα υπόλοιπα θαμμένα στο κάτω μέρος, ποτέ δεν θα βρεθούν.
Καθώς μια αράχνη λογισμικού επισκέπτεται τον ιστότοπό σας, σημειώνει τυχόν συνδέσμους στη σελίδα σας με άλλους ιστότοπους. Σε μια τεράστια βάση δεδομένων οποιασδήποτε μηχανής αναζήτησης καταγράφονται όλοι οι σύνδεσμοι μεταξύ ιστότοπων. Η μηχανή αναζήτησης γνωρίζει σε ποιους ιστότοπους έχετε συνδέσει και, πιο σημαντικό, σε ποιους συνδέονται με εσάς. Πολλές μηχανές θα χρησιμοποιήσουν ακόμη και τον αριθμό των συνδέσμων προς τον ιστότοπό σας ως ένδειξη της δημοτικότητας και, στη συνέχεια, θα αυξήσουν την κατάταξή σας βάσει αυτού του παράγοντα.
Πνευματικά δικαιώματα © 2000 iProspect.com
