Semalt: Τι είναι το Googlebot;



  1. Εισαγωγή
  2. Τι είναι το Googlebot;
  3. Γιατί κάποιος πρέπει να ασχολείται με το Googlebot;
  4. Γιατί το Googlebot δεν ανιχνεύει όλες τις σελίδες σε ορισμένους ιστότοπους;
  5. Πώς να βελτιστοποιήσετε τον ιστότοπό σας για να μεγιστοποιήσετε τον προϋπολογισμό του Googlebot
  6. συμπέρασμα

Εισαγωγή

Γνωρίζετε πώς η Google βρίσκει πόρους για την αναζήτησή σας; Όπως πιστεύεται ευρέως, η Google δεν είναι ένα πνεύμα που γνωρίζει όλα όσα ξέρει τι είναι κάθε περιεχόμενο στο διαδίκτυο. Δεν είναι κάποιο είδος ψυχικού που ξέρει πού είναι η ακριβής απάντηση στην ερώτησή σας.

Όπως κάθε άλλη μηχανή αναζήτησης, διαθέτει λογισμικό που ανιχνεύει δισεκατομμύρια σελίδες (και ιστότοπους) κάθε δευτερόλεπτο για τη συλλογή πληροφοριών. εξαγάγετε την αξία του περιεχομένου και το θέμα του θέματος. Έτσι, όταν πραγματοποιείται μια αναζήτηση, η απάντηση αντλείται από αυτές τις σελίδες - κάτι σαν βιβλιοθήκη.


Ακούγεται πολύ σαν SEO, και αυτό γιατί έχει πολλά να κάνει με αυτό. Όταν ένας ιστότοπος βελτιστοποιείται αποτελεσματικά, η Google βλέπει γρήγορα τον ιστότοπο, διαβάζει τις σελίδες του και εμφανίζεται όταν πραγματοποιούνται σχετικές αναζητήσεις στη μηχανή αναζήτησης.

Αλλά αυτό δεν συμβαίνει για όλες τις σελίδες σε έναν ιστότοπο, δημιουργώντας μερικές σελίδες αόρατος στον κόσμο. Γιατί συμβαίνει αυτό; Και τι μπορεί να γίνει ενάντια σε αυτό (ειδικά για πολύ σημαντικές σελίδες); Ακολουθεί ένας οδηγός που περιγράφει λεπτομερώς όλα σχετικά με το πρόγραμμα ανίχνευσης ιστότοπων της Google (Googlebot), γιατί δεν ανιχνεύει αρκετές σελίδες και πώς ένας κάτοχος ιστότοπου μπορεί να χρησιμοποιήσει τη βελτιστοποίηση ιστότοπου και το SEO για να μεγιστοποιήσει τον προϋπολογισμό ανίχνευσης του Googlebot.

Τι είναι το Googlebot;



Αράχνη! Ερπετό! Αυτά είναι δημοφιλή ονόματα που δίνονται στο Googlebot. Αυτό συμβαίνει επειδή λειτουργεί κάπως έτσι. Το λογισμικό έχει δημιουργηθεί για ανίχνευση και αναζήτηση δισεκατομμυρίων ιστοσελίδων που έχουν δημοσιευτεί στο κοινό.

Σωστά - αν ένας ιστότοπος παραμείνει ιδιωτικός, δεν υπάρχει κανένας τρόπος που το Googlebot μπορεί να σαρώσει τις σελίδες του, θυμηθείτε ότι η αράχνη δεν είναι ψυχική. Ακολουθεί απλώς συνδέσμους σελίδων (από τη μια σελίδα στην άλλη) και μετά συνεχίζει με την επεξεργασία δεδομένων. Αφού ολοκληρωθεί αυτό, οι πληροφορίες στη συνέχεια συγκεντρώνονται σε ένα ευρετήριο (εύκολο να το θυμάστε ως βιβλιοθήκη ή κατάστημα Goggle).

Λόγω της παρουσίας αυτού του λογισμικού, η Google μπορεί να συγκεντρώσει και να συγκεντρώσει πληροφορίες ύψους άνω του ενός εκατομμυρίου gigabytes (GB) σε λιγότερο από ένα δευτερόλεπτο (εντάξει - τώρα αυτό είναι μαγικό). Στη συνέχεια, από αυτό το τακτικά ενημερωμένο ευρετήριο, η Google αντλεί πόρους για κάθε διαδικτυακή αναζήτηση τόσο σε επιτραπέζιο υπολογιστή όσο και σε φορητή συσκευή.

Γιατί πρέπει να ενδιαφερθεί κανείς για το Googlebot;

Το Googlebot crawling έχει να κάνει με το SEO ενός ιστότοπου (βελτιστοποίηση μηχανών αναζήτησης). Όλη η ουσία της αράχνης είναι να συλλέγει πληροφορίες από τις σελίδες ενός ιστότοπου, έτσι ώστε όταν πραγματοποιούνται αναζητήσεις σε σχετικά θέματα, να μπορεί να εμφανίσει τη σελίδα ως ένα από τα διαδικτυακά αποτελέσματα αναζήτησης. Επομένως, όταν το Googlebot ανιχνεύει συνεχώς τις περισσότερες σελίδες ενός ιστότοπου, θα υπάρχει αυξημένη ορατότητα που οδηγεί σε περισσότερη επισκεψιμότητα ιστότοπου σε αυτήν τη σελίδα (που είναι ένας από τους στόχους σωστά;).

Χρησιμοποιήστε αυτήν την εικόνα:

Το X έχει έναν ιστότοπο με μια σελίδα σχετικά με το θέμα: επαγγελματικό SEO για ιστοσελίδεςΤο Και το Y αναζητά SEO ιστότοπου. Εάν το Googlebot έχει ανιχνεύσει τη σελίδα του Χ στο SEO και το έχει ευρετηριάσει, θα ήταν ένα από τα αποτελέσματα που θα εμφανιστούν στα αποτελέσματα αναζήτησης της Google. Και το ίδιο θα συνέβαινε για άλλες σχετικές αναζητήσεις που πραγματοποιήθηκαν ακόμη και αν αυτό συμβεί εκατό φορές την ημέρα σε όλο τον κόσμο.

Σημειώστε ότι υπάρχουν και άλλοι υπογραμμιστικοί παράγοντες σε αυτό, όπως η καλή δομή της ιστοσελίδας, οι σχετικοί, γρήγοροι χρόνοι φόρτωσης ιστότοπου. Αλλά μόνο ένα Ειδικός SEO μπορεί να διασφαλίσει ότι αυτά γίνονται σωστά και ότι η σελίδα ενός ιστότοπου εμφανίζεται στην πρώτη σελίδα των αποτελεσμάτων αναζήτησης της Google.


Γιατί το Googlebot δεν ανιχνεύει όλες τις σελίδες σε ορισμένους ιστότοπους;

Κατά τη διάρκεια ενός από τα γραφεία SEO της Google -ώρες hangout, τέθηκε μια ερώτηση σχετικά με το γιατί το Googlebot δεν ανιχνεύει αρκετές σελίδες σε ορισμένους ιστότοπους. Υπάρχουν πάνω από εκατοντάδες δισεκατομμύρια σελίδες που δημοσιεύονται δημόσια στον διακομιστή ιστού. Οι χρήστες δημοσιεύουν μια νέα σελίδα στον διακομιστή κάθε μέρα, πράγμα που σημαίνει περισσότερες σελίδες για ευρετηρίαση του Googlebot. Ωστόσο, μερικές φορές, το bot δεν λειτουργεί ανάλογα με τις προσδοκίες. αυτό είναι; συσσωρεύουν πάνω από ένα εκατομμύριο GB πληροφοριών σε λιγότερο από ένα δευτερόλεπτο. Υπάρχουν διάφοροι λόγοι για τους οποίους μπορεί να συμβεί αυτό.

Πρώτον, μπορεί να υπάρχουν πάρα πολλά περιεχόμενα, σελίδες και ιστότοποι στο διαδίκτυο για ευρετηρίαση. Και μερικά είναι χαμηλής ποιότητας, άλλα έχουν αργή ταχύτητα φόρτωσης ιστότοπου και τα υπόλοιπα μπορεί να έχουν άσχετο περιεχόμενο με περίπλοκη δομή ιστότοπου (ή οτιδήποτε άλλο λειτουργεί ενάντια σε μια καλή εμπειρία χρήστη). Αυτός είναι ο λόγος για τον οποίο η Google δημιούργησε μια στρατηγική για την ευρετηρίαση μόνο ιστοσελίδων υψηλής ποιότητας και την εξαίρεση σελίδων χαμηλότερης ποιότητας. Με αυτόν τον τρόπο, οι σελίδες μπορούν να φιλτραριστούν και να μειωθούν (αντί για ευρετηρίαση όλων των σελίδων στο διαδίκτυο - τόσο πολύτιμες όσο και μη πολύτιμες).

Αλλά τα παραπάνω δεν απαντούν πλήρως στην ερώτηση: Γιατί το Googlebot δεν ανιχνεύει όλους τους ιστότοπους; Το ερώτημα που ενδιαφέρει είναι γιατί το Googlebot δεν ανιχνεύει όλες τις σελίδες (ή αρκετές σελίδες) σε έναν ιστότοπο. Και υπάρχουν δύο απαντήσεις σε αυτό. Η μεγάλη και η σύντομη απάντηση:

Η σύντομη απάντηση

Η Google αποδίδει έναν ορισμένο αριθμό πόρων και χρόνου στην ανίχνευση κάθε ιστότοπου ανά ημέρα. Αυτό ονομάζεται προϋπολογισμός ανίχνευσης ιστότοπου. Επομένως, το bot κάνει τη δουλειά του για ανίχνευση και ευρετηρίαση σε αυτόν τον προϋπολογισμό. Έτσι, για έναν ιστότοπο με περισσότερες από δέκα χιλιάδες σελίδες, δεν θα ευρετηριαστούν όλες οι σελίδες.

Ωστόσο, υπάρχουν περισσότερα σε αυτό, που μας φέρνει στη μακρά απάντηση:

Η μακρά απάντηση


Ο προϋπολογισμός ανίχνευσης είναι αυτός που καθορίζει τον αριθμό των σελίδων που μπορεί να ανιχνεύσει και να ευρετηριάσει το Googlebot ανά ιστότοπο κάθε μέρα. Αλλά όπως προαναφέρθηκε, υπάρχουν πολλά περισσότερα σε αυτό. Ορισμένοι παράγοντες καθορίζουν τον ρυθμό της αράχνης ενώ σέρνεται σε κάθε τοποθεσία εντός του προϋπολογισμού ανίχνευσης. Βγάζει νόημα? Αυτό σημαίνει ότι αν και ο προϋπολογισμός έχει δημιουργήσει ένα όριο, ορισμένοι παράγοντες μπορούν είτε να επιταχύνουν είτε να επιβραδύνουν το ρυθμό του bot. Περιλαμβάνουν:
  1. Αργός διακομιστής: Εάν ο χρόνος απόκρισης για έναν διακομιστή είναι σημαντικά αργός, μπορεί να αλλάξει τον ρυθμό με τον οποίο το bot ανιχνεύει σε κάθε σελίδα εντός του προϋπολογισμού ανίχνευσης. Οι κάτοχοι ιστότοπων μπορούν να τα ελέγξουν στην αναφορά στατιστικών ανίχνευσης. Συνιστάται ότι οτιδήποτε πάνω από 300 χιλιοστά του δευτερολέπτου δεν είναι καλός χρόνος απόκρισης.
  2. Κεντρικός διακομιστής ιστότοπου: Εάν ένας ιστότοπος φιλοξενείται σε κοινόχρηστο διακομιστή, αυτό μπορεί να επιβραδύνει τον ρυθμό με τον οποίο κάθε σελίδα προβάλλεται στην Google κατά την ανίχνευση. Αυτό συμβαίνει επειδή άλλοι ιστότοποι στον ίδιο διακομιστή ενδέχεται να το επιβραδύνουν χρησιμοποιώντας μεγάλους πόρους. Είναι ακόμη χειρότερο όταν ο ίδιος διακομιστής φιλοξενεί πολλούς ιστότοπους.
  3. Rouge Bots: Αυτά είναι άλλα bots που μπορούν να εμποδίσουν, να μπλοκάρουν ή να επιβραδύνουν τις ενέργειες του Googlebot. Μπορούν να έχουν διάφορες μορφές και μερικές φορές, ένας ιστότοπος χρειάζεται επαγγελματική βοήθεια για τη διαχείριση και τον έλεγχο των ενεργειών αυτών των bots.
  4. Ανιχνευσιμότητα ιστότοπου: Αυτό είναι το ποσό πρόσβασης που έχει ένας ανιχνευτής σε όλες τις σελίδες ενός ιστότοπου. Όταν το λογισμικό έχει εύκολη πρόσβαση στα περιεχόμενα ενός ιστότοπου, πολλές σελίδες θα ανιχνευθούν και θα ευρετηριαστούν εντός του προϋπολογισμού ανίχνευσης.

Πώς να βελτιστοποιήσετε τον ιστότοπό σας για να μεγιστοποιήσετε τον προϋπολογισμό του Googlebot


Στην προηγούμενη ενότητα, συζητήσαμε τους παράγοντες που καθορίζουν πόσο γρήγορα (ή πόσο αργά) το Googlebot ανιχνεύει μια σελίδα. Υπάρχουν όμως περισσότερα από αυτά που μπορεί να κάνει ένα άτομο για να μεγιστοποιήσει πόσες σελίδες ανιχνεύει το bot εντός του προϋπολογισμού. Εν συντομία, εδώ είναι μερικά πράγματα που μπορεί να κάνει ένας κάτοχος ιστότοπου για να μεγιστοποιήσει τον αριθμό των σελίδων που ανιχνεύει και ευρετηριάζει το Googlebot εντός του προϋπολογισμού ανίχνευσης ανά ημέρα.
  1. Αναπτύξτε έναν χάρτη ιστότοπου: Αυτό είναι ένα από τα πράγματα που μπορούν να γίνουν για να βοηθήσουν το Googlebot να ανιχνεύει πιο γρήγορα έναν ιστότοπο. Ένας χάρτης τοποθεσίας μπορεί να εγκατασταθεί, να δημιουργηθεί από μια γεννήτρια χάρτη ιστότοπου ή να δημιουργηθεί από την αρχή.
  2. Επενδύστε στην οργάνωση ιστότοπου: Αυτό έχει να κάνει με τον τρόπο δομής ενός ιστότοπου και την κατηγοριοποίηση των σελίδων εντός ενός ιστότοπου. Όταν ένας ιστότοπος είναι δομημένος έτσι ώστε οι επισκέπτες να μπορούν εύκολα να κατανοήσουν και να περιηγηθούν, υπάρχει μεγάλη πιθανότητα το Googlebot να το βρει εύκολα.
  3. Βελτιστοποίηση ιστότοπου: Αυτό συνοψίζει όλα τα σημεία που αναφέρθηκαν παραπάνω. Όταν μια ιστοσελίδα βελτιστοποιείται συνεχώς (με τον σωστό τρόπο), η διεπαφή του ιστότοπου θα δομηθεί σωστά και θα δημιουργηθεί ένας χάρτης ιστότοπου. Άλλα πράγματα περιλαμβάνουν έλεγχο επί παραγόντων που εμποδίζουν την ανίχνευση (όπως το robots.txt), βελτιστοποίηση τίτλου, αναγνωσιμότητα περιεχομένου, αξία περιεχομένου και πολλά άλλα. Η σωστή βελτιστοποίηση ενός ιστότοπου θα βοηθήσει το Googlebot να σαρώσει γρηγορότερα τις σελίδες ενός τέτοιου ιστότοπου.

συμπέρασμα

Το Googlebot μπορεί να θεωρηθεί ως ένα μικρό ρομπότ διαδικτύου που εργάζεται για την Google. Μετακινείται στη λήψη σελίδων από τον διακομιστή ιστού μέσω συνδέσμων προς ιστότοπους. Στη συνέχεια, εξετάζει κάθε σελίδα και την προσθέτει στη συλλογή πληροφοριών με ευρετήριο. Ωστόσο, λόγω πολλών παραγόντων και μεταβλητών, το bot δεν μπορεί να ανιχνεύσει όλες τις σελίδες κάθε ιστότοπου (στην πραγματικότητα, μερικές φορές, δεν είναι αρκετό). Και από όλους τους αναφερόμενους παράγοντες και λύσεις, η ευκολότερη λύση είναι να προσλάβετε μια επαγγελματική εταιρεία όπως Semalt που μπορεί να κάνει ό, τι απαιτείται με τον σωστό τρόπο και τη σωστή στιγμή για να διασφαλίσει ότι σημαντικές σελίδες στον ιστότοπό σας ανιχνεύονται και ευρετηριάζονται - αν όχι όλες οι σελίδες.

send email