Το Semalt δίνει τους κύριους λόγους για τους οποίους το Googlebot δεν ανιχνεύει κάθε σελίδα σε ορισμένους ιστότοπους
Είχαμε πελάτες να παραπονεθούν ότι ορισμένοι ιστότοποί τους δεν ανιχνεύονται από το Googlebot. Ως ειδικοί SEO, είναι δουλειά μας να βρούμε το πρόβλημα και να το διορθώσουμε έτσι ώστε οι πελάτες μας να είναι ευχαριστημένοι και να διατηρούν τον ιστότοπό τους σε κορυφαία κατάσταση.
Ο John Mueller της Google εξηγεί ορισμένους παράγοντες που επηρεάζουν τον τρόπο ανίχνευσης των σελίδων σε οποιονδήποτε ιστότοπο. Φυσικά, αυτό δεν ήταν συγκεκριμένο, αλλά μας δείχνει στη σωστή κατεύθυνση. Σε αυτήν την ανάρτηση, ο John επισημαίνει επίσης γιατί ορισμένες σελίδες σε έναν ιστότοπο δεν ανιχνεύονται.
Το ερώτημα που προκάλεσε αυτήν την απάντηση αφορούσε το γιατί η Google ανίχνευσε ιστότοπους με σχετικά αργό ρυθμό, ο οποίος είναι ανεπαρκής για να διαχειριστεί τον τεράστιο αριθμό ιστότοπων σήμερα.
Κατανόηση του προϋπολογισμού ανίχνευσης Google
Αυτός είναι ο πρώτος τομέας στον οποίο επιλέγουμε να εστιάσουμε, καθώς εξηγεί πολλά για το πόσο συχνά η Google ανιχνεύει έναν ιστότοπο. Το Googlebot (το όνομα για το πρόγραμμα ανίχνευσης ιστού της Google) περνά από ιστοσελίδες και τις διατηρεί ευρετηριασμένες ώστε να μπορούν να κατατάσσονται στο SERP. Ωστόσο, ο μεγάλος όγκος των ιστότοπων γίνεται πρόβλημα, γι 'αυτό η Google επινόησε μια στρατηγική στην οποία ευρετηριάζει μόνο ιστοσελίδες υψηλής ποιότητας. Σκεφτείτε το ως κάποια μορφή φίλτρου. Αντί να ξοδεύει όλους αυτούς τους πόρους σε σελίδες που πιθανότατα δεν έχουν σημασία για τον χρήστη, η Google επικεντρώνεται μόνο σε ιστοσελίδες υψηλής ποιότητας.
Ο προϋπολογισμός ανίχνευσης ενός ιστότοπου είναι το ποσό των πόρων που αφιερώνει η Google στην ανίχνευση αυτού του ιστότοπου. Είναι επίσης σημαντικό να σημειωθεί ότι δεν καταγράφονται όλα όσα ανιχνεύονται. Οι ιστοσελίδες ευρετηριάζονται μόνο αφού ανιχνευθούν και θεωρηθούν πολύτιμες.
Μόλις εξαντληθεί ο προϋπολογισμός ανίχνευσης, η Google σταματά να ανιχνεύει τις ιστοσελίδες σας.
Ρύθμιση του προϋπολογισμού ανίχνευσης
Ο προϋπολογισμός ανίχνευσης ιστότοπων καθορίζεται από τέσσερις κύριους παράγοντες:
- Μέγεθος ιστότοπου: Οι μεγαλύτεροι ιστότοποι έχουν μεγαλύτερους προϋπολογισμούς ανίχνευσης.
- Η ρύθμιση διακομιστή: η απόδοση και ο χρόνος φόρτωσης του ιστότοπού σας μπορεί να επηρεάσει το ποσό του προϋπολογισμού ανίχνευσης στον ιστότοπό σας. Όπως είπαμε, οι καλύτεροι ιστότοποι αποκτούν καλύτερους προϋπολογισμούς ανίχνευσης, οπότε όταν ο ιστότοπός σας αποδίδει άριστα, αποκτά περισσότερο προϋπολογισμό ανίχνευσης.
- Συχνότητα ενημερώσεων: Οι τακτικές ενημερώσεις σημαίνουν τακτική εισροή φρέσκου περιεχομένου. Η Google θα δώσει προτεραιότητα στους ιστότοπους που λαμβάνουν τακτικές ενημερώσεις και θα τους δίνει έναν πιο σημαντικό προϋπολογισμό ανίχνευσης.
- Συνδέσεις: η εσωτερική σας δομή σύνδεσης και οι εισερχόμενοι σύνδεσμοι συμβάλλουν επίσης στον προϋπολογισμό ανίχνευσης του ιστότοπού σας.
Είναι εύκολο να καταλάβετε γιατί θα ανησυχούσατε όταν κάποιο από το περιεχόμενό σας δεν ανιχνεύεται ως κάτοχος ιστότοπου. Αυτό μειώνει τις πιθανότητες κατάταξής σας, ειδικά όταν πρόκειται για τα πιο πολύτιμα κομμάτια περιεχομένου που παραλείπονται.
Τρόπος διόρθωσης ζητημάτων ανίχνευσης
Διόρθωση προβλημάτων με τις μετα -ετικέτες ή το αρχείο robots.txt
Τα ζητήματα που εμπίπτουν σε αυτήν την κατηγορία είναι συνήθως εύκολο να εντοπιστούν και να επιλυθούν. Μερικές φορές, ολόκληρος ο ιστότοπός σας ή συγκεκριμένες σελίδες στον ιστότοπό σας ενδέχεται να παραμείνουν αόρατες από το Google επειδή δεν επιτρέπεται στο Googlebot να τους εισαγάγει.
Υπάρχει ένας αριθμός εντολών bot που εμποδίζουν την ανίχνευση σελίδων και αυτό μπορεί να διορθωθεί ελέγχοντας τις μεταετικέτες και το αρχείο robots.txt. Έχοντας τις σωστές παραμέτρους και την επαρκή χρήση τους, στην πραγματικότητα, θα σας βοηθήσει να εξοικονομήσετε προϋπολογισμό ανίχνευσης και να κατευθύνετε το Googlebot στη σωστή κατεύθυνση.
Είναι επίσης δυνατή η ύπαρξη συνδέσμων χωρίς παρακολούθηση. Σε αυτήν την περίπτωση, το πρόγραμμα ανίχνευσης ευρετηριάζει μια σελίδα αλλά δεν μπορεί να ακολουθήσει τον σύνδεσμο. Αυτό δεν είναι καλό για τον ιστότοπό σας, καθώς το Googlebot χρησιμοποιεί αυτούς τους εσωτερικούς συνδέσμους για να βρει νέες σελίδες. Αυτό μας οδηγεί στο επόμενο σημείο.
Εσωτερικοί σπασμένοι σύνδεσμοι
Το να έχετε σπασμένους συνδέσμους δεν είναι ποτέ καλή εμπειρία τόσο για τους χρήστες όσο και για τα προγράμματα ανίχνευσης. Για κάθε σελίδα που καταγράφεται, αφαιρείται ένα μέρος του προϋπολογισμού ανίχνευσης του ιστότοπου. Γνωρίζοντας αυτό, καταλαβαίνουμε ότι όταν υπάρχουν πάρα πολλοί σπασμένοι σύνδεσμοι, το bot θα σπαταλήσει όλο τον προϋπολογισμό ανίχνευσής τους, αλλά δεν θα φτάσει στις σχετικές και ποιοτικές σελίδες σας.
Η διόρθωση των κατεστραμμένων συνδέσμων σας καθιστά το ποιοτικό σας περιεχόμενο πιο ορατό στο Googlebot.
Οι εσωτερικοί κατεστραμμένοι σύνδεσμοι θα μπορούσαν να είναι αποτέλεσμα τυπογραφικών τυπογραφικών διευθύνσεων URL (όπου υπάρχει τυπογραφικό λάθος στη διεύθυνση υπερσυνδεδεμένης διεύθυνσης URL), ξεπερασμένων διευθύνσεων URL ή Σελίδων με αποκλεισμένη πρόσβαση.
Πρόβλημα που σχετίζεται με τον διακομιστή
Ο διακομιστής σας μπορεί επίσης να είναι ο λόγος για τον οποίο η Google δεν βρίσκει συγκεκριμένες σελίδες. Η ύπαρξη μεγάλου αριθμού σφαλμάτων 5xx στον ιστότοπό σας μπορεί να είναι ένα σήμα ότι κάτι δεν πάει καλά με τον διακομιστή σας. Για να λύσουμε αυτό το πρόβλημα, επαναδιαμορφώνουμε περιοχές όπου υπάρχουν σφάλματα και διορθώνουμε τα σφάλματα.
Μερικές φορές, μπορεί να είναι ότι ο διακομιστής σας είναι υπερφορτωμένος. Σε αυτήν την περίπτωση, σταματά να ανταποκρίνεται στα αιτήματα του χρήστη και του bot. Όταν συμβεί αυτό, οι θεατές σας, καθώς και τα bots, δεν μπορούν να έχουν πρόσβαση σε αυτήν τη σελίδα.
Σε ακραίες καταστάσεις, θα μπορούσαμε να εξετάσουμε εσφαλμένη διαμόρφωση διακομιστή ιστού. Εδώ, ο ιστότοπος είναι ορατός στους ανθρώπινους χρήστες, αλλά συνεχίζει να δίνει ένα μήνυμα σφάλματος σε προγράμματα ανίχνευσης ιστότοπων. Αυτό το πρόβλημα είναι αρκετά δύσκολο καθώς μπορεί να είναι δύσκολο να το παρατηρήσουμε. Σε αυτήν την περίπτωση, η ιστοσελίδα δεν είναι προσβάσιμη στο Googlebot, γεγονός που καθιστά αδύνατη την ανίχνευση και την ευρετηρίαση από bots.
Ζητήματα με το Χάρτη ιστοτόπου XML
Ο χάρτης ιστότοπου επηρεάζει ένα ευρύ φάσμα στοιχείων στον ιστότοπό σας. Είναι απαραίτητο να διατηρήσετε σχετικές τις διευθύνσεις URL στο χάρτη του ιστότοπού σας. Πρέπει να είναι ενημερωμένες και σωστές. Αυτό είναι σημαντικό γιατί όταν ο προϋπολογισμός ανίχνευσης είναι ανεπαρκής, ο χάρτης ιστότοπού σας κατευθύνει τα bot ανιχνευτή στους πιο σχετικούς ιστότοπους. Με αυτόν τον τρόπο, οι πιο σημαντικές σελίδες σας εξακολουθούν να ευρετηριάζονται.
Λάθη με την Αρχιτεκτονική Ιστού
Αυτό είναι ένα από τα πιο δύσκολα ζητήματα προς επίλυση. Τα ζητήματα που εμπίπτουν σε αυτήν την κατηγορία μπορούν να μπλοκάρουν ή να αποπροσανατολίσουν τα προγράμματα ανίχνευσης στον ιστότοπό σας. Θα μπορούσε να έχει τη μορφή προβλημάτων με την εσωτερική σας σύνδεση. Or θα μπορούσε να είναι η περίπτωση λανθασμένων ανακατευθύνσεων. Σε αυτήν την περίπτωση, οι χρήστες και τα bots προωθούνται σε λιγότερο σχετικές σελίδες. Τέλος, έχουμε διπλό περιεχόμενο. Δυστυχώς, το διπλό περιεχόμενο είναι ένα από τα πιο κοινά ζητήματα SEO. Αυτός είναι επίσης ένας από τους κύριους λόγους για τους οποίους εξαντλείται ο προϋπολογισμός ανίχνευσης και καθίσταται δύσκολο για την Google να ανιχνεύσει μερικές από τις σελίδες σας.
συμπέρασμα
Η Google δεν μπορεί να βρει το περιεχόμενό σας όχι μόνο λόγω ζητημάτων που σχετίζονται με το περιεχόμενο ή επειδή βελτιστοποιείτε για λάθος λέξεις-κλειδιά. Ακόμα και το βελτιστοποιημένο περιεχόμενο μπορεί να παραμείνει αόρατο για την Google εάν έχει προβλήματα ανίχνευσης.
Είμαστε εδώ για να καταλάβουμε τι είναι λάθος, καθώς και να καταρτίσουμε ένα σχέδιο για το πώς μπορούμε να διορθώσουμε αυτό το ζήτημα. Επικοινωνήστε μαζί μας σήμερα, και Semalt μπορεί να σας βοηθήσει να επαναφέρετε το περιεχόμενό σας στο ραντάρ.