Pytania otagowane jako googlebot

Googlebot to bot, którego Google używa do indeksowania ponad 20 miliardów stron każdego dnia, a dane uzyskane podczas indeksowania są następnie analizowane i klasyfikowane w wyszukiwarce Google.

1
Dlaczego mój adres IP staje się adresem IP Google podczas korzystania z Chrome na telefonie komórkowym?
Śledzę geolokalizację każdego członka (używając db-ip) i wszystko jest w porządku, z wyjątkiem telefonów komórkowych z przeglądarką Chrome. Zawsze dają mi wynik US Mountain View California ip:66.249.xxx.xxx. To jest Google; Jestem tego w 100% pewien. Ale osobą, która odwiedza stronę internetową, jestem ja. Nie ma mnie nawet w USA; Korzystam …
4
Zapobiegaj wyświetlaniu map witryn XML w wynikach wyszukiwania Google
Jak zapobiec wyświetlaniu moich plików map witryn XML w wynikach wyszukiwania Google, takich jak wynik site:zapytania: Nie rozumiem, dlaczego Google miałoby na początku wyświetlać pliki map witryn w wynikach wyszukiwania. Te pliki nie są przeznaczone do spożycia przez ludzi. Google musi być w stanie go zaindeksować, aby móc go przetworzyć, …
3
Czy można spowolnić częstotliwość indeksowania Baiduspider?
Wiele zrobiono z częstotliwości czołgania się pająków Baidu. To prawda: „Baiduspider czołga się jak szalony”. Doświadczyłem tego zjawiska w witrynach, z którymi pracuję. W co najmniej jednym przypadku odkryłem, że Baiduspider indeksuje się z mniej więcej taką samą częstotliwością jak Googlebot, pomimo faktu, że Baidu zapewnia około .1% więcej ruchu …
7
Czy Google buforuje plik robots.txt?
Dodałem plik robots.txt do jednej z moich witryn tydzień temu, co powinno uniemożliwić Googlebotowi próby pobrania niektórych adresów URL. Jednak w ten weekend widzę, że Googlebot ładuje te dokładne adresy URL. Czy Google buforuje plik robots.txt, a jeśli tak, to powinien?
3
SEO - responsywna strona internetowa i zduplikowane menu
Ilekroć tworzę responsywną stronę internetową, zwykle tworzę 2 menu: 1 ukryte i używane na urządzenia mobilne, a drugie wyświetlane jako menu główne, a następnie ukryte, aby wyświetlić menu mobilne. Ilekroć chodzi o SEO i pająki poruszające się po stronie, czy mam ochotę mieć duplikaty menu? Czy jest coś, co mogę …
4
Czy Googlebot obsługuje TLS 1.2? Jeśli nie, to jak będzie wyglądać moja witryna wyłącznie z TLS 1.2?
Obecnie przekierowuję wszystkie połączenia inne niż HTTPS do HTTPS i obsługuję TLS v1, TLS v1.1 i TLS v1.2. Skonfigurowałem ponownie mój serwer testowy, aby akceptował tylko bardzo ograniczony i bezpieczny pakiet szyfrów oraz tylko TLSv1.2. Po uruchomieniu testu SSL Labs zauważyłem, że ich tabela zgodności wykazała, że ​​roboty Bing i …
4
Google nie indeksuje plików CDN
Zauważyłem, że Narzędzia Google dla webmasterów zgłaszają wiele zablokowanych zasobów w mojej witrynie. W tej chwili wszystkie „zablokowane zasoby” to .css, .js i obrazy (.jpg, .png), które obsługuję z Cloudfront CDN. Spędziłem dużo czasu testując i próbując dowiedzieć się, dlaczego Google nie indeksuje tych plików i zgłasza stan „blokowania zasobów”. …
2
Jakie boty są naprawdę warte wpuszczenia na stronę?
Po napisaniu wielu botów i zobaczeniu ogromnej liczby losowych botów, które zdołały zaindeksować witrynę, zastanawiam się, jako webmaster, jakie boty naprawdę warto wpuścić na witrynę? Moją pierwszą myślą jest to, że zezwalanie botom na witrynę może potencjalnie przynieść prawdziwy ruch. Czy istnieje jakiś powód, aby zezwolić botom, o których nie …
1
link rel = „alternate”, wiele języków i kanoniczne adresy URL
Kontekst: Mamy stronę internetową, która jest dostępna w wielu wersjach językowych. Jednak treść jest taka sama. Każda przetłumaczona wersja witryny jest dostępna w osobnej subdomenie. Na niektórych stronach używamy <link rel="canonical" />do wskazywania wersji kanonicznej w tym samym języku tej samej strony, jeśli to konieczne. To tylko podstawowe czynności normalizacyjne, …
1
Jak działa „Noindex:” w pliku robots.txt?
Dzisiaj natknąłem się na ten artykuł w moich wiadomościach SEO. Wydaje się to sugerować, że możesz używać Noindex:dyrektyw oprócz standardowych Disallow:dyrektyw w pliku robots.txt . Disallow: /page-one.html Noindex: /page-two.html Wygląda na to, że uniemożliwiłoby to wyszukiwarkom indeksowanie strony pierwszej, a także indeksowanie strony drugiej. Czy ta dyrektywa robots.txt jest obsługiwana …
3
Czy wyszukiwarki Spider przesyłają formularze POST?
Jeśli mam treść za formularzem POST (w moim przypadku pole wyboru), czy Googlebot lub inne roboty wyszukiwarek będą w stanie zaindeksować treść za tym formularzem? Na przykład, jeśli miałbym mieć 4 tłumaczenia jednej strony, a wybór języka byłby formularzem POST na ten sam adres URL, który następnie przekierowano na adres …
1
Jak Google zdołał zaindeksować moje 403 strony?
Miałem kilka prywatnych plików w katalogu w moim szkolnym folderze. Możesz zobaczyć, że pliki istniały, przechodząc do myschool.edu/myusername/myfolder, ale próba uzyskania dostępu do samych plików przez myschool.edu/myusername/myfolder/myfile.html zwraca błąd 403. A jednak Google jakoś udało się pobrać zawartość tych prywatnych plików i zapisać je w pamięci podręcznej! Jak to jest …
2
Czy powinniśmy porzucić schemat indeksowania AJAX?
Więc teraz Google wycofał schemat indeksowania AJAX . Mówią, że nie zawracają sobie głowy wdrażaniem go w nowych witrynach, ponieważ nie jest to już potrzebne, ponieważ Googlebot nie ma teraz problemu z oglądaniem dynamicznych treści. Czy powinniśmy natychmiast zaufać temu stwierdzeniu, czy lepiej przez jakiś czas stosować się do przestarzałego …
Korzystając z naszej strony potwierdzasz, że przeczytałeś(-aś) i rozumiesz nasze zasady używania plików cookie i zasady ochrony prywatności.
Licensed under cc by-sa 3.0 with attribution required.