Skocz do zawartości

Dostępność adresów dla googlebota i liczba podstron w indeksie dla danej domeny


Averem

Rekomendowane odpowiedzi

Szukam sposobów na:
 
  1. Masowe sprawdzenie, czy dany URL jest dostępny dla Google. Czy nie blokuje tego adresu robots.txt i czy nie ma noindex w kodzie podstrony. Coś jak tutaj: https://swiftgrowth.com/free-robots-txt-crawlability-tester
  2. Masowe sprawdzenie ile wyników zwróci polecenie site: dla danej domeny. Nie musi to być liczone ręcznie, ta informacja którą podaje Google w przybliżeniu na samej górze będzie w porządku.
 
Ktoś? Coś? :)
Odnośnik do komentarza

Zarejestruj się za darmo i naucz się zarabiać online!

  • Dostęp do darmowych poradników pokazujących krok po kroku jak zarabiać w Internecie
  • Sposoby zarabiania niepublikowane nigdzie indziej
  • Aktywna społeczność, która pomoże Ci rozwiązać problemy i doradzi
  • Profesjonalne treści na temat SEO, social media, afiliacji, kryptowalut, sztucznej inteligencji i wiele więcej!

Cześć @Averem

Darmowa wersja Screaming Frog obsługuje 500 urli i wypluwa wszystkie potrzebne informacje ;)

Równie dobrą alternatywą jest Web Auditor (j/w również 500 urli)

Chyba, że chodzi tobie o sprawdzenie wielu różnych domen. Jeśli tak, to niestety nie znam takiego narzędzia ale pomysł ciekawy :)

Pozdrawiam

 

  • Super 1
Kompleksowy mentoring bezpieczeństwa i anonimowości w internecie   

Kompleksowy mentoring - BEZPIECZEŃSTWO I ANONIMOWOŚĆ
Nie daj się śledzić, ukrywaj tożsamość online i offline, zabezpiecz swoje urządzenia i sporo więcej!

Odnośnik do komentarza
4 godziny temu, Harry napisał:

Darmowa wersja Screaming Frog obsługuje 500 urli i wypluwa wszystkie potrzebne informacje ;)

[...]

Chyba, że chodzi tobie o sprawdzenie wielu różnych domen. Jeśli tak, to niestety nie znam takiego narzędzia ale pomysł ciekawy :)

Mam płatną wersję Screaming Froga, W żabę można wrzucić adresy URL z różnych domen (np. z pomocą Upload –> Paste), ograniczyć skanowanie do 0, przedstawić się jako googlebot, ustawić ignore robots.txt but report the status... i mamy wynik :) Więc propozycja spełnia moje oczekiwania. Podgląd: https://prnt.sc/L9MPL0CxHnFU

4 godziny temu, Oxan_20 napisał:

Ad.2 --> scrapebox metrics checker (premium plugins)

Działa :) Dzięki!

3 godziny temu, Carramba napisał:

a-parser

Nie korzystałem jeszcze z a-parser. Póki co Scrapebox zdaje egzamin przy tym zadaniu :) 

  • Super 1
Odnośnik do komentarza

Jeśli chcesz dodać odpowiedź, zaloguj się lub zarejestruj nowe konto

Jedynie zarejestrowani użytkownicy mogą komentować zawartość tej strony.

Zarejestruj nowe konto

Załóż nowe konto. To bardzo proste!

Zarejestruj się

Zaloguj się

Posiadasz już konto? Zaloguj się poniżej.

Zaloguj się
  • Polecana zawartość

    • Poradnik podatkowy - jak rozliczać się z pieniędzy zarobionych przez Internet bez DG?
      Zarabianie w Internecie wiąże się z koniecznością płacenia podatków - a rozliczanie się z urzędem skarbowym nie jest jednoznaczne i proste. Prawo podatkowe w Polsce jest nieujednolicone - co oznacza, że każdy urząd skarbowy może mieć inne interpretacje. Sprawdź jak się za to zabrać!
        • Lubię to!
        • Super
      • 12 odpowiedzi
    • JDG - Jak zarejestrować, rozliczać i prowadzić działalność gospodarczą w Polsce
      Jednoosobowa działalność gospodarcza (JDG) to najprostsza forma prowadzenia działalności gospodarczej w Polsce. Jest to działalność prowadzona przez jedną osobę fizyczną na własne nazwisko i na własne ryzyko. Jednak mimo, że nazywa się jednoosobowa - daje jednak możliwość zatrudniania pracowników. Takich firm jest zarejestrowanych w Polsce zdecydowanie najwięcej. Sprawdź jak zarejestrować, rozliczać i prowadzić własną JDG!
        • Super
      • 3 odpowiedzi
    • Inwestowanie w obligacje detaliczne skarbu państwa - od podstaw!
      Sprawdź jak inwestować w obligacje skarbowe - krok po kroku! Detaliczne obligacje skarbowe to rodzaj obligacji emitowanych przez Państwo, które są oferowane indywidualnym inwestorom, takim jak osoby fizyczne, a nie instytucjom finansowym.

      Są to instrumenty dłużne, nienotowane na żadnym rynku, co oznacza że kupując taką obligację, w praktyce pożyczasz pieniądze państwu na określony czas, a w zamian otrzymujesz odsetki. Można więc powiedzieć że obligacje są indywidualną pożyczką na określony % dla Skarbu Państwa. Państwo odda Ci więcej niż od Ciebie pożyczyło.
        • Super
      • 7 odpowiedzi
    • Jak pozyskiwać i zarabiać na poleconych dzięki make-cash.pl
      W tym poradniku przedstawiam możliwości dostępne dla każdego użytkownika. Dowiesz się jak efektywnie wykorzystać forum do zbierania poleconych i budowania dodatkowych zysków.

      Make-cash.pl to miejsce, gdzie ludzie dzielą się swoimi doświadczeniami, poszukują porad i rekomendacji, a także nawiązują wartościowe kontakty. Codziennie odwiedza nas minimum 2000 unikalnych osób, które są zainteresowane zarabianiem przez Internet - a to ogromny potencjał, z którego może korzystać nie tylko administracja - ale każdy użytkownik forum !
        • Super
      • 2 odpowiedzi
    • Jak pisać treści na stronę internetową z wykorzystaniem AI
      Tworzenie treści od podstaw może być procesem czasochłonnym. Istnieje wiele mniejszych kroków, o których należy pomyśleć w drodze do stworzenia atrakcyjnych treści, takich jak badanie rynku, SEO i redagowanie tekstu, a to tylko początek. Jednak nie musisz zaczynać od zera, gdy istnieją narzędzia AI, które mogą pomóc w tworzeniu wysokiej jakości treści. 
        • Dzięki!
        • Super
      • 13 odpowiedzi
×
×
  • Dodaj nową pozycję...

Powiadomienie o plikach cookie

Ta strona korzysta z ciasteczek, aby świadczyć usługi na najwyższym poziomie. Dalsze korzystanie z witryny oznacza zgodę na ich wykorzystanie. Polityka prywatności .