A-Parser najbardziej zaawansowany harvester na rynku

Jest to kolejny z programów, który jest zdecydowanie godny polecenia. Przede wszystkim dlatego, że nie jest to zwykły, kiepski harvester np jak Scrapebox (chociaż ten też można dostosować) ale tak naprawdę to bardzo zaawansowana maszyna do robienia masowych harvestów:

Co takiego ma A-parser czego nie mają inne programy na rynku?

• Obecnie zawiera ponad 60 parserów (W tym możliwość oceny po Trust Flow oraz snippety wyszukiwarki, więc do analizy też się może nadać),
• Zaawansowane opcjie filtrów (Trust Flow, Citation Flow, duplikaty url, domen, zawartość domen),
• Możliwa praca na systemach dystrybucji Linux co zmniejsza nasze koszta jak i zwiększa wydajność (Osobiście puszczam na windzie),
• Świetna i szybka obsługa proxy,
• Tworzenie własnych slów kluczowych w oparciu o te wrzucone,
• Stworzenie kolejki harvestów (Ja na przykład wrzucam paczkę footprintów i do tego miksuję ze słowami z kilku językach, zaznaczam przesiewanie po domenach i za kilka dni mam kilka milionów linków do użycia,
• Potrafi wydobywać ze stron maile, telefony i inne dane kontaktowe,
• Potrafi obchodzić limity wyświetlanych stron i harvestować nawet po kilka tys. wyników w Google dla danej frazy,
• Możliwość stworzenia własnego parsera (Harvest Google->Bing->Yandex->Ocena miejscówek->Usunięcie duplikatów->Sprawdzenie czegoś jeszcze),

O ile się nie mylę, cała dokumentacja została przetłumaczona na język angielski, tak więc nie powinno być z niczym problemu, nawet przy tworzeniu naprawdę zaawansowanych parserów czy ustawień i filtrów. 

Z pełną odpowiedzialnością mogę powiedzieć, że na rynku nie było jeszcze tak zaawansowanego rozwiązania technicznego, które tak mocno ułatwia działania w SEO.

Osobiście polecam wersję Pro, ponieważ dużo nam ułatwi, mamy wiele możlwiości jeżeli chodzi o filtry, parsowanie itd.

Ref: Dodam wkrótce

Bez refa: https://en.a-parser.com/

W przypadku zakupu z refa pomagam z ustawieniami i wszystkim co potrzeba.

płatność jest jednorazowa i mamy soft już cały czas? 

Jednorazowa, tylko później abonament płacisz

Abonament płacisz tylko za proxy, możesz własne podpiąć ale w obecnych czasach ciężko o dobre proxy

A jak sprawdzasz DA, CF, TF ?Za free ?

nie sprawdzam żadnych DA, CF itd. które nie mają związku z algorytmem Google

Usprawnienia

• In Rank::CMS baza danych wykrywalnych CMSów została zaktualizowana, od tej pory stary jak i nowy format apps.json może być użyty  przy aktualizacj jest także zalecane zaktualizowanie apps.json)
• SE::Baidu został kompletnie przepisany:
  • dodano parsera powiązanych słó klucowych
  • $cachedate został usunięty z elementu $serp, ponieważ nie ma go już w wychodzącym formacie
  • dodano opcję "Get full link", która konwertuje linki do pełnego formatu
  • naprawiono funkcję wyrażeń regularnych i odczytywania linków bez ssl (http)
• Zmiany w  Rank::MajesticSEO
  • dodano funkcję, która pozwala sprawdzić parametry także dla : Root Domain/Subdomain/URL
  • Ekstrakcja domen została usunięta
  • Poprawiono działanie w kilku innych przypadkach
• Poprawiono responsywność w edytorze Parsera JavaScript
• Działanie   HTML::EmailExtractor zostało ulepszone,
• puste rezultaty w  SE::Google::Trends od teraz nie są traktowane jako nieudane zapytanie, a jako udane zapytanie z pustym rezultatem
• Poprawiono działanie na 'sesjach' w  SE::Yandex::WordStat

Usprawnienia

• [*Dodano dwa nowe scrapery:
  • [PLAIN]SE::DuckDuckGo::Images[/PLAIN] - scrape obrazków z DuckDuckGO
  • [PLAIN]SE::Dogpile::Images[/PLAIN] -scrape obrazków z  Dogpile
• Całkowicie przepisano 2 scrapery:
  • SE::Google::Images - dodano ustawienia regionu, wsparcie RecaptchyV@, umiejętność rozmaitych filtrów, scrapeowania anchorów i odnośników z obrazków
  • SE::Yandex::Images -dodano scrapeowanie podglądu obrazków
• Optymalizacja wydajności SE::AOL, a także maksymalnej ilości ściąganych rezultatów
• Optymalizacja wydajności  SE::Ask, oraz także dodano parsowanie podobnych keywordów
• JS parsers: optymalizacja wywoływania "constructor" i "init"()
• JS parsers: dodano wsparcie "async init"()

Kilka pomniejszych poprawek

Udoskonalenia:
Nowe parsery:

•  Maps::Google - Zbiera wyniki według wyznaczonych lokalizacji
•  Maps::Yandex  Zbiera wyniki według wyznaczonych lokalizacji
•  ]Rank::Bukvarix::Domain - Zbiera słowa kluczowe według podanych domen
•  Rank::Bukvarix::Keyword - Zbiera słowa kluczowe według podanych domen

Usunięto 4 bezsensowne parsery: Rank::SEMrush::Keyword ,  SE::QIP, SE::QIP::Position, Rank::MegaIndex
Poprawiono pracę  SE::AOL
Scrapery JS: data_as_buffer dodano dla this.request, który zwraca dane jako string (String) lub Buffer object
Zmiany ze względu na naprawy/aktualizacje silników:

• W  SE::Google::Modern naprawiono błąd z Recaptchą, poprawiono scraepowanie snippetów i wydajność scrapera mobilnego.
• W  Rank::SEMrush całkowicie przepisany, lista zebranych danych została również całkowicie zmieniona, scraper zwraca tylko te dane, które są dostępne bez autoryzacji
• Całkowicie przepisany  Rank::Alexa
• Poprawa działania Rank::MajesticSEO, teraz musisz zainstalować Node.js i moduł "brotli"
• W  Rank::Social::Signal usunięto $facebook_share zmienna z powodu zakończenia obsługi FB

Poprawki:

• Naprawiono pracę z zapytaniami zawierającymi spację  SE::DuckDuckGo
• Naprawiono problem z dekompresją danych w niektórych witrynach
• Parser JS: naprawiono pracę setImmediate

W dniu 16.10.2017 o 23:17, Moriarty napisał:

(Ja na przykład wrzucam paczkę footprintów

co to footprinty ?

Jeśli nie wiesz to po co Tobie parser? Pytanie na zasadzie "chce kupić samochód ale co to skrzynia biegów?". Czy Ty tylko statystyki nabijasz?

@Moriarty Jakich proxy używasz z tym harvesterem?

Od Daniela Burchardta . Są na forum + harvestowane samemu

Wysłane z mojego SM-G965F przy użyciu Tapatalka

Ktoś się orientuje czy na black friday dają jakąś zniżkę na niego, czy marna szansa ustrzelić go taniej ?

Ja tak naprawdę w ogóle nie pamiętam od nich promocji, wszystkie swoje licencje kupowałem w standardowej cenie ) to znaczy kolejna od pierwszej z zasady jest tańsza).

Udoskonalenia

• Dla  SE::Google::ByImage dodano wsparcie dla ReCaptcha2, a także dokonano całościowych usprawnień wydajności
• Dla   SE::Yandex dodano możliwość wielowątkowej obsługi captchy
• Dla  Rank::Ahrefs dodano możliwość wyboru domeny
• Całkowicie przepisano  , ponadto zmieniono sposób zapisu danych
• Wprowadzono obsługę "zbanowanych proxy"  SE::DuckDuckGo::Images
• Dla  Net::Whois dodano parsowanie daty uwolnienia domeny
• Zoptymalizowano pracę proxy przy dużej ilości prób
• Poprawiono obejście Cloudflare
• Dodano tools.aparser.version(), umożliwiając uzyskanie informacji o wersji A-Parsera

Korekty wynikające ze zmian wersji

• Dla mobilnej wersji  SE::Google::Modern poprawiono parsowanie wiadomości, a także poprawiono parsowanie linków i kotwic w wynikach desktopowych
• Dla   SE::Yandex naprawiono definiowanie captcha, a także poprawiono zbieranie linków z pamięci podręcznej
• Naprawiono parsowanie cen i liczby komentarzy w   Shop::Amazon
• Naprawiono pracę   z ciągami zawierającymi więcej niż jedno słowo
•  GooglePlay::Apps,   SE::YouTube,   Rank::Ahrefs

Drobne korekty

• Naprawiono problem z randomizacją proxy w systemie Windows 10
• Naprawiono przestoje podczas używania   Check::BackLink
• Naprawiono problem, w którym nie zastosowano Content-Type w  
• Naprawiono rzadki problem z wyborem pliku zapytania
• Naprawiono obsługę przekierowań z niestandardowym portem
• Naprawiono wyjście danych wieloliniowych w tools.CSVline
• ParserJS: naprawiono problem z interfejsem przy braku niezbędnych modułów Node.js
• ParserJS: naprawiono problem z używaniem modułu jimp

DODATKOWO JEŻELI CHCECIE, NA BLACKFRIDAY JEST ZNIŻKA DLA LICENCJI PROFESSIONAL -40$ CZYLI WYCHODZI 150$ ZAMIAST 199$. WARUNKIEM JEST TO, ŻE MUSIMY MIEĆ KUPIĆ 10 LICENCJI. JEŻELI JEST KTOŚ ZAINTERESOWANY PROSZĘ O KONTAKT NA PRIV W TYTULE DAĆ [A-PARSER]

Dalej można swoje proxy podpinać czy lepiej kupić od nich w abo ?

Można w plik API przepisać i będzie pobierać, testować i wykorzystywać. Lub w inny plik dać IP stale ( tunele z autoryzacja po IP)

Witajcie. Mam kilka pytań odnośnie tego programu.

1. To jest plik/program w formie java czy jakim ? Widzę że działa na Windows i Linux, więc nie może być exe.

2. 200 $ licencja, ale przy zakupie miałem jeszcze ilość wątków do wyboru :

* Additional IP - jakieś ip dodatkowe, to muszę mieć na początek ?

* Proxy 50 wątków na miesiąc - czyli co miesiąc muszę tyle płacić za ICH PORXY ? Wtedy jestem zwolniony z kupna własnych ? Jakieś ograniczenia na ilość harwestów są ?

3. Cheap-Captcha.com balance refil

To rozumiem do rozwiązywania captacha ? A można podpiąć może pod ten soft moduł z rumaka ?

Przepraszam że tak dopytuję, ale nie znalazłem w kraju forum skupiającego się głównie na harvestach.

Cytat

* Additional IP - jakieś ip dodatkowe, to muszę mieć na początek ?

Dodatkowa licencja ( ddatkowe IP instalacji).

Cytat

 

Proxy 50 wątków na miesiąc - czyli co miesiąc muszę tyle płacić za ICH PORXY ? Wtedy jestem zwolniony z kupna własnych ? Jakieś ograniczenia na ilość harwestów są ?

 

 

 

Czyli tyle kosztują ich proxy, nic nie musisz możesz korzystać z własnych. Ograniczenia na ilość harwestów nie ma i nigdzie takiego czegoś nie spotkałem.

Cytat

To jest plik/program w formie java czy jakim ? Widzę że działa na Windows i Linux, więc nie może być exe.

Soft napisany głownie w Perl i JS, rzecz jasna , że to nie jeden plik

Cytat

Cheap-Captcha.com balance refil

Nie rozumiem pytania, Cheap-Captcha.com to zewnętrzny serwis OCR, kiedyś wykorzystywano głownie dla Yandex captcha, jest gotowe API nawet chyba jakis rabat dla użytkowników a-parser, Serwis jak serwis konto można doładować ze "sklepu" a-parsera.