Načini zaobići privremenu Google zabranu čestog pristupa bazi podataka - Profit Hunter

* Guest Post

Ovaj post je posvećen osobitostima rada s nTrendsMaster skriptom, masovnom verifikacijom Googleovog izlaza za broj natjecatelja za potrebne upite i time-out problemom od Googlea općenito. Post je vrlo dobar u smislu širenja horizonta (nisam imao pojma o mnogim stvarima koje su ovdje napisane ranije) i na neki način objašnjava uzroke problema koje možda imate tijekom korištenja Google skripti i programa (uključujući Market Samurai ).

Post je kompilacija komentara i korespondencije s internetskim poduzetnikom Oleg Savchenko i objavljuje se s njegovim dopuštenjem.

-----

Poravnanje je kako slijedi (u svakom slučaju, imam):
  • pokrećemo skriptu i dajemo joj 100-200 riječi - sve radi bez problema ...
  • ponovno pokrećemo s istim iznosom ... i više ... ako ne stojite između lansiranja supružnika barem pola sata, a onda doslovno nakon 3 pokretanja (to jest, nakon 400-600 provjerenih riječi) pogreške prilikom provjere konkurentnih stranica ; - ((
  • Nakon što odmah pokušam nešto tražiti u Googleu, vidim captcha. Skripta je pokrenuta iz Denvera, tako da captcha kaže da je moj aypishnik privremeno otišao u ban To jest, u ručnom načinu rada Mogu ući kod ove slike još neko vrijeme tiho koristiti Google, ali za oko 5-6 sati više, ovaj isti captcha se može nasumično pojaviti tijekom bilo kojeg od mojih poziva Googleu (ili se možda neće pojaviti). korištenje skripte s iste adrese neće raditi, jer neće moći prepoznati sliku ili pogon u kodu ...

    Što vidim rješenja:

    1. Povećane pauze između Google zahtjeva u skripti . Ali ne samo povećanje pauza, nego i njihova randomizacija. Mnoge aplikacije za stolna računala ( KRA PRO , IBP i druge) ne potpadaju pod zabranu Googlea upravo iz tog razloga. Međutim, između svakog zahtjeva stavljaju između 7 i 30 sekundi prekida! Ako ste postavili 5 (7, 10, 15) sekundi i učinili sve pauze istim, Google svejedno reže automatizaciju i daje vam captcha; - ((

    Zašto je ovaj put loš? U koje vrijeme se provjera skripte može usporediti? s vremenom provjeravati ručno. Ali postoje plusevi: u ovom trenutku još uvijek ne provjeravate, ali nešto drugo. To je "dugo, ali bez vas", tako da opcija ima pravo na postojanje. Vjerojatno je neuspješan, vjerojatno zato što povlačim stranice s curl-om (funkcija koja se pojavljuje u PHP-u) ili će mi možda trebati više To (ima i takvih knjižnica koje više ili manje točno dopuštaju oponašanje preglednika) Ukratko, još uvijek postoji nešto o čemu treba razmisliti ...

    Koristeći tipke od google . Google službeno više ne podržava SOAP API, ali svima preporučuje da se prebace na AJAX API. Primijetio sam da se rezultati u ovom slučaju jako razlikuju od pretraživanja u ručnom modu (ponekad, čak i na desetke puta !!!). (http: // www. google. com / search? hl = hr. sigurno = isključeno. q = ajax + google + api + estimatedResultCount) vidjet ćete da je ovaj problem sveprisutan ... Zato preporučujem da ne koristite novi API za bilo koju vrstu SEO istraživanja.

    Što se tiče stare metode, koristeći Google SOAP Search API, sve je u redu: rezultati se razlikuju "u razumnim granicama" (također se razlikuju na različitim Googleovim poslužiteljima, tako da je sve u redu). daje korisnicima te iste "stare" API-shnye ključeve. Dakle, napisati skriptu koja će biti javna jednostavno je nemoguće.

    Ljudi na proplancima su napravili razliku između starih i novih ključeva i požurili stare da trguju ... I ja sam se također iznenadio - tko ih treba za 25 dolara? Ali na forumima. digitalpoint. com su upravo takva dodijeljena cijena. A s jednim ključem može se napraviti samo 1000 zahtjeva dnevno. Uvijek su imali takvo ograničenje. To jest, posjedujući jedan ključ i skriptu, morate provesti 10 dana na bazi 10.000. Pa, ili kupiti 10 ključeva, ali ne vrijedi svijeća. Besplatna skripta koja zahtijeva dodatnih 250 USD za vlastite tipke nije ozbiljna ...

    Međutim, za one koji poput mene imaju stare ključeve, ima smisla obratiti pozornost na tu mogućnost. Ali to nije za javno objavljivanje ... nažalost ...

    Osim toga, kupnja on-line ne jamči da u isto vrijeme niste kupili nekoliko desetaka kupaca od istog prodavatelja ;-)) i onda taj ključ postaje općenito beskoristan. To jest, morate kupiti samo od ovjerenih osoba koje mogu jamčiti jedinstvenost prodaje. A gdje ih uzeti?

    3. Kombinacija prvog s radom kroz proxy . Možete stvoriti nekoliko istovremenih tokova (iz različitih proxy poslužitelja, tj. S različitih IP adresa, oni će doći do googlea), od kojih će svaki izdržati razumne stanke, a zatim će se brzina cijelog skripta povećati koliko puta. to su uključeni.Ovdje poteškoća leži u pronalaženju RADNIKA iu isto vrijeme do istinski ANONIMNIH proxyja koji ne bi točno zasjali pravu IP adresu prije Googlea. Među desetinama, stotinama, pa čak i tisućama besplatnih proxy listi dostupnih na internetu nakon provjere ostaju djelomični postotci. Jučer sam testirao više od 2.000 proxy softvera - radilo se samo oko stotinu, a radilo je 20 anonimnih djela ... To jest, skripta mora biti opremljena i komponentom kao što je hvatanje popisa proxy poslužitelja i redovite provjere performansi. A ovo je odvojeno čudovište koje se dobiva. Znam takve radne sustave, čak koristim i plaćenu skriptu, ali je ne mogu izravno integrirati u ovu skriptu - samo kroz uvoz-izvoz. Međutim, ovaj problem je riješen, ali opet, masovni karakter upotrebe u ovom slučaju može se zaboraviti. Zašto sam ja sve ovo? Osim toga, napraviti skriptu "za sebe" je sasvim stvaran. Samo vam je potreban vaš vlastiti proxy checker ili kupljeni proxy poslužitelji. Oboje košta novac.

    4. Alternativa "za manijake" , 5-6 hosting je kupljen s otvorenim vezama za PHP skripte (ne dopušta ih svaka usluga hostinga, tj. Same PHP skripte sada su univerzalno dostupne, ali da bi te skripte imale “put” za uspostavljanje veza s vanjskim poslužiteljima, Ali, sasvim je moguće pronaći takve davatelje.Tada je napisana skripta koja dijeli, recimo, 1000 riječi na 5 dijelova po 200 i širi ih na 5 domaćina, gdje se tiho provjeravaju kao i obično bez ikakvih izmjena. 200 riječi obično prolazi ... i nd oni baciti rezultate natrag na „centralnom” skriptu da i pruža jedinstvenu sliku. To je kao proxy, a ne proxy u isto vrijeme 5 Ali cijena je 5 pružatelja hostinga - znate ... i mjesečno ... Lakše je kupiti proxy checker i pokrenuti sve iz Denvera ...

    5. Korištenje podataka iz Wordtracka ili druge slične usluge . Oni obično imaju konkurente prilično blizu Googleovim podacima za Sjedinjene Države. Popularnost ključnih riječi nas ne zanima, ovdje imamo Google trendove za pomoć, samo podatke o konkurentima ... No, opet, financijska strana pitanja ...

    Evo dogovora. Imam tendenciju da trajem. To jest, u samom scenariju, isključite nafig provjeru natjecatelja. I ganjaju sve kako bi pronašli pravi broj zahtjeva. I mi ćemo poslati "natjecatelje" (odbacujemo sve što tražimo previše rijetko ili prečesto) kako bismo provjerili svoje konkurente. Jedina stvar koja se ispostavi da je kombinacija s više prijelaza, ali ja bih htio "sve odjednom", ali za sada mi ova opcija izgleda prilično privlačno ( s obzirom na činjenicu da je još uvijek poželjno imati pretplatu na Wordtracker ili bilo koju drugu sličnu uslugu). Ali ako wordtracker nije pristupačan - opcije su raspoređene na sljedeći način:

    • sa starim ključevima (nije prikladno za svakoga);
    • s proxy poslužiteljima i izvršavanjem višestrukih upita (teško napraviti, ali stvarno
    • s nekoliko hostova (cijena može biti usporediva s cijenom Wordtracka).

    Povezani postovi:

    • Cijela istina o skrivanju
    • Kako brzo saznati o hakiranju bloga
    • Kako provjera dobiti lovca na dobitak
    • Povećajte pretvorbu online trgovine

    Volite li članke? Pretplatite se na newsletter!

    traži

    povezani članci