/ / Ako môžem pomocou Perl Google API načítať viac ako 1 000 výsledkov Google? - perl

Ako môžem načítať viac ako 1000 výsledkov Google pomocou Perl Google API? - perl

Používanie bežného vyhľadávacieho nástroja ako človeka vám nemôže priniesť viac ako 1 000 výsledkov, čo je omnoho viac, ako potrebuje bežný človek.

Ale čo keď chcem získať 2000? Je to možné? Čítal som, že je možné použiť App Engine alebo niečo podobné (tu) ... ale je to nejako možné urobiť cez Perl?

odpovede:

3 pre odpoveď č. 1

Neviem, ako sa okolo tohto limitu obísť, okrem použitia radu zdokonalených vyhľadávaní oproti jednému všeobecnému vyhľadávaniu.

Napríklad namiesto „Tim Medory“ by som sa mohol vyhľadať podľa:

Hľadanie č. 1: "Tim Medora Phoenix"

Vyhľadať # 2: "Tim Medora Boston"

Vyhľadať # 3: "Tim Medora Kanada"

Ak sa však snažíte pomocou služby Google vyhľadať a konkrétne stránky, možno si budete môcť prečítať súbory Sitemap spoločnosti Google pre dané stránky.

Napríklad www.linkedin.com vystavuje všetkých 80 miliónov + používateľov / firiem prostredníctvom série vnorených súborov XML mapy XML: http://www.linkedin.com/sitemap.xml.

Ak použijete túto metódu, môžete jednoducho prehľadávať konkrétne stránky pomocou vlastného vyhľadávacieho algoritmu, ak majú dobré súbory Sitemap Google.

V žiadnom prípade, samozrejme, nenavrhujem, aby ste využili mapu stránok na nezákonné / nepriaznivé účely.