/ / Come posso recuperare più di 1000 risultati di Google con l'API di Google Perl? - Perl

Come posso recuperare più di 1000 risultati di Google con l'API di Google Perl? - Perl

HUsando il normale motore di ricerca, come un essere umano, puoi ottenere non più di 1000 risultati, che è molto più di quanto una persona normale abbia bisogno.

Ma cosa succede se voglio ottenere 2000? È possibile? Ho letto che è possibile utilizzare l'App Engine o qualcosa di simile (qui ...), ma è possibile, in qualche modo, farlo attraverso Perl?

risposte:

3 per risposta № 1

Non conosco un modo per aggirare questo limite, oltre a utilizzare una serie di ricerche raffinate rispetto a una ricerca generale.

Ad esempio invece di solo "Tim Medora", potrei cercare me stesso:

Cerca n. 1: "Tim Medora Phoenix"

2: "Tim Medora Boston"

Cerca n. 3: "Tim Medora Canada"

Tuttavia, se stai cercando di utilizzare Google per cercare a sito particolare, potresti essere in grado di leggere le sitemap di quel sito su Google.

Ad esempio, www.linkedin.com espone tutti gli 80 milioni + utenti / aziende tramite una serie di file XML Sitemap annidati: http://www.linkedin.com/sitemap.xml.

Utilizzando questo metodo, puoi eseguire la scansione di un sito specifico abbastanza facilmente con il tuo algoritmo di ricerca se dispongono di buone sitemap di Google.

Naturalmente, non sto affatto suggerendo di sfruttare una mappa del sito per scopi illegali / ostili.