/ / Jak mogę pobrać ponad 1000 wyników Google za pomocą interfejsu API Perl Google? - perl

Jak mogę pobrać ponad 1000 wyników Google za pomocą interfejsu API Google Perl? - perl

Dzięki zwykłej wyszukiwarce, jako człowiek, możesz uzyskać nie więcej niż 1000 wyników, co jest znacznie więcej niż potrzeba zwykłej osobie.

Ale co, jeśli chcę uzyskać 2000? Czy to możliwe? Czytałem, że jest to możliwe przy użyciu App Engine lub czegoś podobnego (tutaj ...), ale czy jest to możliwe, aby to zrobić za pośrednictwem Perla?

Odpowiedzi:

3 dla odpowiedzi № 1

Nie znam sposobu na obejście tego limitu, poza zastosowaniem szeregu wyrafinowanych wyszukiwań w porównaniu z jednym ogólnym wyszukiwaniem.

Na przykład zamiast tylko „Tim Medora” mogę szukać siebie przez:

Szukaj # 1: „Tim Medora Phoenix”

Szukaj # 2: „Tim Medora Boston”

Szukaj # 3: „Tim Medora Canada”

Jeśli jednak próbujesz użyć Google do wyszukiwania konkretna strona, możesz odczytać mapy witryn Google.

Na przykład www.linkedin.com ujawnia wszystkie 80 milionów + użytkowników / firm za pomocą serii zagnieżdżonych plików XML map witryn: http://www.linkedin.com/sitemap.xml.

Korzystając z tej metody, możesz łatwo indeksować określoną witrynę za pomocą własnego algorytmu wyszukiwania, jeśli mają dobre mapy witryn Google.

Oczywiście nie sugeruję, abyś wykorzystywał mapę witryny do nielegalnych / nieprzyjaznych celów.