URLs-Links aus Pop-ups extrahieren, die oben auf der Webseite mit Shell-Skript angezeigt werden? - HTML, Linux, Shell, Webseite

So extrahieren Sie die URL-Links aus dem Popup, das oben auf der Webseite erscheint.

Ich habe versucht, wget, curl und lynx zu verwenden, aber wir werden Inhalt der ursprünglichen Seite no das Pop-up bekommen.

Suche nach einer effizienten Lösung, um die Links von der Webseite zu extrahieren und in diese zu graben, um mit Shell Script nach bestimmten Mustern zu suchen

Antworten:

Es gibt nicht viele geeignete Tools, und diese Sieerwähnt wird nicht funktionieren. Das Popup ist wahrscheinlich JavaScript (obwohl es andere Möglichkeiten gibt). Eine schnelle Suche im Internet nach "scrape links from javascript popup" zeigt einige Beispiele, ohne einfache Lösungen.

Hier sind ein paar:

Menschen mit ungelösten Problemen:

• Wie scrape Inhalt in Popup-Fenster mit JavaScript: Links mit scrapy gerendert
• Scraping Ajax / JS Pop-up

Menschen diskutieren Lösungen (mit Vorbehalten):

• Web Scraping von Ajax und Javascript Sites
• Ein Leitfaden für Web-Scraping-Tools