Scrapowanie elementów strony

Witajcie, ktoś może podpowiedzieć/nakierować na narzędzie/rozwiązanie/skrypt, dzięki którym będę mógł scrapować elementy strony, linki, które nie są "widoczne" w źródle strony, czyli wyświetlają się w przeglądarce po wywołaniu skryptu np. javascript.
Chciałbym aby zescrapowane linki zapisywały się do pliku.

Ps. jeśli ktoś podpowie, rozwiąże mój problem, możemy się dogadać za określoną zapłatę.

Słowa kluczowe:
Parsowanie HTML
HtmlAgilityPack
xPath

Napisz co potrzebujesz zrobić a zrobię to za darmo

Python + scrapy
https://scrapy.org/

Aż znudów napisałem sobie prosty scraper:

W tym przypadku do każdego linku scrapuje 6 podobnych filmów.

Czy przypadkiem Chrome nie ma wtyczki Web Scraper ?

Nie chodzi mi o żadne wtyczki do przeglądarek czy inne programy deskoptowe, potrzebuję aby skrypt działał na stronie, podczas wejścia na witrynę w tle scrapował określone elementy, które są generowane dynamicznie poprzez skrypt javascript i zapisywał je do pliku txt tymczasowego znajdującego się na serwerze.

Postawię w najbliższych dniach stronę i podeślę użytkownikom zainteresowanym pomocą czy dadzą radę ogarnąć temat, jak tak, to się dogadamy.