Como usar o WebScraper para raspar dados com paginação na URL?

Essa é a url referente a primeira página
https://www.amazon.com.br/s?k=tolkien
Essa é a url referente a segunda página
https://www.amazon.com.br/s?k=tolkien&page=2

Queria saber qual url uso para englobar todas as páginas, a última página é a 20

1 Curtida

Luan, vc se refere ao webscraper? Pelo que entendi a paginação vai até a 7: https://www.amazon.com.br/s?k=tolkien&page=7&qid=1590781128&ref=sr_pg_7

Logo vc usaria no webscraper o seguinte: https://www.amazon.com.br/s?k=tolkien&page=[1-7]

1 Curtida

Vai até a página 20 pq no meu computador os livros estão dispostos um embaixo do outro. Mas muito obrigado, vou usar esse link!

Ah, sim. Bom trabalho

como pythonista joga um try e pronto