WebScaper para tabela com paginação

Olá,
Utilizando o WebScraper (sitemap abaixo) não estou conseguindo raspar toda a tabela deste site https://covid.caxias.rs.gov.br pois ela está sendo exibida por páginas ou limitada pelo dropdown. É possivel contornar isso?

Explorando o Inspector vi também que o conteúdo pode ser visuazlizado aqui: https://sam2.caxias.rs.gov.br/sms/covid-paciente-rest/casos-por-bairro
Pode ser uma alternativa em converter o xml, porém queria saber se é possivel via WebScraper.

Muito obrigado.

{"_id":"caxias-covid-19","startUrl":["https://covid.caxias.rs.gov.br/"],"selectors":[{"id":"tabela","type":"SelectorTable","parentSelectors":["_root"],"selector":"table.dtr-inline","multiple":true,"columns":[{"header":"Bairro","name":"Bairro","extract":true},{"header":"Positivos","name":"Positivos","extract":true},{"header":"Óbitos","name":"Óbitos","extract":true},{"header":"Recuperados","name":"Recuperados","extract":true},{"header":"Ativos","name":"Ativos","extract":true},{"header":"Letalidade","name":"Letalidade","extract":true}],"delay":0,"tableDataRowSelector":"tbody tr","tableHeaderRowSelector":"thead tr"}]}
1 Curtida

Fausto, bem vindo ao Fórum! Você precisa mesmo usar o WebScraper nesse caso? Usando o Inspetor de Elementos > Network, dá para ver que os dados são carregados de uma API de forma estruturada já

https://sam2.caxias.rs.gov.br/sms/covid-paciente-rest/casos-por-bairro
https://sam2.caxias.rs.gov.br/sms/covid-paciente-rest/casos-por-faixa-sexo

2 Curtidas

Adriano,

Pois é, enquanto tentava melhorar a raspagem me dei conta destas saídas dedados. O objetivo e manter um coleta diária (já que não disponibilizam o histórico) para um grupo de acompanhamento do tema por bairros de alguns municípios aqui do RS.

Por enquanto estamos copiando e convertendo o xml para csv destes links usando um conversor online. Sou ainda iniciante no tema (fui aluno do último Dados 360) e vou pesquisar como posso manter este processo usando estas saídas dos links acima.

Muito obrigado.