Extrair textos de site sem tabela

Bruno Capelli

09-02-2021 18:26:33

Boa Tarde pessoal.

Estou realmente travado com um problema, preciso entrar e extrair os dados de uma pagina da internet neste modelo abaixo:
https://www.casasbahia.com.br/mondial/b
acontece que nesta pagina não ha tabelas apenas imagem, textos e preços, preciso apenas dos textos (nomes dos produtos) e preços (dos produtos). de todos os produtos nao apenas de uma unica pagina pois ha um botao no final da mesma que leva pra uma segunda depois terceira depois quarta e por diante!
Alguem consegue me ajudar, por favor?

Raygsson

10-02-2021 20:39:12

Como você esta tentando extrair essas informações? mostre o seu código
O site esta bem estruturado, as informações estão numa lista de produtos, com classes e tudo.
Inicialmente tem apenas 21 produtos do total de 2.635, vai carregando aos poucos conforme clica no botão 'Ver Mais Produtos".
No Internet Explorer o site não abriu bem, é viável fazer a rotina pelo Chrome (Selenium).
Analise.jpg
Outra opção é fazer a chamada pra API das Casas Bahia, uma chamada pra cada página de resultados (21 ou até 100 produtos por vez) e fazer a leitura do texto retornado/JSON , nesse caso não precisa abrir navegador. A URL que retorna os resultados é essa https://prd-api-partner.viavarejo.com.b ... casasbahia
API.JPG

Bruno Capelli

10-02-2021 23:46:02

Raygsson, muito obrigado pelo apoio!

eu nao tenho muita experiencia, o codigo que montei extrai apenas um item por vez, consegui desenvolver usando o selenium vba. mas abaei descartando pq nao era nem um pouco vialvel.

o site esta estruturando os dados de um jeito que nao facilita muito, eu gostaria se possivel de um codigo que traga apenas a descricao de todos os produtos e o preco. vc acha que é possivel?

Raygsson

11-02-2021 01:00:46

O que vai demorar mais será você clicar varias vezes no botão pra carregar todos os produtos.

Código: Selecionar todos

Sub Exemplo()
On Error Resume Next
Dim driver As ChromeDriver
Set driver = New ChromeDriver

driver.Get "https://www.casasbahia.com.br/mondial/b"

MsgBox "Antes de prosseguir carregue todos os produtos na página de resultados!", vbInformation, "Aviso"

Set produtos = driver.FindElementsByXPath("//li[@class='ProductCard__Wrapper-sc-2vuvzo-6 iWpyBK']")

For Each produto In produtos
    desc = produto.FindElementByCss("p[class='ProductCard__Title-sc-2vuvzo-0 kCWdGv']").Text
    preço = produto.FindElementByCss("span[class='ProductPrice__PriceValue-sc-1tzw2we-6 bWkccE']").Text
    Debug.Print desc & " - " & preço
Next

End Sub

Bruno Capelli

11-02-2021 03:29:28

Raygsson, cara testei o codigo em modulo mas nao consegui faze-lo trazer a relçao para o excel me desculpa a ignorancia mas poderia mas uma vez me auxilar?

Eu copiei o codigo colei em um novo modulo e gerei
No site cliquei varias vezes no botao "ver mais produtos" e so então dei ok na msgbox
mas pra onde vai a extração?
O codigo começa e termina sem erros mas nao traz nada do site!
Me ajuda?

Raygsson

11-02-2021 03:50:38

No exemplo os resultados estão sendo exibidos na Janela de inspeção de variáveis (debug.print), não está colocando na planilha. Você precisa apenas ajustar essa parte , no loop For preencher as variáveis Desc e Preço na sua planilha. Não esqueça de a cada volta incrementar uma linha pra preencher abaixo da anterior.

Bruno Capelli

11-02-2021 13:30:33

Raygsson, Bom dia!

Acho que consegui, muito obrigado, vc poderia me ajudar apenas com mais uma questão, por favor?
Como eu faço para achar estes valores:

driver.FindElementsByXPath("//li[@class='ProductCard__Wrapper-sc-2vuvzo-6 iWpyBK']")
desc = produto.FindElementByCss("p[class='ProductCard__Title-sc-2vuvzo-0 kCWdGv']").Text
preço = produto.FindElementByCss("span[class='ProductPrice__PriceValue-sc-1tzw2we-6 bWkccE']").Text

Pq irei precisar fazer pesquisa em outros sites!

Grato

Raygsson

11-02-2021 14:28:06

Esses elementos mudam em cada site, precisa inspecionar pelo navegador.
Pra conseguir desenvolver os Web Scraping da vida é essencial aprender a analisar o HTML da pagina e manipular os elementos com Selenium. No YouTube tem bastante material ensinando, vale a pena passar algumas horas por lá rs