Web Scraping com Excel VBA - Extraindo Dados de Sites com Varias Paginas

Поділитися
Вставка
  • Опубліковано 16 гру 2024

КОМЕНТАРІ • 71

  • @josecasimiropinheiro4104
    @josecasimiropinheiro4104 Рік тому +4

    A pedagogia do Marcelo está muito acima do que se encontra no mercado. E este é mais um exemplo. Quem quiser aprender realmente com metodologia veja o curso dele.

  • @cristianluisteixeirafrc8435
    @cristianluisteixeirafrc8435 Рік тому +8

    agora eu entendo o porque é necessário paralisar o desenvolvimento de uma linguagem, se o VBA continuasse a evoluir diariamente seria um pareo duro de mais para o surgimento de novas linguagens e todo o comércio que esse surgimento propicia. VBA ainda é muito contemporâneo e mágico na mão do Alquimista da programação o Mestre Nascimento. Parabéns!!!

  • @samuel.oliveiraBRA
    @samuel.oliveiraBRA Рік тому +4

    Marcelo,
    Dentro de todos os devs em VBA, você é o melhor e sua didática e talento são incríveis. Meus parabéns!

  • @hardwarelouco
    @hardwarelouco Рік тому

    Cara.. essa dica foi matadora.. amanhã mesmo vou tentar aplicar no meu trabalho pq preciso pegar os preços de uns produtos no mercado livre. Pensei que ia ter que fazer isso com Python, mas a sua dica chegou em ótima hora.
    Super obrigado por compartilhar.
    😎

  • @OrganicSheets
    @OrganicSheets Рік тому +1

    Ótimo conteúdo como sempre, valeu Nascimento.

  • @andrelucasdeoliveiramoreir3958
    @andrelucasdeoliveiramoreir3958 10 місяців тому

    muito bom! Cria mais vídeos com esse proposito amigo!

  • @alexalvessantos8456
    @alexalvessantos8456 Рік тому

    Grande Marcelo. Como sempre conteúdo de primeiríssima qualidade. Sucesso!!

  • @marcosfavero4176
    @marcosfavero4176 Рік тому

    Show Nascimento... Muito bom...

  • @AgnaldoPinheiro
    @AgnaldoPinheiro 8 місяців тому +1

    Conteúdo top. Obrigado por compartilhar.

  • @fnakajima
    @fnakajima Рік тому

    Chapado! Parece magia!

  • @samuelguilherme2367
    @samuelguilherme2367 Рік тому

    Sempre um conteúdo muito limpo e bem explicado!

  • @carloseduard317
    @carloseduard317 Рік тому

    Grande aula meu amigo. Bom demais.

  • @joaovictors.rodrigues6197
    @joaovictors.rodrigues6197 Рік тому

    parabéns
    pelo trabalho adorei

  • @lucascavalcante8411
    @lucascavalcante8411 Рік тому

    🤯 top demais! 👏🏻👏🏻👏🏻

  • @lucasmenezesn2013
    @lucasmenezesn2013 Рік тому

    O brabo do VBA

  • @niltondasilva5174
    @niltondasilva5174 Місяць тому

    Eu ainda não conhecia esta forma de fazer webscraping. Interessante a abordagem. Fiz o teste e achei estranho que alguns dos itens não são extraídos. Continuo estudando para ver se descubro o motivo de pular alguns itens.

  • @hardwarelouco
    @hardwarelouco Рік тому

    Nascimento, sua didática é boa demais. Aqui já deu certo pegar os dados do ML, apenas nome e preço.
    Se vc puder, nos ensinar por favor, como pegar o link do texto. Exemplo: no ML tem o nome do produto e um link e tô precisado além do nome e do preço, pegar o link no mesmo elemento Nome, mas não estou acertando.
    Desde já muito obrigado.

    • @DevNascimento
      @DevNascimento  Рік тому +1

      Opa Mauricio, entao, você pode usar o método "getAttribute".
      Por exemplo:
      Dim linkElement As Object
      Set linkElement = html.getElementsByClassName("text-muted")(0) ' Ajuste o índice conforme necessário
      Dim link As String
      link = linkElement.getAttribute("href")

    • @hardwarelouco
      @hardwarelouco Рік тому

      Deu certo, amigo. Muito obrigado. Mandou bemzasso. Abraço e mais uma vez, muito obrigado. @@DevNascimento

    • @Ronaldoengcivil
      @Ronaldoengcivil 7 місяців тому

      @@DevNascimento Havia perguntado la em cima mas encontrei aqui a resposta. Não entendi sobre o ajuste do índice. Deu tudo certo, mas pegar o link ainda não. COpiei exatamente como o exemplo que você fez. Não sei nada de programação, vendo seu vídeo fiz igualzinho e ficou top !!!

  • @wagnermartins6398
    @wagnermartins6398 7 місяців тому

    Achei maneiro! vlw, tem algum vídeo que explica como inserir texto na página? seguindo seu exemplo, eu preencher a busca com dados da planilha?

  • @adminestaut7376
    @adminestaut7376 5 місяців тому

    Fantástico!!
    Simples rapido e objetivo.
    Grato d+
    Até demorei um pouco para conseguir ajustar aqui rsrs, mas no fim deu certo e ainda consegui fazer algumas melhorias para minha realidade..
    Só não consegui ainda migrar este cod para as pesquisas google, teria algum material?
    Mas desde já vlw

  • @pateznina
    @pateznina Рік тому

    Não tenho duvida nenhuma muito legal como sempre, só queria resolver o problema do menu que o botão não funciona

  • @AdrianoMateucci-n4o
    @AdrianoMateucci-n4o Рік тому +1

    Excelente.. só uma duvida daria para usar o Chrome ou somente mozilla ?

  • @ronaldrox
    @ronaldrox 11 місяців тому

    Muito bom o conteúdo. Eu gostaria de saber se existe aplicabilidade desse método para automação de pesquisa em uma página. Trabalho com pesquisas de registros de medicamentos no site da anvisa, teria uma maneira de automatizar essas pesquisas e salvar o arquivo em pdf?

  • @carlosfinholdt4190
    @carlosfinholdt4190 7 місяців тому

    Excelente!

  • @Ronaldoengcivil
    @Ronaldoengcivil 7 місяців тому

    Obrigado por compartilhar seu conhecimento, me ajudou muito, fiz e deu tudo certo. Porém ainda preciso do link do anúncio, ou pelo menos que a informação na planilha traga o link ou hiperlink em uma das células, para que eu consiga visitar o anúncio posteriormente. Como faço para consegui extrair a informação do link? Por exemplo, esse link que está em ( href)

  • @arthurtrindade5242
    @arthurtrindade5242 3 місяці тому

    Gostei demais da explicação. Parabéns. Estou procurando ajuda para fazer o contrário, preciso inserir um valor em um campo HTML. Por exemplo, tenho o seguinte form:
    E preciso usar o VBA para preencher esse campo. Como faria?

  • @SmokesCS2
    @SmokesCS2 3 місяці тому

    no meu esta dando erro no script quando vou em por dados da web

  • @paulocesarzc
    @paulocesarzc 8 місяців тому

    Marcelo, desculpa minha falta de informacao... mas fiquei em duvida na parte do HEADER. Voce disse que poderia ser qualquer um, mas eu não sei o que isso faz e pra que serve. Eu não uso mozila no computador, tem problema fazer igual vc fez? Se quisesse usasr Chrome no lugar, como ficaria?

    • @DevNascimento
      @DevNascimento  8 місяців тому +1

      Oi Paulo, na verdade esse método não diferencia o navegador que você usa, ele sempre pegará o navegador padrão do seu sistema

    • @paulocesarzc
      @paulocesarzc 8 місяців тому

      @@DevNascimento ok, mto obrigado por esclarecer.

  • @Délcioculprahmin
    @Délcioculprahmin Місяць тому

    Porra muito bom. E agora esse mesmo conceito consegue usar ora raspar dados de 10 paginas denuma vez por exemplo?

  • @Diegowell25
    @Diegowell25 Рік тому

    No site que quero extrair os dados as classes ficam alterando o nome, só tem atributos data-id, como trabalha capturando eles para selecionar o elemento?

  • @mayke007
    @mayke007 2 місяці тому

    Se eu não definir a quantidade de paginas? ele fica em loop até ler todas as paginas disponiveis, pq vai ter paginas que esse numero de paginas pode variar, exemplo: essa semana a na pagina teve 5 paginas, mas na outra senaa apareceu 8 paginas.... eu não defino o numero de paginas ??? qual a solução ?

  • @teteudev
    @teteudev 7 місяців тому

    O site que eu quero extrair os dados não atualiza a URL quando eu mudo a pagina da lista, como posso fazer nesse caso?
    Outra coisa é que nessa lista, cada elemento possui imagens associadas a ele, mas só consigo vê-las quando eu clico no elemento, que ai redireciona para outra pagina, tem como capturar as imagens de cada elemento?

  • @Diegowell25
    @Diegowell25 Рік тому

    Preciso pegar dados de um site onde só aparece as informações quando estou logado, isso é possível?

  • @msantos5967
    @msantos5967 Рік тому

    Tem a planilha p disponibilizar

  • @iltonrotta
    @iltonrotta Рік тому

    olá tem como baixar a imagem dos produtos que apearecem na pagina do site? e sendo 5 sites diferentes?

    • @DevNascimento
      @DevNascimento  Рік тому

      Tem sim, basta capturar o link das imagens e inserir dentro da função imagem

  • @MontgomeryMastersonVieira
    @MontgomeryMastersonVieira 8 місяців тому

    Cara fiz igualzinho você e o meu da "erro 91, não encontrado bloco with ou variavel', isso se dá quando um dos elementos não é encontrado, então nessa linha "http.Open "GET", url, False" o código não acha a variável, mas se colar a o endereço no navegador abre a pagina. Não consegui resolver.

    • @1591597531
      @1591597531 7 місяців тому

      Observe se você colocou as barras invertidas.

  • @cleutonribeiro8395
    @cleutonribeiro8395 9 місяців тому

    muito top sua explicação, tentei aqui porem nao funcionou pro que eu queria se tiver algum meio de contato email agradeço

  • @wengcarlos7689
    @wengcarlos7689 8 місяців тому

    Como eu faria pra rodar no Edge?

  • @alexandreagostini382
    @alexandreagostini382 Рік тому

    Da pra fazer isso na casa dos dados

  • @MrSuperrhaull
    @MrSuperrhaull 5 місяців тому

    nao consigo fazer com a coluna do telefone Te

    • @niltondasilva5174
      @niltondasilva5174 Місяць тому

      Primeiro tem que informar de onde virá a informação do telefone: Set tel = html.getElementsByClassName("botao loga-class ver-tel") e dentro do loop onde vai salvar a informação e como ela será coletada pl.Cells(uLin + 1, 3).Value = tel.Item(j).getAttribute("data-telefone"). Repare que foi adicionado o atributo data-telefone, pois o número do telefone está dentro deste atributo. Se não indicar o atributo não consegue extrair o número do telefone.

  • @systen3268
    @systen3268 Рік тому

    o meu esta dando erro nessa linha "Dim html As New MSHTML.HTMLDocument " a mensagem é "ERRO DE COMPILAÇÃO - O TIPO DEFINIDO PELO USUÁRIO, NÃO FOI DEFINIDO" sou iniciante no projeto, alguém consegue me ajudar

    • @niltondasilva5174
      @niltondasilva5174 Місяць тому

      Precisa entrar em Ferramentas e depois em referências para habilitar o Microsoft XML, v 6.0 e Microsoft HTML Object Library conforme mostra a partir deste trecho do vídeo 2:12.

  • @cleitonalves2875
    @cleitonalves2875 Рік тому

    Marcelo, seria possível baixar um arquivo pdf utilizando essa metodologia?

    • @DevNascimento
      @DevNascimento  Рік тому

      Qual seria o site ?

    • @cleitonalves2875
      @cleitonalves2875 Рік тому

      @@DevNascimento é um site interno da empresa onde eu trabalho, ao entrar ele não exige senha, acredito que deva usar as credenciais do windows. Mas vc acha que seria possível? E tem uma outra coisa que acontece, quando entramos nesse site, precisamos inserir o código do pdf que precisa baixar, clicar em um determinado link que irá abrir uma nova aba e depois que podemos obter o acesso a um botão que faz o download do arquivo.

    • @cleitonalves2875
      @cleitonalves2875 Рік тому

      @@DevNascimento então a ideia era ter uma lista dos códigos dos arquivos pdf que precisam ser baixados. E depois fazer um loop baixando um por um.

    • @DevNascimento
      @DevNascimento  Рік тому

      @@cleitonalves2875 Acredito que somente usando Selenium

    • @cleitonalves2875
      @cleitonalves2875 Рік тому

      @@DevNascimento entendi, ok Muito obrigado

  • @GabrielGestorMarketingplace

    No meu não deu certo 😢

  • @rafaelbec3310
    @rafaelbec3310 Рік тому

    Na verdade seria bom dar uma olhada se não existe algum atributo que referencie a quantidade de páginas máximas, para deixar dinâmico.
    Sem ficar dinâmico as páginas fica meio incompleto a proposta

    • @DevNascimento
      @DevNascimento  Рік тому

      Claro que existe Rafael, tem tudo no meu curso de VBA 🤝

  • @Fybet
    @Fybet 9 місяців тому

    boas, to precisando de alguém para fazer esse serviço pra mim e depois filtrar os dados com um filtro de diferença de valor, tudo automático para uso diário. Alguém se abilita ?

    • @euricolemos9527
      @euricolemos9527 6 місяців тому +1

      Já resolveu? Tá precisando do serviço ainda?

    • @Fybet
      @Fybet 6 місяців тому

      @@euricolemos9527 to precisando ainda

  • @matheusgamer35
    @matheusgamer35 Рік тому

    Cara me ensina a deixar o VBE parecendo o visual studio code pelo amor de Deus kkkkkkk, eu trabalho com vba e quase fico cego com a telona branca

    • @DevNascimento
      @DevNascimento  Рік тому

      Tem um vídeo aqui no canal ensinando, basta entrar no canal e pesquisar por "Como mudar a cor de fundo do editor VBA"

    • @matheusgamer35
      @matheusgamer35 Рік тому

      @@DevNascimento achei aqui mano, infelizmente a alcoa não permite que eu mexa nas pastas, mas vou usar no meu computador pessoal kkkkkk valeu!

  • @brendonmachado7321
    @brendonmachado7321 11 місяців тому

    Explica bem, mas muito rapido, é preciso ficar voltando várias vezes o video para entender e acompanhar

    • @DevNascimento
      @DevNascimento  11 місяців тому

      Boa noite Brendo. Você pode reduzir a velocidade do vídeo, você encontrará essa opção no botão que fica no canto inferior esquerdo do vídeo