Xmauzack_
02-10-2020 21:10:58
Olá pessoal do Forúm!
Pessoal, estou com o seguinte problema. Na empresa onde trabalho me colocaram com a responsabilidade de "cuidar" dos Backups dos clientes. Lá ocorre assim. O Backup é feito 2 vezes, 1 vez ele fica armazenado no próprio servidor do cliente e no outro ele é enviado à um repositório no DropBox. Quando o backup é feito na máquina é enviado uma informação para um site de gerenciamento da empresa e com Nome do cliente, data/hora etc... e o mesmo é feito quando ele "sobe" para a nuvem, mas este é enviado para um site do próprio DropBox.
Agora estão me pediram para ficar olhando quais clientes o backup ultrapassa 48 hrs de atraso e assim verificar o que está ocorrendo. o PROBLEMAAAAAA é que são mais de 300 clientes e olhar 1 por 1 é uma tarefa demasiadamente árdua.
Pensando nisso resolvi automatizar a tarefa, onde, com ajuda do Selenium e um pouco de VBA eu busco as informações dos 2 sites e assim posso criar um DashBoard que me traga somente informações necessárias para facilitar minha vida.
No Site de Gerenciamento da empresa foi tudo maravilhoso. Como os clientes e informações dos mesmos estão dispostos em tabela, me basta logar, acessar a parte de backups, buscar essa tabela pelo Xpath e enviar para o Excel apenas os elementos que me eram necessários. No DropBox que veio o problema. Lá existe a tabela com todos os clientes, mas as informações de cada um deles se encontram em paginas (http) separadas, ou seja, para acessar as informações de um determinado Cliente no DropBox eu preciso abrir uma outra página do site. Em resumo, para atualizar 300 clientes preciso abrir 300 paginas e é aqui o PROBLEMA.
Para abrir as páginas e buscar os dados, sem problemas, coloquei um "isElementPresent" para identificar o ultimo cliente (visto que pode aumentar e diminuir devido adesão e exclusão dos mesmos) e mandei um Do While para ir abrindo pagina por página e enviando ao Excel. Todavia, eu preciso dar um "delay" para o total carregamento da página (cerca de 10 segundos), ou seja, para atualizar cada cliente meu loop leva em torno de 11 segundos (10 de carregamento e 1 para todo o resto). Agora multiplique 11 segundos por 300 clientes e teremos "míseros" 3.300 segundos (55 minutos) para que todos os dados sejam trazidos para a planilha do Excel.
Diante do disposto acima, gostaria de saber se vocês conseguem imaginar uma solução mais viável, que possa fazer diminuir esse tempo, quem sabe para uns 15 minutos (não ideal, mas aceitável). Enquanto escrevia me ocorreu a opção de abrir de 10 em 10 páginas, talvez diminua consideravelmente (5~6 minutos totais), mas se tiverem outras ideias, estou aberto à experimentação.
Bom, é isso! Desde já agradeço, Obrigado!!!
Pessoal, estou com o seguinte problema. Na empresa onde trabalho me colocaram com a responsabilidade de "cuidar" dos Backups dos clientes. Lá ocorre assim. O Backup é feito 2 vezes, 1 vez ele fica armazenado no próprio servidor do cliente e no outro ele é enviado à um repositório no DropBox. Quando o backup é feito na máquina é enviado uma informação para um site de gerenciamento da empresa e com Nome do cliente, data/hora etc... e o mesmo é feito quando ele "sobe" para a nuvem, mas este é enviado para um site do próprio DropBox.
Agora estão me pediram para ficar olhando quais clientes o backup ultrapassa 48 hrs de atraso e assim verificar o que está ocorrendo. o PROBLEMAAAAAA é que são mais de 300 clientes e olhar 1 por 1 é uma tarefa demasiadamente árdua.
Pensando nisso resolvi automatizar a tarefa, onde, com ajuda do Selenium e um pouco de VBA eu busco as informações dos 2 sites e assim posso criar um DashBoard que me traga somente informações necessárias para facilitar minha vida.
No Site de Gerenciamento da empresa foi tudo maravilhoso. Como os clientes e informações dos mesmos estão dispostos em tabela, me basta logar, acessar a parte de backups, buscar essa tabela pelo Xpath e enviar para o Excel apenas os elementos que me eram necessários. No DropBox que veio o problema. Lá existe a tabela com todos os clientes, mas as informações de cada um deles se encontram em paginas (http) separadas, ou seja, para acessar as informações de um determinado Cliente no DropBox eu preciso abrir uma outra página do site. Em resumo, para atualizar 300 clientes preciso abrir 300 paginas e é aqui o PROBLEMA.
Para abrir as páginas e buscar os dados, sem problemas, coloquei um "isElementPresent" para identificar o ultimo cliente (visto que pode aumentar e diminuir devido adesão e exclusão dos mesmos) e mandei um Do While para ir abrindo pagina por página e enviando ao Excel. Todavia, eu preciso dar um "delay" para o total carregamento da página (cerca de 10 segundos), ou seja, para atualizar cada cliente meu loop leva em torno de 11 segundos (10 de carregamento e 1 para todo o resto). Agora multiplique 11 segundos por 300 clientes e teremos "míseros" 3.300 segundos (55 minutos) para que todos os dados sejam trazidos para a planilha do Excel.
Diante do disposto acima, gostaria de saber se vocês conseguem imaginar uma solução mais viável, que possa fazer diminuir esse tempo, quem sabe para uns 15 minutos (não ideal, mas aceitável). Enquanto escrevia me ocorreu a opção de abrir de 10 em 10 páginas, talvez diminua consideravelmente (5~6 minutos totais), mas se tiverem outras ideias, estou aberto à experimentação.
Bom, é isso! Desde já agradeço, Obrigado!!!