Como automatizar a consulta (CNPJ) de um protesto?
#rpa #nodejs #comunidadewebautomation #automacaoweb #cwa #bot Código fonte no final da descrição!
Nesta aula você vai aprender a como automatizar um navegador web, realizando ações humanas dentro de navegadores. Nós vamos automatizar a consulta de cpf e cnpj num site de consulta de protestos e vamos tirar um print do resultado da consulta.
Este projeto pode ser útil para você criar a sua primeira automação de forma simples, utilizando nodejs e pupppeteer.
#rpa #nodejs #excel #javascript #googlesheets
E na aula de hoje eu quero te mostrar algo muito importante para você automatizar processos de navegadores web que é a manipulação de planilhas do Google sheets.
O QUE VAI ME AJUDAR EU SABENDO MANIPULAR DADOS DE EXCEL E GOOGLE-SHEETS?
A importância de você saber isso é que muitas vezes a maioria das empresas, escritório de contabilidade setor financeiro e etc,
OU SEJA…
Muitas empresas utilizam o Excel para manipular as suas informações
DE QUE FORMA:
-FOLHA DE PAGAMENTO;
-CONTROLE FINANCEIRO;
-DADOS DE FUNCIONÁRIOS;
#cwa #puppeteer #comunidadewebautomation #webscraping #bot #rpa #nodejs
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
...
https://www.youtube.com/watch?v=LomO-4QHLmE
#cwa #comunidadewebautomation #webscraping #bot #rpa #mongodb #nodejs
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
Nesta aula nós vamos aprender a automatizar clicks em nossa automação web sem a necessidade da intervenção humana.Vamos usar o Nodejs com a biblioteca puppeteer.
#aulas_anteriores:
-AULA3: https://youtu.be/RyFJ7dCZTK4
-AULA2:https://youtu.be/iA_2HTvx8Ao
-AULA1:https://youtu.be/irW1qaSUb6w
...
https://www.youtube.com/watch?v=geyMmwKj1lg
#comunidadewebautomation #webscraping #bot #rpa #mongodb #nodejs #telegram
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
Nesta aula vamos criar o nosso projeto no git-hub e interagir com o bot do telegram, criando a estrutura básica de como será o nosso monitoramento de imóveis.Usando Javascript e Nodejs.
...
https://www.youtube.com/watch?v=skM-xbAAA0A
Nosso canal no Telegram:
https://t.me/webscraping_automacaonavegadores
Pode ocorrer com qualquer um, você faz seu web scraping todo cuidadoso no qual busca suas informações todos os dias, mas num determinado momento seu scraping pára de funcionar e você descobre que o problema é bloqueio do seu scraping com o seu ip de origem.E agora o que fazer?
Existe um contorno técnico, não é a bala de prata mas ajuda muito, que é utilizar um proxy externo.
Neste primeiro vídeo mostro como utilizar proxy gratuito e mostro suas vantagens e desvantagens.
Lista de proxys free:
https://free-proxy-list.net/
...
https://www.youtube.com/watch?v=QRciEx5k6xc
#cluster #cwa #comunidadewebautomation #webscraping #bot #rpa #nodejs
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
O que é cluster?
Para ficar claro o que é cluster, vamos fazer uma analogia:
Temos uma sorveteria 1 atendente e uma fila de 15 pessoas.
Esta atendente atende uma pessoa por vez, e o tempo de espera para ser atendido é grande, mas se colocarmos mais 4 atendentes,
Aí então será 5 pessoas sendo atendidas ao mesmo tempo e o tempo de espera será pouco.
Neste exemplo bem simples você pode ter ideia do que significa um cluster.
Em AUTOMAÇÃO WEB é isso, por exemplo se na sua automação precisa extrair informações de 200 sites,
se estiver apenas com uma instância de navegador web do puppeteer,
vc precisa esperar terminar uma consulta para iniciar a outra, vai demorar.
com cluster você pode fazer várias consultas simultaneamente
Baixando o tempo de demora da sua automação.
Eu vou te mostrar como é fácil fazer isso no puppeteer, deixándo-o clusterizado.
...
https://www.youtube.com/watch?v=8tBeQSdMgeM
#cwa #puppeteer #comunidadewebautomation #webscraping #bot #rpa #nodejs #excel #googlesheets
Nosso canal no #telegram :https://t.me/webscraping_automacaonavegadores
E na aula de hoje eu quero te mostrar algo muito importante para você automatizar processos de navegadores web que é a manipulação de planilhas de Excel e do Google sheets.
O QUE VAI ME AJUDAR EU SABENDO MANIPULAR DADOS DE EXCEL E GOOGLE-SHEETS?
A importância de você saber isso é que muitas vezes a maioria das empresas, escritório de contabilidade setor financeiro e etc,
OU SEJA…
Muitas empresas utilizam o Excel para manipular as suas informações
DE QUE FORMA:
-FOLHA DE PAGAMENTO;
-CONTROLE FINANCEIRO;
-DADOS DE FUNCIONÁRIOS;
ETC…
Então pode ser muito comum o seu cliente pedir para que você automatize CONSULTAS COM as informações contidas num arquivo Excel ou do arquivo do Google sheets por exemplo.
...
https://www.youtube.com/watch?v=BDvLu6d4AVY
#Telegram - canal
https://t.me/webscraping_automacaonavegadores
Neste vídeo eu te mostro como podemos extrair caracteres de imagens usando Nodejs e a biblioteca tesseract-ocr, no qual é baseado na engine TESSERACT,uma biblioteca de reconhecimento de texto de código aberto (OCR) para extrair texto impresso de imagens.
tesseract: https://tesseract-ocr.github.io/tessdoc/
node-tesseract-ocr : https://www.npmjs.com/package/node-tesseract-ocr
...
https://www.youtube.com/watch?v=R5wtgVxRO5k
Nosso canal no Telegram:
https://t.me/webscraping_automacaonavegadores
Neste vídeo mostro como você pode criar seu primeiro webscraping usando nodejs de forma muito simples.
...
https://www.youtube.com/watch?v=xD7Ao5HYA2w
Nossa aplicação é simples, nós vamos pegar frases de vídeos de um determinado canal do youtube realizando scraping e vamos classifica-las usando inteligência artificial com machine learning usando o algoritimo naive bayes.
Criar um back end em nodejs que baixe do youtube de determinado canal titulos de videos e classifique usando IA.
...
https://www.youtube.com/watch?v=A4I4NdrNPwU