#cwa #comunidadewebautomation #rpa #nodejs #javascript #cli #automacaoweb #puppeteer
Nesta aula você vai aprender a automatizar a pesquisa de computadores a venda e documentar esta consulta em arquivos pdf.
Usando Nodejs, Javascript e Puppeteer.
Esta aplicação é executada em ambiente CLI (linha de comando) no seu ms-dos do windows ou no seu bash, caso você use linux.
O que é CLI? Command Line Interface: significa Interface de Linha de Comando.Onde permite que os usuários digitem comandos de texto dando instruções a um computador para fazer funções específicas.
Quais as vantagens de criar APP em CLI?
-Baixo consumo de recursos do servidor ou computador;
-Rapidez em executar tarefas;
Nosso grupo no telegram:
https://t.me/webscraping_automacaonavegadores
...
https://www.youtube.com/watch?v=CEl14Wj2EWc
Nosso canal no Telegram:
https://t.me/webscraping_automacaonavegadores
Basicamente tornamos automático as ações manuais executadas em nosso navegador, como por exemplo a autenticação de usuário.
Vamos utilizar a biblioteca chamado PUPPETEER que vai executar o trabalho de automação do nosso navegador, este projeto é mantido pela mesma equipe do chrome, chromium.
Por padrão o puppeteer executa a última versão do Chromium , mas pode ser executado com o seu chrome local.
...
https://www.youtube.com/watch?v=M-jFYhOfero
#rpa #nodejs #comunidadewebautomation #automacaoweb #cwa #bot
Código fonte no final da descrição!
Nesta aula você vai aprender a como automatizar um navegador web, realizando ações humanas dentro de navegadores.
Nós vamos automatizar a consulta de cpf e cnpj num site de consulta de protestos e vamos tirar um print do resultado da consulta.
Este projeto pode ser útil para você criar a sua primeira automação de forma simples, utilizando nodejs e pupppeteer.
E entrar no mundo da automação web.
#cwa - ACESSO A COMUNIDADE WEB AUTOMATION: https://pedropachecodev.com.br/
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
Comunidade Web Automation #CWA:
https://pedropachecodev.com.br/
#Codigo_fonte: https://github.com/pedroalpacheco/RPA-CONSULTA_PROTESTO-CPF
...
https://www.youtube.com/watch?v=EKxAsjdjzqM
Nosso canal no Telegram:
https://t.me/webscraping_automacaonavegadores
Neste video eu quero mostrar de forma didatica como fazer scraping para pegar a cotação do dolar do dia usando nodejs com javascript.
Sraping, para quem não sabe é extrair dados de um site de forma automatizada.
Vamos extrair de forma automática a cotação do dólar disponibilizada no site do banco central.
Com a técnica de scraping você pode usar para centralizar informações espalhadas por outros sites, cruzar informações, armazenar os dados coletados num banco de dados e até alimentar algoritmos de treinamento de inteligencia artificial.
Vamos codar….
...
https://www.youtube.com/watch?v=36YwX1sD7jc
#cluster #cwa #comunidadewebautomation #webscraping #bot #rpa #nodejs
Nosso canal no #telegram:https://t.me/webscraping_automacaonavegadores
O que é cluster?
Para ficar claro o que é cluster, vamos fazer uma analogia:
Temos uma sorveteria 1 atendente e uma fila de 15 pessoas.
Esta atendente atende uma pessoa por vez, e o tempo de espera para ser atendido é grande, mas se colocarmos mais 4 atendentes,
Aí então será 5 pessoas sendo atendidas ao mesmo tempo e o tempo de espera será pouco.
Neste exemplo bem simples você pode ter ideia do que significa um cluster.
Em AUTOMAÇÃO WEB é isso, por exemplo se na sua automação precisa extrair informações de 200 sites,
se estiver apenas com uma instância de navegador web do puppeteer,
vc precisa esperar terminar uma consulta para iniciar a outra, vai demorar.
com cluster você pode fazer várias consultas simultaneamente
Baixando o tempo de demora da sua automação.
Eu vou te mostrar como é fácil fazer isso no puppeteer, deixándo-o clusterizado.
...
https://www.youtube.com/watch?v=8tBeQSdMgeM
Nossa aplicação é simples, nós vamos pegar frases de vídeos de um determinado canal do youtube realizando scraping e vamos classifica-las usando inteligência artificial com machine learning usando o algoritimo naive bayes.
Criar um back end em nodejs que baixe do youtube de determinado canal titulos de videos e classifique usando IA.
...
https://www.youtube.com/watch?v=A4I4NdrNPwU
#Telegram - canal
https://t.me/webscraping_automacaonavegadores
Neste vídeo vamos raspar os dados de todas as paginas de produtos.
Como o Web Scraping pode te ajudar a gerar um novo empreendimento?
Há algum tempo atrás um inscrito aqui do canal estava com uma ideia de criar uma api para fornecer dados de remédios. Na época ele estava com algumas dificuldades, se não me engano em raspar os dados de um site com dados de remédios e não pude dar suporte pois estava iniciando uma nova turma do curso web scraping e automação de navegadores.
a idéia que me foi apresentada era de monitorar o preço dos medicamentos dos principais fornecedores e disponibilizar uma api com estas informações.
...
https://www.youtube.com/watch?v=AQaBjDGQufo
#cluster #cwa #puppeteer #comunidadewebautomation #webscraping #bot #rpa #nodejs #puppeteer-cluster
Nesta aula você vai aprender a criar a sua primeira automação clusterizada usando NODEJS e PUPPETEER.
Vamos criar um CRAWLER com a arquiterura de um cluster, onde vai ser tratado os principais erros de automação e controle de execução da mesma.
#aula_anterior: https://youtu.be/8tBeQSdMgeM
Nosso canal no
#telegram:https://t.me/webscraping_automacaonavegadores
...
https://www.youtube.com/watch?v=PIGjhzQLKp0