Sor Pinto
Sor Pinto
  • Видео 70
  • Просмотров 33 421
[AULA] Aprendizagem por Reforço e o Algoritmo Q-Learning
Aula introdutória de aprendizagem por reforço e algoritmo Q-Learning.
Google Colab: colab.research.google.com
Colab da Aula: colab.research.google.com/drive/1UDFu5vAXLE5VeS1z7FwjnBYEd4X15sxO?usp=sharing
Reinforcement Learning: An Introduction (2nd Edition): incompleteideas.net/book/RLbook2020.pdf (melhor livro do assunto, disponibilizado gratuitamente pelo próprio autor)
00:00 - Introdução
01:50 - Exemplo e Ambiente
03:37 - Q-Learning
09:02 - Exploração
12:09 - Fator de desconto
15:46 - Taxa de Aprendizagem
19:08 - Fórmula e exemplos
22:44 - Pseudocódigo
24:09 - Código
Просмотров: 1 317

Видео

Tudo sobre a ChatGPT (e como ela passa no ENEM e na USP!)
Просмотров 895Год назад
Tudo que você queria saber sobre a ChatGPT, mas tinha vergonha de perguntar. Link para a ChatGPT: chat.openai.com/chat ERRATA: De fato, foi testado um modelo (InstructGPT) 100x menor que a GPT-3 que produziu resultados melhores que ela, porém não é afirmado que este é o modelo disponibilizado ao público com a ChatGPT, como dei a entender. Na verdade, a OpenAI é bem fechada quanto a essas inform...
Cadastro e Login com PHP e MySQL
Просмотров 5702 года назад
Fazendo um sistema completo de cadastro e login em PHP com MySQL. Desculpem, o áudio ficou bizarro, não sei o que houve! E como a minha edição é feita automaticamente com base no áudio, ela também ficou bizarra -_- Ah, e faltou um item básico de segurança: método POST nos formulários! Com GET a senha pode ficar no histórico do navegador. 00:00 - Introdução 00:40 - Formulário de login 01:36 - Ba...
Introdução às Derivadas
Просмотров 1553 года назад
Aula de introdução às derivadas. Aulas de Cáculo I da USP: ruclips.net/p/PLAudUnJeNg4tr-aiNyYCXE46L3qEZ2Nzx 00:00 Introdução 06:40 Parábola, Regra da Potência 11:50 Segunda Derivada, Terceira, etc... 16:17 Definição de Derivada 21:15 Relação com Redes Neurais
Provas Lógicas
Просмотров 2013 года назад
Reforço para a aula de lógica proposicional, fazendo 2 provas passo-a-passo. ERRATA em 5:32: Eu quis dizer Modus-Tollens, não Ponens. Site onde encontrei os exercícios: calcworkshop.com/proofs/logic-proofs/ 0:00 Introdução 0:32 Prova 1 3:29 Prova 2
The Sensory Neuron as a Transformer | Artigo Explicado
Просмотров 1863 года назад
Review do artigo "The Sensory Neuron as a Transformer: Permutation-Invariant Neural Networks for Reinforcement Learning" de Yujin Tang e David Ha, ambos da Google Brain. Artigo: arxiv.org/abs/2109.02869 Página: attentionneuron.github.io/ 00:00 - Introdução 07:04 - Transformers 17:41 - Set Transformer 19:32 - Fim da Introdução 20:22 - Arquitetura e Fórmulas 27:56 - Experimentos
Algoritmos Genéticos (ou "Como tornar a sua IA FITNESS")
Просмотров 5073 года назад
Aula de algoritmos genéticos. Editor: webacademico.canoas.ifrs.edu.br/~rcpinto/editor/ Código-Fonte JavaScript: gist.github.com/rafaelcp/8bccbc80639684425c2f068bfb1ed571 0:00 - Introdução 9:14 - Representações 13:27 - Fitness 15:32 - Seleção 21:57 - Mutação 23:27 - Crossover 29:36 - Visualização geral do loop dos algoritmos genéticos 30:29 - Exemplo do problema da mochila 34:27 - Programação Ge...
Otimização Local - Hill Climbing e Simulated Annealing
Просмотров 3963 года назад
Aula de otimização local: hill climbing e simulated annealing. DEMO do robô rastejante com simulated annealing: webacademico.canoas.ifrs.edu.br/~rcpinto/robot2.html Fooplot: fooplot.com/ Código-fonte do Hill Climbing em JS: gist.github.com/rafaelcp/dea4e602d6988ce17e5874b9200b1185 0:00 - Introdução 2:41 - Hill Climbing (Subida da Colina) 19:40 - Simulated Annealing (Recozimento Simulado) 26:37 ...
Algoritmo K-Means (ou "Como Classificar Alienígenas")
Просмотров 4503 года назад
Aula de aprendizagem não-supervisionada. Clustering (aglomeração) com o algoritmo K-Means. Código-Fonte: colab.research.google.com/drive/1a9r_tj5kimvyOKGwOw0XqvDfFKlG0XQh?usp=sharing Scikit-Learn: scikit-learn.org/ 0:00 - Introdução 3:42 - Aplicações 6:09 - K-Means 11:02 - Exemplo no Excel 16:29 - Escolhendo o K (método do cotovelo / elbow method) 18:54 - Scikit-Learn 20:41 - Exemplo em Python ...
Redes Neurais (Deep Learning)
Просмотров 4013 года назад
Aula de redes neurais (deep learning). Código: colab.research.google.com/drive/1ScZ4Csx5miJ8_M7kGGhMAMPdMG8A9oNy?usp=sharing Weka: www.cs.waikato.ac.nz/ml/weka/ Detalhes que esqueci de comentar: 1) Em geral, considera-se como deep learning qualquer rede neurai com 2 ou mais camadas ocultas, mas é um conceito arbitrário. Muitos consideram 1 como suficiente; 2) Uma rede neural com uma única camad...
Introdução às Redes Neurais Artificiais
Просмотров 4123 года назад
Aula introdução às redes neurais artificiais. 0:00 - Introdução 2:53 - Neurônio Artificial 9:27 - Adaline 26:07 - Bias 29:23 - Perceptron 30:56 - Aprendendo a Porta AND
Regressão Linear (sem vidas passadas)
Просмотров 2903 года назад
Aula de regressão linear por mínimos quadrados. Material de aula: drive.google.com/file/d/1mDGr6bj-ITazOed_39v03JY_PhEnNzMx/view?usp=sharing Introdução à linguagem Python: ruclips.net/video/Q8eajxcS6dQ/видео.html Google Colab: colab.research.google.com Código visto em aula: colab.research.google.com/drive/1I5z0biwUp00KeOlisiT6RbQW4sHJJ6nU?usp=sharing 0:00 - Introdução 1:51 - Regressão Linear 7:...
Classificador Naïve Bayes
Просмотров 2063 года назад
Aula sobre o classificador Naïve Bayes. FooPlot: fooplot.com 0:00 - Introdução 0:46 - Revisão de Probabilidades 8:21 - Vantagens e Desvantagens 10:02 - Teorema de Bayes 17:34 - Exemplo das Lentes de Contato 28:41 - Entradas Contínuas 30:45 - Exemplo da Iris 33:49 - Imagens como entradas 36:58 - Distribuição Normal 41:17 - Voltando ao Exemplo da Iris
Algoritmo KNN (K-Nearest Neighbors, o algoritmo do carinha que mora logo ali)
Просмотров 5493 года назад
Algoritmo KNN (K-Nearest Neighbors, o algoritmo do carinha que mora logo ali)
Introdução à Aprendizagem de Máquina
Просмотров 4943 года назад
Introdução à Aprendizagem de Máquina
Busca Informada (Heurística) (do jeitinho que o GOOGLE MAPS gosta)
Просмотров 2983 года назад
Busca Informada (Heurística) (do jeitinho que o GOOGLE MAPS gosta)
Busca Não-Informada (busca do menor / melhor caminho)
Просмотров 4023 года назад
Busca Não-Informada (busca do menor / melhor caminho)
Algoritmo PageRank
Просмотров 3413 года назад
Algoritmo PageRank
Sistemas Especialistas
Просмотров 1,2 тыс.3 года назад
Sistemas Especialistas
Lógica Proposicional e de Predicados
Просмотров 6423 года назад
Lógica Proposicional e de Predicados
Uploads de Arquivos em PHP
Просмотров 2273 года назад
Uploads de Arquivos em PHP
Formulários HTML
Просмотров 2463 года назад
Formulários HTML
Introdução ao PHP
Просмотров 4583 года назад
Introdução ao PHP
Introdução ao Desenvolvimento Web
Просмотров 1673 года назад
Introdução ao Desenvolvimento Web
Introdução à Inteligência Artificial
Просмотров 1,6 тыс.3 года назад
Introdução à Inteligência Artificial
Introdução à Linguagem Prolog (feat. Game of Thrones)
Просмотров 1,6 тыс.3 года назад
Introdução à Linguagem Prolog (feat. Game of Thrones)
Algoritmo Minimax - Fazendo uma IA para o Jogo-da-Velha
Просмотров 4 тыс.3 года назад
Algoritmo Minimax - Fazendo uma IA para o Jogo-da-Velha
Introdução ao Processamento de Linguagem Natural (feat. Harry Potter)
Просмотров 8863 года назад
Introdução ao Processamento de Linguagem Natural (feat. Harry Potter)
AJAX com Fetch
Просмотров 1513 года назад
AJAX com Fetch
AJAX com jQuery
Просмотров 2503 года назад
AJAX com jQuery