Ciência de dados reinforcement-learning
Perguntas com a marcação «reinforcement-learning»
Área de aprendizado de máquina que se preocupa com como os agentes de software devem realizar ações em um ambiente de forma a maximizar alguma noção de recompensa cumulativa.
Qual é a função Q e qual é a função V no aprendizado por reforço?
Parece-me que a função pode ser facilmente expressa pela função e, portanto, a função parece ser supérflua para mim. No entanto, eu sou novo no aprendizado por reforço, então acho que entendi algo errado.VVVQQQVVV Definições O aprendizado de Q e V está no contexto dos processos de decisão de Markov …
30 machine-learning reinforcement-learning
Diferença entre a rede de políticas da AlphaGo e a rede de valores
Eu estava lendo um resumo de alto nível sobre o AlphaGo do Google ( http://googleresearch.blogspot.co.uk/2016/01/alphago-mastering-ancient-game-of-go.html ) e me deparei com os termos "política rede "e" rede de valor ". Em um nível alto, entendo que a rede de políticas é usada para sugerir movimentos e a rede de valores é …
25 machine-learning reinforcement-learning
O que exatamente é o bootstrapping no aprendizado por reforço?
Aparentemente, no aprendizado por reforço, o método da diferença temporal (TD) é um método de inicialização. Por outro lado, os métodos de Monte Carlo não são métodos de inicialização. O que exatamente é o bootstrapping no RL? O que é um método de inicialização no RL?
23 reinforcement-learning
O que é "repetição de experiência" e quais são seus benefícios?
Estive lendo DeepMind Atari do Google de papel e eu estou tentando entender o conceito de "experiência replay". A repetição da experiência aparece em muitos outros documentos de aprendizado por reforço (particularmente o artigo AlphaGo), então eu quero entender como isso funciona. Abaixo estão alguns trechos. Primeiro, usamos um mecanismo …
19 reinforcement-learning q-learning
AlphaGo (e outros programas de jogos usando aprendizado por reforço) sem banco de dados humano
Não sou especialista no assunto e minha pergunta é provavelmente muito ingênua. Ele decorre de um ensaio para entender os poderes e as limitações do aprendizado por reforço, conforme usado no programa AlphaGo. O programa AlphaGo foi construído usando, entre outras coisas (exploração de árvores em Monte-Carlo, etc.), redes neurais …
Aprendizado supervisionado vs aprendizado por reforço para um carro rc autônomo simples
Estou construindo um carro autônomo com controle remoto para se divertir. Estou usando um Raspberry Pi como computador de bordo; e estou usando vários plug-ins, como uma câmera Raspberry Pi e sensores de distância, para obter feedback sobre os arredores do carro. Estou usando o OpenCV para transformar os quadros …
Por que normalizamos as recompensas com desconto ao fazer o aprendizado de reforço do gradiente de políticas?
Estou tentando entender a abordagem do gradiente de política para resolver o problema da cartpole . Nesta abordagem, estamos expressando o gradiente da perda referente a cada parâmetro de nossa política como uma expectativa da soma dos gradientes de nosso gradiente de política para todas as ações em uma sequência, …
11 reinforcement-learning
Aprendizado de Reforço Cooperativo
Eu já tenho uma implementação para um único agente que trabalha em um problema dinâmico de precificação com o objetivo de maximizar a receita. O problema com o qual estou trabalhando, no entanto, envolve vários produtos diferentes que são substitutos um do outro, portanto, o preço dinâmico de todos eles …
10 machine-learning reinforcement-learning
implementando diferença temporal no xadrez
Estou desenvolvendo um programa de xadrez que utiliza o algoritmo de poda alfa-beta e uma função de avaliação que avalia posições usando os seguintes recursos: material, segurança, mobilidade, estrutura de peões e peças presas, etc. Minha função de avaliação é derivado do f( p ) = w1 1⋅ material + …
10 machine-learning algorithms reinforcement-learning
Reprodução priorizada, o que o Importance Sampling realmente faz?
Não consigo entender o objetivo dos pesos de amostragem de importância (IS) na reprodução priorizada (página 5) . É mais provável que uma transição seja amostrada a partir da reprodução da experiência, quanto maior o seu "custo". Meu entendimento é que o 'IS' ajuda a abandonar sem problemas o uso …
10 reinforcement-learning
O aprendizado por reforço pode ser aplicado à previsão de séries temporais?
9 time-series reinforcement-learning forecasting
Livros sobre Aprendizagem por Reforço
Eu tenho tentado entender o aprendizado por reforço há algum tempo, mas de alguma forma não consigo visualizar como escrever um programa para aprender por reforço para resolver um problema do mundo da grade. Você pode me sugerir alguns livros que me ajudariam a construir uma concepção clara do aprendizado …
9 machine-learning books reinforcement-learning
De que conhecimento eu preciso para escrever um programa simples de IA para jogar um jogo?
Eu sou formado em Direito. Um dos meus cursos foi 'Introdução ao aprendizado de máquina', e eu sempre quis fazer um projeto pessoal nesse assunto. Recentemente, ouvi falar sobre diferentes treinamentos de IA para jogar jogos como Mario, Go, etc. Que conhecimento eu preciso adquirir para treinar um simples programa …