Descubra o avanço dos pesquisadores da New York University que desenvolveram uma técnica de ponta que capacita drones a dominar voo estável em meros 18 segundos. Aproveitando o poder de um MacBook Pro padrão, essa tecnologia revolucionária utiliza ambientes simulados para treinar drones a pairar e percorrer rotas pré-determinadas de forma ágil.
Velocidade de Treinamento Notável: Em uma sessão incrivelmente rápida de 18 segundos, os drones aprendem manobras de voo sofisticadas. Abordagem inovadora que não se restringe a modelos básicos - é versátil o suficiente para treinar qualquer drone, seja ele uma variante complexa e mais avançada ou uma unidade personalizada.
Destaques da Inovação:
- Aprendizado Profundo de Ponta a Ponta: Utilizando aprendizado profundo de reforço, os drones alcançam controle de percepção para ação sem etapas intermediárias complexas, aprimorando a estratégia de controle em termos de diretividade e eficiência.
- Modelo Assimétrico Actor-Critic: Um framework pioneiro de RL (aprendizado por reforço) que divide as funções; ‘atores’ decidem usando processos de estado para ação, enquanto ‘críticos’ avaliam movimentos com dados de simulação adicionais, acelerando o aprendizado.
- Simulador Otimizado: Possuindo a capacidade de espelhar aproximadamente 5 meses de tempo de voo por segundo, este poderoso simulador em um laptop para consumo acelera o treinamento de drones sem riscos.
- Abordagem de Aprendizado Curricular: Os drones começam com tarefas básicas e avançam para manobras complexas, aprimorando sistematicamente o domínio do controle de voo.
- Função de Recompensa Adaptativa: O sistema de recompensa evolui durante a fase de treinamento, dimensionando o feedback para promover a aquisição e execução de trajetórias de voo estáveis pelo drone.
- Estratégia Sim2Real: Treinamento e simulação personalizados garantem uma migração suave da estratégia de controle de ambientes virtuais para reais, superando a divisão simulação-realidade.
Este empreendimento não apenas reduz o tempo de treinamento da teoria abstrata para a prática tangível, mas também disponibiliza seu código e emulador de forma ativa, democratizando o acesso a essa tecnologia notável.
Para mais detalhes, acesse o artigo de pesquisa em https://arxiv.org/abs/2311.13081.
YouTube video player