Откройте для себя техническое прорыв, достигнутый исследователями из Университета Нью-Йорка, которые создали передовую технику, позволяющую дронам освоить стабильный полет всего за 18 секунд. Используя мощь стандартного MacBook Pro, эта революционная технология использует симулированные среды для обучения дронов уверенно парить в воздухе и маневрировать по предопределенным маршрутам.
Удивительная скорость тренировки: В невероятно быстрых 18-секундных сессиях дроны осваивают сложные полетные маневры. Этот инновационный подход не ограничивается базовыми моделями – он достаточно гибок для обучения любого дрона, будь то сложный и продвинутый вариант или специальная модель.
Основные моменты инноваций:
- Полностью глубокое обучение: С использованием глубокого обучения с подкреплением, дроны достигают контроля от восприятия к действию без сложных промежуточных шагов, улучшая прямолинейность и эффективность стратегии управления.
- Модель асимметричного актер-наблюдатель: Патентованная модель с поддержкой RL разделяет функции: «актеры» принимают решения, используя состояние-действие процессы, в то время как «наблюдатели» оценивают движения с дополнительными данными из симуляции, ускоряя обучение.
- Оптимизированный симулятор: Обладая возможностью воспроизводить примерно 5 месяцев времени полета в секунду, этот мощный симулятор на ноутбуке для потребителей ускоряет обучение дронов безопасно.
- Методика учебного плана: Дроны начинают с простых задач и постепенно переходят к сложным маневрам, систематически улучшая владение управлением полетом.
- Адаптивная функция вознаграждения: Система вознаграждений развивается во время фазы обучения, масштабируя обратную связь для стимулирования стабильного освоения и исполнения дроном устойчивого пути полета.
- Стратегия Sim2Real: Индивидуальное обучение и симуляция обеспечивают плавный переход стратегии управления из виртуальной в реальную среду, преодолевая разрыв между симуляцией и реальностью.
Эта инициатива не только сокращает время обучения от абстрактных теорий к конкретной практике, но и предоставила свой код и эмулятор в открытый доступ, демократизируя доступ к этой значимой технологии.
Для получения дополнительной информации, ознакомьтесь с исследовательской статьей по ссылке https://arxiv.org/abs/2311.13081.
YouTube video player