👾Цифровые двойники, нейросети и реальные роботы: как прошёл Студкемп Яндекса для студе...
👾Цифровые двойники, нейросети и реальные роботы: как прошёл Студкемп Яндекса для студентов ВГУ Студенты ФКН Александр Лузин, Артём Рашевский, Мария Стрельникова, Иван Червоный и Илья Эктов приняли участие в Студкемпе Яндекса «Промышленная робототехника», который прошёл с 13 по 24 июля в Екатеринбурге на базе УрФУ. Студкемп – это бесплатный очный интенсив для студентов ИТ-направлений со всей России от экспертов Яндекса и преподавателей УрФУ. Первая неделя программы была посвящена теории: участники учились управлять роботами с помощью ИИ и применять подход цифровых двойников. Вторая неделя – максимум практики: студентам предстояло перенести алгоритмы из симуляции в реальный мир и продемонстрировать умения обученных ими роботов. 💬На Студкемпе студенты ФКН разобрали архитектурный подход к созданию умных девайсов и на практике поработали с современными встраиваемыми решениями: «Главная практическая часть связала две платформы, с которыми мы работали в одной команде. GFS-X – гусеничный робот на Raspberry Pi. В финальном сценарии он ищет на полу мяч или кубик, подъезжает и хватает его «клешнёй». Мы сделали его копию в Unity, обучили нейросеть и попробовали перенести модель на реальное устройство. Схема оказалась непростой. В симуляции всё шло гладко; на полу лаборатории каждый шаг цепочки приходилось проверять отдельно. Яндекс.Ровер в эстафете был «глазами» системы. Он сканировал местность лидаром и доезжал по карте к зоне с объектами – маршрут строили алгоритмы, мы наблюдали за процессом в программе визуализации. Языковая модель разбирала кадры с видео и выдавала команды: когда его запускать и какой объект искать мобильному роботу». ✍️Для справки: · Raspberry Pi — это одноплатный компьютер на Linux размером с банковскую карту; · Unity — это кроссплатформенный игровой движок. С его помощью делают одиночные и многопользовательские игры с современной 2D- и 3D-графикой для таких платформ, как ПК, PlayStation, Xbox, Nintendo Switch; · Лидар — это активный сенсор, который помогает технике ориентироваться в пространстве. Устройство сканирует окружающую среду с помощью лазера и измеряет расстояние до объектов.