🤖 Paint Transformer: Feed Forward Neural Painting with Stroke Prediction
🤖 Paint Transformer: Feed Forward Neural Painting with Stroke Prediction Ранее я писал о стайл трансфере, который вместо оптимизации пикселей, оптимизирует напрямую параметризованные мазки кисти. Вышла новая работа, которая использует архитектуру Трансформеров, чтобы предсказывать параметры мазков за один (ну, или почти один) форвад-пасс сети. На самом деле, тут трансформер сделан в стиле рекурентной сети. Делается 4 прогона исходной картинки через сеть в разных разрешения, от уменьшенной в 16 раз до исходной. При каждом следующем прогоне на вход кроме исходной картинки в большем разрешении идет и отрендереный холст с мазками, предсказанными на предыдущих прогонах. Таким образом сеть постепенно добавляет на холст новые мазки, начиная с больших (они рисуются на малом разрешении холста), и заканчивая I̷T̷ В̷П̷И̷С̷К̷А · t.me/itvpi/589 #it #вписка #itvpiska #исходной #сеть #мазки #один