Генеративні змагальні мережі з використанням attention механізмів
Loading...
Date
2022
Authors
Залізний, Антон
Journal Title
Journal ISSN
Volume Title
Publisher
Abstract
У даній роботі досліджено застосування механізму уваги у генеративних змагальних мережах. Розглянуто механізм уваги і його типи, архітектуру Трансформер, генеративні змагальні мережі і архітектури, що базуються або використовують Трансформер. Побудовано та натреновано власну генеративну змагальну мережу на базі Трансформер та досліджено проблеми тренування мереж даного типу. Також розглянуто портування мереж для виклику з С++.
Description
Keywords
бенчмарк датасети, локальний баєс, принципи роботи Трансформера, стиль ГЗМ, бакалаврська робота