У даній роботі досліджено застосування механізму уваги у генеративних змагальних мережах. Розглянуто механізм уваги і його типи, архітектуру Трансформер, генеративні змагальні мережі і архітектури, що базуються або використовують Трансформер. Побудовано та натреновано власну генеративну змагальну мережу на базі Трансформер та досліджено проблеми тренування мереж даного типу. Також розглянуто портування мереж для виклику з С++.