#ringUnmoderated tagAll postsTrending CommunitiesHIVE CN 中文社区SplinterlandsScrobble.lifeWorldmappinActifitSnapsBlack And WhiteTown SquareHive LearnersPhotography LoversLiketuGaming PhotographyExplore Communities...#ringTrendingHotNewPayoutsMutedalucian (72)in #deutsch • 7 days agoCross Attention + Ring Attention und Flash Attention... Ja genau, ersteres mit einem En- und Decoder. Also schon bisle was. Aber das ist Geilo Zeugs! Ich sage es euch!Mit der Cross Attention, kann man dann zum Beispiel bessere Analysen machen lassen, weil ich dann die Token mit en und decodierungsmechanismen ausarbeiten kann an deren Gewichte…
