Problem med att lyssna på musik i Google Home högtalargrupper

Jag har satsat stort på att använda endast ett system i nya huset, därför har jag skaffat 3st Chromecast Audio's, 1st av den nya Chromecast with Google TV och en Nest Hub i köket.
Anledningen till detta är för att jag vill kunna skapa högtalargrupper, vilket inte fungerade med min Mi Box (Android TV).
Nu när allt är på plats så inser jag att det fungerar uselt!
Om jag spelar musik till högtalargruppen som innefattar Chromecast with Google TV och 1st Chromecast Audio så fungerar det i allt från 5 minuter till 15 minuter innan ljudet försvinner. Tittar man på TV'n så ser man att den försöker spela men står bara och laddar.
Om jag byter låt så fungerar det vidare en liten stund.

Upplever samma problem när jag kör direkt till en enhet (ej grupp), fast nu fungerar det mycket längre innan det lägger av.

Jag har provat med Youtube Music (istället för Spotify) för att bekräfta att det inte är Spotify's fel (det är det inte).

Jag har sökt och sökt efter andra med samma problem och försökt se om det är någon router-inställning som är fel hos mig.
Har en Asus RT-AC68U.
Det enda jag har hittat är att man ska stänga av "Airtime Fairness" vilket är gjort, utan att det märks någon skillnad.

Alla förslag är välkomna!