Es könnte mit dem MixedSID zusammenhängen. Kenne zwar die Schaltung des Joystickswitchers nicht genau, aber die Maus benötigt die Signale des SID (Analog X, Y). Vielleicht kommt es deswegen zur Verzögerung?
Du meinst, dass die zusätzlichen 10-30ns propagation delay des 4053 auf dem MixSID eine Verzögerung von mehreren Minuten nach sich ziehen und dafür sorgen, dass Joysticksignale nicht bei der CIA ankommen? Das halte ich für sehr unwahrscheinlich.
ohne Funktion, kein Joy geht, Umschalten auch nicht, keine LED leuchtet.
Dass das Gerät selbst schon nicht funktioniert ("Kein Umschalten, keine LED leuchtet") deutet viel eher auf ein Problem mit an den Joystickports selbst hin, wie CapFuture1975 schon vermutet hat.