Da scheint's einen Bug im Nvidia-Treiber zu geben. Workaround: Vor ntpdate/rdate X11 beenden oder ntpd benutzen.