Olá! Eu tive um problema parecido em outra distribuição, mas resolvi desativando em preferências do teclado > teclas do mouse > Permitir controlar o ponteiro usando o teclado. Isto no gnome. Abraços!