Можно ли устанавливать новые дрова поверх старых к видеокарте GeForce4 MX? Или нужно старые сначала удалить?

Перед установкой новых драйвером старые лучше удалить из системы.

Вообще такое допускается, но тем не менее производитель драйверов отnVidia советует прежде снести старую версию драйверов, а уж потом устанавливать новую. Тем не менее, если совсем лень удалять старые драйвера, то ставь новые поверх, ничего страшного произойти не должно.

Лучше вначале снести старые драйвера.

Можно ставить и поверх старых, однако, если возникнут проблемы, придется удалять и ставить заново.

Если предварительно удалить старые дрова, хуже не будет, тут есть только один подводный камень - кривой деинсталлятор драйверов. Иногда деинсталлятор может вообще вывести систему из строя. Это достаточно редкий случай, однако вероятность не равна нулю. Установка поверх более рискованна в том смысле, что нет гарантии в том, что все старые записи в реестре будут корректно удалены и, менее рискованна в отношении упомянутого выше случая "кривого" деинсталлятора. Так что дать однозначный ответ на ваш вопрос вряд ли возможно. Для интересующихся скажу, что почти все Matrox-ы допускают установку драйверов поверх без всяких отрицательных последствий, проверено на G400 и P750.

Можно, старые автоматически должны самиудалиться.

Однозначно да. Ставь и не бойся. Но практичнее всего было бы вначале удалить старые.