Потому что частица не здесь относится к существительному, а не к наречию. Если б его не было, то писалось бы неумный.
Ну, мне так кажется)
Если ответ по предмету Русский язык отсутствует или он оказался неправильным, то попробуй воспользоваться поиском других ответов во всей базе сайта.