Veja as vantagens de utilizar o next-themes aqui.
Exemplo de uma aplicação Next.js que utiliza next-themes.