Si instalaste Ubuntu teniendo ya instalado windows supongo que el arranque para seleccionar qué sistema quieres iniciar, te lo controla Ubuntu. Si eliminas Ubuntu, lo más seguro es que te quedes sin poder arrancar nada en tu ordenador.

Para no liarte demasiado, sobre todo si no dominas aún el tema, yo te aconsejaria que con un disco de instalación del windows, recuperaras el arranque de windows, y una vez recuperado, instales Debian formateando la partición antes ocupada por Ubuntu. Debian creará otra vez el arranque para que puedas elegir qué sistema arrancar.

Saludos.

Respalda antes que intentes cualquier cosa.