Pues depende de lo que quieras cambiar.
En las opciones de personalización, puedes crear tu propio theme donde te saldrá esta ventanita, para configurar los colores absolutamente de casi todo, tambien los colores de la fuente, los bordes de las ventanas, el espacio entre ellas, etc...:
Si quieres cambiar los dibujitos de
< > X (izquierda, derecha, cerrar, minimizar, etc...) puedes hacerlo habriendo el
explorerframe.dll con
reshacker, o bien con un programa que se llamaba "explorer frame changer" (o algo así).
Por lo contrario si quieres tener una utilidad avanzada para crear themes y/o modificar themes a tu gusto, y para cambiar muchas cosas más además del explorerframe, todo en uno, tienes el "
Style7"