exacto la unica manera es haciendo un downgrade, pero mira, si no sabes por donde empezar esta muy bien el E3 Flasher (aunque hay mas flashers para hacerlo), con eso puedes hacer el downgreo sin problemas, el problema es el precio, pero lo bueno esque no requiere soldadura y es facil de instalar.

EDITO: el proceso que explico esta comprobado hasta el 3.70 (ya sea slim o fat), aora mismo nose si los pasos serian iguales para el 4.00! (busca por internet para comprobarlo) sino de todas formas sirve como guia o ejemplo de lo que conllevaria "mas o menos" (para el 3.70 es tal cual lo explico)

EDICION 2: En teknoconsolas encontre esto: Tras la actualización de Sony del firmware oficial de la consola a la versión 4.0, había dudas de si E3 Flasher seguiría funcionando correctamente. Pues bien, la buena noticia es que el equipo de desarrollo de este dispositivo de momento ha confirmado que el downgrade sigue plenamente operativo, realizándose el mismo de la misma forma en que se hacía anteriormente.
Asi que posiblemente si que te sirva (aunque ya te digo, yo aun no probe con un OFW 4.00)

El proceso de downgrade conlleva:
1- Lectura de la NOR de la placa base con el flasher: se dumpea y se guarda como un archivo .bin. Debera pesar 16.777.216 bytes exactamente.
2- Para hacerla legible se emplea la opcion de "bytereverse" del programa FlowRebuilder v.4.1.3.2
3- Abrir el archivo que ha generado el flowrebuilder: (extension .bin.REV) del NOR con un programa de edicion hexadecimal como HXD y sacamos nuestros datos personales de la consola EID, BOOTLOADER, CSID Y METLDR
4- Modifcar el archivo que descargaremos llamado downgrade.bin para incluir (escribir) nuestros datos personales anteriores de nuestra NOR (EID, BOOTLOADER, CSID Y METLDR)
5- Luego tambien te hara falta un programa como teenesy o progskeet para escribir tu nueva NOR modificada a la consola. OJO! hay que pasar el archivo downgrade.bin modificado por el flowrebuilder para que nos cree otro xxxxx.bin.rev como hemos hecho antes (aunque de error el programa, de hecho significa que esta bien!) Y ESTE ULTIMO (downrade.bin.REV) sera el que escribiremos en la nor de nuestra consola!! (flasheo)
6-Para finalizar habra que poner un pendrive al puerto derecho (usb obvio) de la consola SIN LECTOR! e instalar el siistema de archivos correcto para el 3.55 (habra que poner un CFW especial y el programa lv2diag de Jaicrab.

Con todo eso bien hecho ya deberias de haber podido "downgrearla", tener el CFW y ejecutar el XMB

Fuente: el dev Dospiedra

Esto no es un tutorial pero si te podra servir de guia resumida para cuando te animes con el proceso

+info: buscar por internet, aqui esta citado todo el soft necesario. Sino si mas gente lo cree conveniente tambien podria hacer un tutorial

SAlu2!