Dicho de otro modo ¿Qué necesito saber para crear mi propia Librería Gráfica?

Voy a explicarme:

Existe PyQt, wxPython, etc... que permiten crear interfaces gráficas pero lo que yo estoy interesado es crear uno igual a esos programas pero para otros lenguajes de programación que no son Python y que no tienen programas para diseñar Interfaces Gráficas, mi duda es:

¿Aparte de dominar dicho lenguaje que otros requisitos necesito?
¿Por dónde debo empezar?

Si no me expliqué diganme para editar mi pregunta.

Gracias.