No he visto la página a full, pero no es necesario que trabaje en python, ya que lo que hace es leer un código introducido y mostrar un resultado sin usar el interprete de python en este caso, o sea, lee un código x, sino es igual muestra donde está la diferencia, que es algo que python no hace de esa forma, por lo tanto están comparando dos textos, si están iguales muestra un resultado que tampoco es exactamente como lo muestra python, por lo que deduzco que no usa ningún compilador de python.
Ahora si esto se puede hacer de verdad, lo desconozco por que no tengo idea de programar web.

Pues estariamos apañaos si no trabajase en Python y el resto de lenguajes soportados.

Ninguna web que se pueda considerar profesional trabajaría del modo que sugieres, en Codeacademy las instrucciones se envian mediante AJAX a un intérprete de Python, el código se ejecuta en el server y devuelve la respuesta o resultado de ejecución, lo que ocurra después no estoy del todo seguro puesto que no lo he programado yo, pero obviamente al tratarse de una web profesional tendrá un algoritmo bien elaborado el cual imagino que además hará una evaluación de texto usando la técnica Diff para localizar y resaltar en el código las diferencias entre ambos textos.

Python es un lenguaje de Scripting, cuya característica es ser interpretado, o lo que es lo mismo, no poder ser compilado.

Pero hay muchas implementaciones de Python que si son compilables.

Lo que puedes hacer es convertir a executable empaquetando el script junto al intérprete y los recursos necesarios, hay herramientas que automatizan dicha tarea.
➢ cx_Freeze

➢ GUI toolkits for Python

➢ Web Frameworks for Python
+
➢ HOWTO Use Python in the web

Saludos

Sin exigencias, que nadie tiene la obligación de responderte ni resolverte dudas, no seas tan impaciente y lee mi edición en el mensaje de arriba.

De nada.