Para hacer eso en VS Code y con Python debes tener instalada la extensión de Python que provee Microsoft, luego de eso usa la herramienta de Debug, si te fijas en la barra que esta a la izquierda del VS Code hay una fila de iconos, el de Debug es un insecto sobre un símbolo de play, das click en ese icono y luego en el botón Run and Debug.
Tienes que tener en cuenta que para que funcione de la manera que quieres debes marcar Breakpoints en el código.
Los puntos rojos son los Breakpoints, cuando empieces a debuggear el código se detendrá en ellos, podrás ver el valor de las variables que quieras en tiempo real, también te aparecerá un pequeña barra con opciones debajo de la barra de titulo del VS Code, en ella verás unos botones para Parar, ir paso a paso, retroceder, etc. Con respecto a HTML no estoy seguro de que puedas hacerlo ya que HTML no es un lenguaje de programación.