La respuesta aceptada es una mala práctica y una pésima aplicación de las tablas HTML, y no debe ser aplicada en ningún contexto. Aquí la sustentación:
Las tablas de HTML existen para tabular información, no para dar estilo, al pretender «dar estilo» o generar la estructura con tablas, se está dañando toda la semántica del sitio, se complica a futuro las mejoras del mismo, no va a funcionar bien en todos los dispositivos y por último y tal vez lo más importante, se está afectando la accesibilidad (personas con discapacidad). Esto no es nuevo, es una mala práctica desde hace ya varios años, desde la década pasada.
Mi respuesta/solución:
En cuanto a si debes utilizar CSS o no, la respuesta es: Sí, debes usar CSS, HTML no ofrece estilos, y en el fondo cuando no utilizas estilos, los resulta asignando el navegador (estilos predeterminados).