Existe una forma de crear plantillas muy básica con JSP a base de includes, que nos puede servir para salir del paso, para un proyecto muy pequeño, por que no queramos utilizar tecnologías más pesadas, o queramos desplegar nuestro proyecto en cualquier servidor de aplicaciones. La técnica trata de crear pequeños trozos de código en JSP (jsf, tags,...) para cabecera y pie. Y luego crear todas las páginas del proyectos a partir de una plantila. En eclipse bastaría con crear un New ... > Dynamic Web Project, que llamaremos basic_templating La plantilla de cualquier página será:

De esta foma definimos los estilos aplicados a todo el proyecto en /style/templates/styles.jsp:

La cabecera y el pié de toda la aplicación estará en: /style/templates/header.jsp /style/templates/footer.jsp Podemos ver el resultado en el siguietne pantallazo:

Os dejo el proyecto en un eclipse zip file