La ciudad fue construida cerca de la ciudad galo-romana de Alauna o Alaunia, de la que toma su nombre. Era una fortaleza bajo los duques normandos y los monarcas franceses. En ella Guillermo el Conquistador recibió la noticia de que los barones de Cotentin y Bessin estaban conspirando para matarlo, consiguiendo escapar a Falaise.
Eduardo III de Inglaterra tomó Valognes sin resistencia, paso una noche allí y luego saqueo y quemo la ciudad. Enrique III de Inglaterra se adueñó de la ciudad, que permaneció bajo el dominio Inglés durante treinta años. Sería una especie de recurso para los visitantes ingleses aristocráticos hasta la década de 1920.
El castillo, como el de Cherburgo, fue completamente destruido en tiempos de Luis XIV.
Del convento de los capuchinos y Cordeliers y la abadía de monjas benedictinas, que existían en Valognes antes de 1792, sólo quedan una ruinas.
La iglesia del siglo 14 de Notre Dame tenía una cúpula, que era el único ejemplo de bóveda gótica en Francia. Todo el edificio fue destruido en 1944, durante la Batalla de Normandía.
Antes de la Revolución Francesa, Valognes fue la residencia de más de un centenar de familias de nacimiento distinguido y fortuna, fue durante mucho tiempo residencia de la vieja nobleza. La ciudad era conocida como la Versalles de Normandía por sus mansiones señoriales y palacios, así como el ambiente tranquilo, misterioso y exclusividad de sus calles.
Valognes se describe como un pueblo limpio y bien construido, cuyas finas casas antiguas dan testimonio de su antigua prosperidad.
Poco queda de la famosa patrimonio arquitectónico Valognes, muchas de las mansiones aristocráticas fueron reducidas a escombros durante la batalla de Normandía. El precioso hotel de Beaumont, sin embargo, sigue en pie.