Où était-il ? Sur le plateau comme aujourd'hui ? Non ! Nous parlons en réalité de la maison Saint-Yon de la rue de l'Homme-de-Bois qui, avant de devenir l'école primaire du centre-ville, était le premier collège de la cité : « C'est l'abbé Pierre Vastel qui est à l'origine de sa création » Nous sommes sous le Premier Empire (1804-1815) et la création de ce collège s'avère tardive « dans une ville qui compte environ 9 000 âmes et qui a une activité maritime et commerciale importante », note l'historien Pascal Lelièvre, auteur d'une étude sur le système scolaire à Honfleur au XIXe siècle. C'est en octobre 1854 qu'il prend officiellement le statut de collège municipal. Dès sa première année, il accueille 120 élèves. Arthur Boudin est le premier bachelier présenté par l'établissement alors dirigé par M. Bahon. Il est dans les années 1860, le plus important collège du Calvados. En 1880, il reçoit 200 élèves. Les façades présentent une organisation très ordonnancée, révélant une composition alternée de briques et d’enduits.