Pionnier de l'archéologie préhistorique charentaise, membre de la Société Archéologique et Historique de la Charente de 1862 à 1889, il était l'oncle du Dr Jules Lhomme auquel il légua sa collection. Cette collection est parvenue au musée des beaux-arts d'Angoulême par l'intermédiaire du legs du Dr Lhomme en 1934, dans la collection duquel elle s'était déjà fondue. Fort heureusement, le registre manuscrit de Jean Fermond a été préservé, permettant de restituer au moins une partie des collections à leur fonds initial, et de dégager l'esprit très particulier de cette collection à dominante préhistorique, tenant encore un peu du cabinet de curiosités, mais empreinte d'un souci de comparatisme déjà moderne.
G. Chauvet a fait l'éloge du travail archéologique de Jean Fermond, à partir de 1855, essentiellement axé sur la vallée de la Tardoire et la Grotte du Placard (Charente).