Initialement spécialiste de l'Antiquité, il se spécialisa dans l'histoire desCantons de l'Est dès 1978. Ses premiers travaux portent sur les périodiques de la région, notammentLe Progrès de Sherbrooke.
t. 1 : De l’âge de l’eau à l’ère de la vapeur, 1802-1866, 2000, 353 p.
t. 2 : De l’âge de la vapeur à l’ère de l’électricité, 1867-1896, 2001, 280 p.
t. 3 : La ville de l’électricité et du tramway, 1897-1929, 2002, 292 p.
t. 4 : De la ville ouvrière à la métropole universitaire, 1930-2002, 2002, 486 p.
2000 - Les Écossais de langue gaélique des Cantons de l’Est : Ross, Oscar Dhu, Morrison et les autres..., Sherbrooke, GGC Éditions, 88 p. (coll. Patrimoine).
2000 - Un débat de l’Université : conscience et méthode de la crise, Sherbrooke, Éditions du CRP, 7 fascicules.
1998 - Histoire des Cantons de l’Est (coll. Les régions du Québec, 10), Sainte-Foy, Institut québécois de recherche sur la culture, 829 p. (en collab. avec Peter Southam et Diane Saint-Pierre). Kesteman a rédigé les neuf premiers chapitres, des origines à 1920, p. 31-437.
1988 - La ville électrique : un siècle d’électricité à Sherbrooke, 1880-1988, Sherbrooke, Olivier, 234 p.
1985 - Histoire de Lac-Mégantic, 349 p.
1984 - Histoire du syndicalisme agricole au Québec (UCC - UPA), 1924-1984, Montréal, Boréal Express, 327 p. (en collab. avec Guy Boisclair et Jean-Marc Kirouac). Nouv. éd. : 1924-2004, Boréal, 2004, 464 p.
1984 - Les débuts du canton d’Ascot et de la ville de Sherbrooke (1792-1818). Étude critique (Bulletin de recherche, Département d’histoire, Université de Sherbrooke, no 1), 25 p.