En 1832, il épouse Mary King qui décède du choléra l'année suivante[1]. Leur enfant décède moins de deux ans plus tard[1]. Il se remarie e 1835 avec la fille d'un de ses partenaires d'affiaire, Goshorn, avec qui il a quatre fils et deux filles[1]. Il s'engage dans les affaires commerciales jusqu'en 1851, où il devient agent de fret pour la Baltimore & Ohio Railroad.
Guerre de Sécession
Au déclenchement de la guerre de Sécession, Kelley lève le 1st Virginia Infantry, un régiment fédéral de volontaires pour une durée de trois mois, et en est nommé colonel[2]. Sa première action prend place lors de la bataille de Philippi, où il capture un équipage un train d'équipage confédéré et où il est sérieusement blessé. Il est promu brigadier général des volontaires le , et remporte des victoires à Romney(en) et Blue's Gap(en) (Hanging Rocks Pass). Ensuite, Kelley commande une division de 10 000 hommes dans le département de Harper's Ferry.
Kelley, avec son supérieur immédiat le major général George Crook, est capturé par un petit raid de partisans confédérés le . Kelley est envoyé en prison à Richmond, Virginie, mais Crook et lui sont libérés le lors d'un échange particulier. Il démissionne de l'armée le [3].
Après la guerre
Après la fin de la guerre, Kelley est nommé collecteur des revenus internes en 1866. Après avoir tenu cette fonction pendant dix ans, il prend la tête des Hot Springs, Arkansas, réserve militaire en 1876. En 1883, le président Chester A. Arthur le nomme inspecteur des pensions.
Mort
Kelley meurt à Oakland, Maryland, et est enterré dans le cimetière national d'Arlington. Sa tombe est réalisée par le sculpteur W.S. Davis. La pierre tombale est faite en granit (6 × 5 × 3 ft.) avec un insert en relief (2 × 2 × 6 ft.) en bronze sur la façade de la pierre, juste au-dessus de deux plaques inscrites. Le relief est un buste de Kelley, qui a une barbiche abondante, un moustache, et un uniforme militaire.
Sur l'une des plaques de la pierre tombale est inscrit :
BENJAMIN F. KELLEY
COLONEL DU 1ST VIRGINIA VOLUNTEER INFANTRY
BRIGADIER ET BREVET MAJOR GÉNÉRAL
U.S.V.
BLESSÉ À LA BATAILLE DE PHILLIPI VIRGINIE
3 JUINE 1861.
Sur l'autre plaque de la pierre tombale est inscrit :
Cet article contient des passages de publications désormais dans le public domain : Gilman, D. C.; Thurston, H. T.; Colby, F. M., eds. (1905). New International Encyclopedia (1st ed.). New York: Dodd, Mead.