Taliaferro blev gift med Mary Dorcas Ashby den 3 nov. 1827 i Fauquier, Virginia, USA. Mary blev født i 1804 i Virginia, USA; døde mellem 1870 og 1880 i Missouri, USA. [Gruppeskema] [Familietavle]

1. Samuel Ashby Grantham blev født cirka 1827 i Virginia, USA; døde den 6 jul. 1881 i Audrain, Missouri, USA; blev begravet i 1881 i Mexico, Audrain, Missouri, USA.
2. Charles W Grantham blev født i 1830 i Virginia, USA; døde efter 1880 i Cuivre, St Charles, Missouri, USA.
3. Jamison Marshall Grantham blev født i 1832 i Virginia, USA; døde i San Francisco, California, USA.
4. Martha Clarkson Grantham blev født i jan. 1836 i Missouri, USA.
5. Maria E Grantham blev født i aug. 1843 i St Charles, Missouri, USA.