Joseph blev gift med Lydia Brewster før 1836 i De Kalb, St Lawrence, New York, USA. Lydia (datter af Elias Brewster og Zerviah Wentworth) blev født den 8 jun. 1798 i Oneida, New York, United States; døde den 8 mar. 1873 i Breedsville, Van Buren, Michigan, USA; blev begravet i Lawrence Village Pioneer Cemetery, Lawrence, Van Buren, Michigan, United States. [Gruppeskema] [Familietavle]

1. Olive Morgan Goodell blev født den 11 nov. 1836 i De Kalb, St. Lawrence, New York, United States; døde den 12 jun. 1912 i Traverse City, Grand Traverse, Michigan, United States; blev begravet i 1912 i Breedsville, Van Buren, Michigan, USA.
2. Adelaide Victoria Goodell blev født den 17 aug. 1837 i De Kalb, St. Lawrence, New York, United States; døde den 1 dec. 1890 i Wabash, Indiana, United States; blev begravet i 1890 i Wabasha, Wabasha, Minnesota, United States of America.
3. Oliver Emery Goodell blev født den 1 apr. 1840 i Antwerp, Jefferson, New York, USA; døde den 22 apr. 1909; blev begravet i 1909 i San Diego, San Diego, California, USA.