Robert blev gift med Ina Grace Soelberg den 1 nov. 1933 i Salt Lake, Utah, USA. Ina (datter af Jens Christian Soelberg og Helena Maria Andersen) blev født den 14 aug. 1912 i Ammon, Bonneville, Idaho, USA; døde den 21 mar. 1975 i Shelley, Bingham, Idaho, USA; blev begravet i Shelley, Bingham, Idaho, USA. [Gruppeskema] [Familietavle]

1. Ariel James Smith blev født den 19 dec. 1943; døde den 8 nov. 1969 i Binh Duong, Republic Viet Nam.
2. Lowell Brian Smith blev født den 2 maj 1945; døde den 30 nov. 1962 i West of Lava beds, Bingham, Idaho; blev begravet i Shelley, Bingham, Idaho, USA.
3. Welden Lloyd Smith blev født den 4 dec. 1951; døde den 12 mar. 2005 i Sandy City, Salt Lake, Utah, USA.
4. Nelia Gay Smith blev født den 20 mar. 1939; døde den 30 jul. 2012 i Rexburg, Madison, Idaho, USA; blev begravet i Archer, Madison, Idaho, USA.