Fernando Tavares Cabral casó con la puertorriqueña Margarita Rivera Vergara, hija de Francisco Rivera Martínez (f. 1934) y Monserrate Vergara (f. 1931). Al morir sus padres fue adoptada en nuestro país por Joaquín Santiago Lugo Herrera y Ocelia Arredondo Miura, quienes no habían tenido hijos. Fernando y Margarita procrearon tres hijos: Ocelia Isa, Fernando Arturo (1949-1972) y Roberto Joaquín Tavares Rivera.

Por línea paterna, Fernando era nieto de Vicente Tavares Portes (1839-1923) y María de la Antigua Saviñon Villa, ésta última hija de Matilde Villa del Orbe, vegana y una de las hermanas Villa que en 1844 bordaron la primera bandera dominicana izada en el Cibao. Por la línea Tavares era pariente de los Tavares Julia, Tavares Grieser y Tavares Espaillat, entre ellos Manuel Enrique Tavares Espaillat, quien fue miembro del Triunvirato, y Gustavo Tavares Espaillat, fundador de Tavares Industrial y era primo hermano del poeta Manuel del Cabral Tavares pues la madre de éste Amelia Tavares Saviñón era hermana de su padre.

Por línea materna fue nieto de Manuel de Jesús Cabral y Báez y Leonor Ramírez Castillo (n. 1875), media hermana de Lesbia Ramírez Madera, esposa del general Carlos Daniel Grullón, comandante en la batalla de La Barranquita en 1916, en la cual murió Máximo Cabral Ramírez, primo segundo de Fernando. Carlos Daniel Ramírez, hijo del general Daniel y Lesbia Ramírez, fue expedicionario de Luperón; fue apresado el 20 de junio de 1949 en Imbert, Puerto Plata, y luego fusilado. Por esta línea también era pariente del luchador antitrujillista y guerrillero de 1963 José Daniel Ariza Cabral, pues el abuelo materno de éste, Máximo Cabral Mejía, era primo hermano de Manuel de Jesús Cabral (f.1920).       

Fernando a su vez era concuñado del doctor Tancredo Eloy Martínez García (1915-1991), exiliado antitrujillista a quien el Servicio de Inteligencia Militar (SIM) intentó asesinar en México en 1957, ya que su hermana Dominicana Antigua Tavares Cabral estaba casado con Lucas Martínez García, hermano de Tancredo. También era cuñado de Lisandro Macarrulla Reyes, miembro del movimiento 14 de Junio y amigo íntimo de Manolo Tavares Justo, con quien conspiró, ya que estaba casado con su hermana Gloria Tavares Cabral.