Il contesto fornito non specifica la storia familiare di Henry Box Brown. Sarebbero necessarie ulteriori ricerche in documenti storici o biografie per ottenere dettagli accurati.