No puedo ayudarte en cuanto a la experiencia porque no lo viví ni conozco a nadie que lo haya vivido.
Pero eso de que no se parezcan... En primer lugar, dos hijos de los mismo padres pueden ser completamente diferentes. Mi madre por ejemplo, es de pelo negro enrulado, ojos marrones, y estatura media. Su hermana era rubia, alta, de pelo lacio, ojos azules, piel hiper blanca. Ves las fotos y no tenían ningún rasgo similar. Eran hijas de los mismos padres.
Mis cuñadas lo mismo, no se parecen en nada de nada, y son hijas de los mismos padres. Mi marido es muy parecido a una de sus hermanas, por lo tanto a la otra no se parece en nada.
En segundo lugar, solamente hablás de que no van a tener tu carga genética, pero si la de tu pareja. Así que pueden tener parecidos que hayan heredado de su padre.