Barber was die oudste dogter van [[Miles BarberBowker]] en sy vrou, Anna Maria Mitford van Mitford Castle, [[Northumberland]]. Barner kom in 1820 na [[Algoabaai]] saam met haar ouers en haar sewe broers as een van 'n geselskap Britse Setlaars en bring haar kinderjare deur op hul plaas, Tharfield, wat uitkyk op die monding van die [[Groot-Visrivier]] in die distrik [[Albanie]], waar haar vader haar aanmoedig om die natuur in al sy fasette te ondersoek. Haar besonderse belangstelling in die natuurstudie word deur haar broer [[James Henry Bowker]] gedeel. Die gesin deurleef die Xhosa-inval van 1834.
