Был старшим сыном Чарльза и Элизабет Барбер, имел двух братьев Фрэнка и Артура. С 1861 года его семья жила в графстве Беркшир. Известно, что его отец работал декоратором. Имея художественные способности, Чарльз Бартон три года учился в Королевской академия художеств в Лондоне. В 1864 году за один из рисунков получил серебряную медаль академии.
8 апреля 1875 года молодой художник женился в Лондоне на госпоже Маргарет Уильямс, дочери умершего к тому времени архитектора Уильямса. В их семье было две дочери.