В результате семья столкнулась с финансовыми трудностями. На какое-то время дети даже переехали жить к бабушке и дедушке по материнской линии. В итоге семья переехала в пригород Уилмингтона, и Байден-старший сначала работал продавцом подержанных автомобилей. Это не помешало его детям наслаждаться роскошью и веселиться. Его сестра Валери Байден Оуэнс сказала, что у неё всегда были красивые платья для школьных танцев. Разница была лишь в том, что родители покупали их в рассрочку.