"Идущий наперекор", так описывает Джо актриса Зоуи Дешанель, с которой Джозеф познакомился в 2001 году. "Очень умный. Очень, очень серьезный и очень интенсивный". Когда Джо было 19, он решил бросить играть и отправился в Колумбийский Университет читать Набокова. В это время Зоуи Дешанель бросила свой колледж, чтобы стать актрисой. 'Мы часто шутили об этом. Я говорила ему: "Ты ненавидишь фильмы!", а он говорил: "Ты ненавидишь книги!" ', говорит Зоуи.
