Joseph was een zoon van Keetje Doof en Isaac Aluin.
Hij was met Sara Klijnkramer (geb. 00-00-1904) gehuwd op 21-10-1925 te Amsterdam.