Joseph is een zoon van Elias Isack Wallega en Rebekka Frankfort. Hij trouwde 12 januari 1927 met Regiena Palm, dochter van Jozeph Palm en Leentje Frankfort.
Van dit gezin is ook een JOKOS-dossier (nummer 54749) aanwezig op het Gemeentearchief van Amsterdam. Voor inzage is toestemming nodig van de stichting Joods Maatschappelijk Werk. Uit het JOKOS-dossier is bekend dat er een claim is ingediend voor vergoeding van waardevolle voorwerpen ingeleverd bij de roofbank Lippmann-Rosenthal (L-claim, nummer 12671/19362).