Joël van de Rhoer trouwde op 17 juni 1900 met Bertha van Geens. Het echtpaar had twee kinderen.
Joël van de Rhoer was al zeer jong één van de grootste veehandelaren van het noorden. Zijn welstand leverde hem in Meppel de bijnaam 'De Rijke' op. Hij was vele jaren voorzitter van de Nederlandse Vereniging van Veehandelaren, afdeling Drenthe. Als zodanig was hij ook bestuurslid van het Drents Landbouw…