Mannes is een zoon van Salomon Mozes van der Veen en Leentje Wijnberg. Hij trouwde 8 januari 1853 met Saartje Izaak Pachter (Groningen, 14 december 1827), dochter van Izaak Salomons Pachter en Goudje Davids Polak.
Kinderen
Goudje, 26 februari 1854 Groningen
Leentje, 10 maart 1857 Groningen
Salomon, 6 augustus 1865 Westerbork
Sophia, 8 februari 1867 Westerbork
Izaak, 17 juni 1869 Beilen
Roosje, …