Sutherland fue el hijo de Robert Sutherland de Aberdeen.
Nacido en 1745, Robert Sutherland fue un comerciante exitoso y un hombre de negocios influyente en Aberdeen. Su familia era de origen escocés y tenía una larga tradición de servicio público y liderazgo en la comunidad.