明徳義塾、鳥取に逝かされる