まずは別れるしかないよね
別れてその後どうするかは旦那本人の責任だからほっとくしかないと思う