男方退婚如果在此之前双方有签订退婚协议书，协议书中约定了退婚赔偿事宜的，需要赔偿的是按照协议书中的内容，退婚协议在双方自愿的情况下签订的，具有法律效力，当事人之间的退婚协议书对双方具有法律约束力。
【本文关联的相关法律依据】
《中华人民共和国民法典》第四百六十四条
合同是民事主体之间设立、变更、终止民事法律关系的协议。
婚姻、收养、监护等有关身份关系的协议，适用有关该身份关系的法律规定；没有规定的，可以根据其性质参照适用本编规定。
第四百六十五条
依法成立的合同，受法律保护。
依法成立的合同，仅对当事人具有法律约束力，但是法律另有规定的除外。