男人的性欲到多大年龄开始减退取决于许多因素，包括个体差异、健康状况、生活方式和心理因素等。一般来说，随着年龄的增长，男性的性欲可能会逐渐减退，这是正常现象。具体来说，男性的性欲在20多岁时达到高峰，然后逐渐下降。一些研究表明，大约在40-50岁之间，男性的性欲开始显著下降。并不是所有男性都会经历这种情况，有些人可能会在更年轻或更年长的年龄出现性欲减退。

性欲减退的主要原因之一是睾丸激素水平的变化，随着年龄增长，睾丸激素水平可能会下降，从而影响性欲。一些健康问题，如心血管疾病、糖尿病、肥胖和药物使用等，也可能导致性欲减退。生活方式因素，如饮食习惯、运动和睡眠质量，以及心理因素，如压力和焦虑，也可能影响性欲。

要保持健康的性欲，男性可以采取一些措施，如保持健康的生活方式、定期运动、保持良好的睡眠质量、减轻压力等。及时处理健康问题，如心血管疾病和糖尿病，也有助于维持良好的性欲。如果男性对自己的性欲有任何疑问或担忧，建议咨询医生以获取专业建议。