男人的性欲到多大年龄开始减退取决于许多因素，包括生理、心理和环境因素。一般来说，随着年龄的增长，男性的性欲和性功能会逐渐减退，但并非所有男性都会有相同的经历。

生理因素是性欲减退的主要原因之一。随着年龄增长，男性体内的睾丸激素水平逐渐下降，这会导致性欲减退。一些慢性疾病、药物、手术或其他医疗问题也可能影响性欲。

心理因素也可能影响男性的性欲。随着年龄的增长，个人对性的兴趣可能会改变，生活压力、情绪问题或关系问题也可能导致性欲减退。

环境因素，如生活方式和社会环境，也可能对性欲产生影响。不健康的饮食习惯、缺乏运动、吸烟、酗酒等不良习惯可能会影响性欲。社会观念、文化因素和个人经验也可能影响性欲。

每个人的情况都是独特的，性欲减退的年龄和程度因人而异。保持健康的生活方式、积极应对心理压力、定期体检等都有助于维持良好的性功能和性欲。如果性欲减退严重影响到日常生活，建议及时咨询医生，寻求专业帮助。