男人的性欲到多大年龄开始减退因人而异，但通常在中年之后逐渐减弱。男性的性欲受到多种因素影响，包括生理和心理因素。随着年龄的增长，男性身体激素水平、身体健康状况、生活方式等都会发生变化，这些变化可能导致性欲减退。

生理因素方面，随着年龄增长，男性睾丸的睾酮分泌逐渐减少，这可能导致性欲下降。老年男性常常伴随着一些慢性疾病，如心血管疾病、糖尿病等，这些疾病也会影响性功能。一些药物的使用也可能影响性欲，例如抗抑郁药物等。

心理因素方面，随着年龄的增长，男性可能会面临更多的压力和焦虑，这些负面情绪也会影响性欲。随着年龄的增长，对性的兴趣可能会减少，也会影响性欲。

因此，男人的性欲减退是一个常见现象，随着年龄的增长，这种情况更加普遍。对于性欲减退的问题，可以通过调整生活方式、保持健康的饮食习惯、保持适当的运动和定期体检等方式来帮助缓解。如果性欲减退严重影响生活质量，建议及时就医，寻求专业帮助。