2012年9月14日,已经随组合出道4年的李茂,宣布退出至上励合让很多粉丝失落伤心也很是不解。早前频传组合闹矛盾全因李茂,和队友争女友、无团队意识等,一时间这些传闻都成了李茂退团的原因。不过,李茂也算是明明白白的给了粉丝一个交代,他在节目中公开承认自己要退团的消息,并表示:“每个人有每个人的发展和特长,每个人都在成长。公司对于我们的人生和工作有不同的规划,而且从小到大我有一个理想,就是成为一个有阅历、有生活、有演技、有爱心的演员。”至于是否因传闻中的原因退出组合,李茂并没表态。李茂的女友是谁一直都是粉丝关注的话题。据传,李茂曾与演员王卉传过绯闻,但两人之间的关系最终给没有得到证实。后又有爆料者称,李茂曾在一征婚节目上认识一模特,更是交往了七年之久,但最终却以失败告终。而现在李茂没有女朋友,或是出于对自己私生活的保护没有向外界公布吧。