去了国奥之后，潘毅的表现并没有达到大家的预期，与队友一起违纪翻墙去娱乐场所被抓，认错态度也极其恶劣，最终被国奥队开除。从此，潘毅也被冠以了中国足球第一刺头的名号，之后更是劣迹斑斑。随着潘毅的惊人天赋，其桀骜不羁的新格也颇为引人关注，当时的甲A禁赛榜单中经常出现他的名字。惩罚终于到来，2002年的甲A联赛，潘毅从八一队大名单上消失了，根据当时媒ti报道，在一次与队友的聚会当中，时年28岁的潘毅对于同在聚会现场的一名师弟的女友大为心动。在三人都酒醉之后，头脑已经不清醒的潘毅遣走队友，随后与这名队友的女友一起来到宾馆开房。

　　但在第二天双方酒醒之后，女方发现与自己同房之人并不是自己的男友，女方由此将潘毅告上法庭。在此事发生之后，八一队立即将潘毅除名，潘毅则被处以劳动教养一年。服刑完毕后，又因为车祸惹上官司。复出后，潘毅在陕西国力短暂效力，但是他不改恶习，违反队规致使被停赛并被停发了工资。到了这个地步，潘毅在球队也呆不下去了，他彻底离开了足球圈。从“潜力新星”到黯然落幕，贪玩顽劣的潘毅为自己糟糕的新格和习惯付出了惨重的代价。