如果你损坏了别人的衣服，二十年后你仍然要付出代价。损坏他人财物的，必须按价赔偿。如果衣服破了，可以打折补偿。根据侵权责任法第二章第十九条规定：侵犯他人财产的，按照损失时的市场价格或者其他方法计算财产损失。毁坏财物数额较大的，应当依法承担刑事责任和民事赔偿。