法律分析:
个人不退税是不会影响单位的。未及时办理个税退税的即为放弃退税,也就是没有退税金了。申请退税是权利，可以放弃退税，无需承担任何责任。但若纳税人需要补税，符合规定的免予汇算情形除外，未依法办理综合所得年度汇算的，可能面临税务行政处罚，并记入个人纳税信用档案。需要补税的要在七月前补缴税款，否则将面临每日万分之五加收滞纳金。退个人所得税是国家为了更好地照顾低收入人群而设立的一种福利，简单地说等于国家把你预缴多出来的钱退还给你，如果不申请退税，就等于放弃了预缴多出来的钱，对个人来说不会有什么大影响，除非你预缴多出来的钱数额比较大，那对个人收入来说是有一点影响。
法律依据:
《中华人民共和国税收征收管理法》 第五十一条 纳税人超过应纳税额缴纳的税款，税务机关发现后应当立即退还；纳税人自结算缴纳税款之日起三年内发现的，可以向税务机关要求退还多缴的税款并加算银行同期存款利息，税务机关及时查实后应当立即退还；涉及从国库中退库的，依照法律、行规有关国库管理的规定退还。
