一、政治退兵是否处罚，以及处罚谁，要看具体情况。
《征兵工作条例》规定：新兵到达部队后，应当按照规定进行检疫和复查。新兵在检疫、复查期间，发现因身体、政治情况不符合条件，不宜在部队服现役的，作退兵处理。
如果是政审人员工作疏忽，根据责任追究原则，自然是处理政审工作人员，被退兵的青年是不会被处罚的。
二、如果是新兵的原因，一般会有一定的处罚，但各地的规定也不尽相同。 每年都有部分新兵因为各种原因被退回。有的是身体原因，入伍到部队复检不合格；有的是因为家庭原因，本人不想当兵，但家长管不了，便想让部队帮着管教孩子；据
《解放军报》的一篇报道统计：近年入伍新兵90%以上是独生子女，入伍前生活环境宽松、物质条件优越，入伍后适应不了部队生活，产生了“当兵吃亏”和怕苦怕累的思想，便想方设法离开部队。 比如，浙江温岭市的朱某在2008年入伍后，补入
西藏军区山地步兵第五十二旅。朱某在去部队的路途上即心生退意，到了西藏，他感到更加孤独，心生后悔，经过数轮劝解，朱某还是无法适应军旅生活。最终，部队对朱某作退兵处理。温岭市人民政府认为朱某的行为违反了《
中华人民共和国兵役法》和《浙江省征兵工作条例》的有关规定，于2009年2月24日对朱某作出了
行政处罚决定书，决定对朱某处以人民币4万元的罚款，在两年内不得录用为
国家公务员、国有企业和事业单位职工，不得办理出国出境、升学手续。
以上是
浙江省温岭市的处理方式，并不是全国统一的，特别是罚款的数额，一般是根据当地的经济发展水平而定的，其他的则基本相同。