如果你已经答应还钱给前男友，并且已经按照约定开始还款，但他仍然一直缠着你，这可能是他想要重新恢复与你的关系，或者是他想要给你施加压力来控制你。在这种情况下，你可以采取以下措施：
坚定地表达你的立场。告诉他你已经开始还款，并且会按照约定的时间表进行还款。同时，明确表示你不希望继续与他保持联系。
不要回应他的信息或电话。如果他一直给你发信息或打电话，你可以考虑忽略他的行为。如果他威胁你或者给你带来了不适，你可以考虑报警或者寻求法律援助。
给自己设定边界。不要让他的行为影响到你的生活和工作。如果需要的话，你可以考虑通过朋友或者家人来保护自己。
如果他一直缠着你，你也可以寻求专业心理咨询帮助来处理你的情绪和应对策略。
最重要的是，你要坚定自己的立场，不要让他的行为对你造成影响，并寻求必要的支持和援助。