领导老是派我干另外的活

因为疫情原因，单位需要定期派人到隔离点工作，每个分管领导手下要派人，我的分管领导手下有五六个人，但是他老派我去，因为升职关系我还要靠他推荐，也不好拒绝，他手底下五六个人，其中我去过三次了，另外一个去过一次，剩下的人一次都没去过，最近一次去过后，我越想越多，怕他下次再派我去，而我本身是一个不懂拒绝的人，又担心升职问题如果拒绝会被领导难看，所以我又焦虑了，以前我也有过焦虑症，因为别的事情。这次我在想我是不是需要马上去找领导说下次不要派我去了还是怎么办才好