如果你不想在借调单位干了，首先要明确你的拒绝理由。如果是因为工作不适应或者对职位不感兴趣，可以与领导沟通，提出转岗或者辞职的申请。

如果是因为身体或者家庭原因不方便在借调单位工作，可以向上级单位提出请假或者调回原单位的请求。但无论如何，都需要与领导和人力资源部门进行沟通，遵守相关法律法规和单位规定，以免给自己带来不必要的麻烦。