我的工作就是负责对外业务的沟通协调，所以跟单位的合作方接触比较多，跟本单位其他部门接触较少。领导很喜欢我，对我给予了很大的信任，同时对工作的自由度给的也很大。但是很尴尬的是，我的职位很低，并不能独立解决问题。很多工作我需要其他部门的领导配合。遇到有素质有职业感的，都是积极配合我，工作完成的顺利又漂亮。可是单位有那么几个老领导，官不大不小，工作又会接触到他的部门。有一次，我领导说这件事必须要询问该领导意见，我态度诚恳的打了电话询问对方意见，对方给我一顿损，说你别什么事儿都找我，言外之意我哪有那么多闲工夫管这么小的事儿。我耐心的说那我需要找贵部门哪位直接负责？他给了我一个名字，就挂了。这件事让我很委屈。有些事，你不通知他，绕过他，他知道了会不高兴。你通知他，他就这种态度。这次又有一件事需要他们部门配合完成。领导还是那句话，这件事必须先找该领导，我一想到要给他打电话，我就头痛。这样的人，要怎么落实工作？
另一个领导呢，由于我的工作范围有一些跟他们交叉，他就理所当然把本来是他们的工作分派给我。很会保护他们本部门员工的利益，所有的工作都要我来做。理由就是，反正最后这事儿也是从你这儿经手，你就做了呗。反正材料是你给我们的，你就直接做好就完了，你需要什么数据我们配合你，没有系统权限？好，我给你，这样你就没理由拒绝了吧。这是一种变相的不配合工作，因为我确实涉及到其中一部分工作，我就不知道该怎么拒绝。求大神指点，这样的事要怎么有理有据的拒绝，还不伤感情？
我曾经跟领导委婉的提过一次，某领导把不属于我们部门职责的活给了我干。我的领导只说，这不是咱们的活，你跟某领导说去。我要怎么说啊！我就是一个小虾米，人家是领导。我也不能说，我们领导说了这活就是你们的，我们不负责。这不是要得罪人么，以后的工作可怎么做啊。
求职场有经验的人，我要怎么应对这两种领导？
我很想知道，当你拒绝不属于你的工作时，理由只剩下：这不是我的指责范围内的工作，这是你们部门的指责。这时候，要怎样不伤感情的表达出这个理由，让对方放过你？