你可以拒绝，但是会影响领导对你的评价，出差也是因为工作需要，单位安排你出差去完成工作任务，如果你因为没有补贴就拒绝，说明你不服从单位安排，领导会对你有意见，影响你以后的工作开展，所以会得不偿失，最好不要拒绝。