拒绝无偿加班女同事说我不够讲义气

公司这几天赶大货，把我们办公室的一起叫去工厂包装，然后实在来不及，在第一天无偿(一顿饭因该不算有偿吧)加到晚上12点后，第二天要继续12点，然后我拒绝了，直接回家，结果同事说我不讲义气，大家都在加班领导也在加班，我一个人回去说我只能同甘不能共苦。还说这就像是一群人去打架我一个人跑了？？？ 然后领导也因为这件事情给我穿小鞋？？我做错了吗？？现在好像大部分人对我有意见..