这样该生气吗？

事情是这样的，我和男友今天都休假。昨天我问他要不要来陪我，他说不行，因为今天早上有事要早起去处理（事情大概一个早上就能处理完）。

到了傍晚，他给我发消息说，他正在外面和朋友吃饭。老实说，看到这条消息，我心里真有点高兴不起来。脑海里瞬间冒出一个想法：他是不是宁愿和朋友吃饭，也不想陪我？

补充一下，我们见面的时间并不多。上次见面还是上周四晚上他下班后过来陪我，一直到第二天中午吃完饭后才离开。他平常工作特别忙，每天常常要忙到晚上八点多才能回家。他也跟我说过最近工作忙，周末没什么时间陪我，我都表示理解，也会自己安排好自己的事情。

但这次，他明明有时间和朋友吃饭，却没能陪我，我真的很纠结，在这种情况下，我该生气吗？