老板安排你与某位同事一起玩，但你并不愿意，可能是因为与这位同事存在一些相处的困难。选项C指出，你与老板安排的同事可能聊不到一起吃不到一起，这正是一个关键的原因。这说明你们在兴趣爱好、性格或者价值观等方面可能存在差异，导致难以形成良好的互动和合作关系。因此，你更倾向于独自行动，而不是与这位同事一起。所以答案是C.跟老板安排的同事聊不到一起吃不到一起。