男友收了同学的围巾，我让他退回去他不同意，我错了吗？

我和男友都在上大学，最近他收到了一条围巾，是那种粉色的还带着小爱心，后来我才知道这是他的女同学送给他的，他又给我了。我让他退回去他也不愿意，说这样很伤人，我看了他们的聊天，确实没有什么暧昧内容，但是我还是很有紧迫感。大家觉得我该怎么做，要不要找那个女生谈谈呢？