该不该收亲爸的钱？

小时候我爸妈离婚，我跟着妈妈和养父生活，去年上大学才和我亲爸见面相认，他总感觉对不起我，所以总是给我物质方面的补偿，给我买电脑买手机。我们聊天总是要给我转钱，我有时候收，有时候拒绝。(其实我心里还是对他有点怨言的，感觉他小时候抛弃了我，虽然现在我和他说我已经原谅他了，但相处起来仍然有隔阂，毕竟19年没有联系过了)可是我不收我就害怕他难过，他会觉得我没有原谅他，我收了我自己又会别扭，像欠了他什么东西一样，其实我才不是在乎他的钱，可是我每次收了他给我的东西，我就会鄙视我自己，心里就会想:“干嘛要他的钱？”真的很害怕他们觉得我是个物质的人。我也拒绝过很多次，他又觉的我把他当外人，可能是吃人嘴短，拿人手软。归根到底，也许我并没有真正的接纳他吧！
我该怎么和他相处？
我到底应不应该收他给我的钱？