我通常不会与道德水平不高的人走的太近，在...

我通常不会与道德水平不高的人走的太近，在我心中这些人占了很大一部分，如果与他们套上交情，他们可能以交情为要挟占便宜，比如借钱，求我办事帮忙，或者混吃混喝之类的，但如果完全不搭理他们，他们会觉得我看不起他们，不认可不接纳他们，从而恨我，这样的矛盾怎么解决？