わざわざ言わない限り他の人に分かるものではないのでそんなに気にされることはないと思います。

もし借りたと言われてもご本人様同士が納得しているのなら特に何も思いません。

ですが、確かに「貸して」系の方には言葉は悪いですが痛い方やマナーのない方が多く、ご友人がそう誤解されたり、そう思われなくても「そういう人かもしれない」と警戒される可能性はあると思います。
もし借りているという話を出すのなら、スレ主様が自分が言い出したこととフォローした方がいいかもしれません。