多分たまたまその撮影を頼んできた人が知ってるキャラの私服に似てるなぁと思っただけではないでしょうか？
たいていの作品はメインでは制服や軍服、甲冑、着物、ドレス等を着てる事が多いので、メインの服が私服な作品(キャラ)じゃなければ、私服はその作品やキャラを知ってるかよほど好きな人じゃないとわからないと思います。
それに、スレ主様は全くの私服がたまたまその人から見てあるキャラのコスに似てただけかもしれません。
好きなブランドの服なら堂々と着ていいと思います。
キャラが着てる私服は普通に市販されてる服を組み合わせてコスできる場合がよくあるので、作品やキャラを知らなくても全くの私服でたまたま似てしまう事はあると思います。
それを「コスプレだ」と言われたら「じゃあ普通に着ちゃいけないの？」という事になってしまうと思います。
なので、全くの私服なら上にも書いたように堂々と着ていいと思います。
全くコスは意識してなくてたまたま好きだから着た私服が他の人から見たら「あのキャラの私服に似てるなぁ」という事なんてよくある事だと思います。