スレ主様に声をかけた人の偏見だと思います。
私も、友人もボーイッシュな服装をすることがよくあります。
元々がスポーツをやっていたもの同志なので、それが普通でした。
それを、『中途半端な男装だ』なんていわれれば心外です。
別に自分が好きな格好なので、そのままでいらっしゃってもいいと思います。
そういうことは気にしない方がよろしいですよ。