Vo všetkých odborných materiáloch o harasmente sa zdôrazňuje, že nie je prejavom sexuálnej túžby, ale mocenskej prevahy. Aj preto sa ho dopúšťajú častejšie muži - od nich sa totiž skôr očakáva rola iniciátora alebo útočníka. Mnohí muži navyše vnímajú ženy na pracovisko v prvom rade ako sexuálne objekty a až potom ako kolegyne.
Obeťami sexuálneho obťažovania sú však aj muži. Stereotypné predstavy o maskulinite podporujú názor, že muži sú radi terčom pozornosti žien, prípadne že nemajú problém takéto situácie zvládnuť. Ženské "harašenie" má trošku inú podobu ako mužské - podobá sa viac na zvádzanie. Problémy sa vystupňujú zvyčajne až v druhej fáze - keď je už muž zamotaný do nechceného vzťahu.
Odborníci upozorňujú tiež na to, že sexuálne obťažovanie existuje aj medzi príslušníkmi toho istého pohlavia - môže ísť napríklad o zosmiešňovanie inej sexuálnej orientácie, alebo aj o priame fyzické obťažovanie medzi gaymi alebo lesbičkami. (gal)