Ljubavna magija se u velikoj meri oslanjala na ono što se smatralo suštinski ženstvenim: plodnost, rođenje, menstruacija i „prirodom“ ili „sramnim delovima“ žene, to jest genitalijama.
Ovaj ženski atribut se ogleda u literaturi kao što je Malleus Maleficarum i procesima u kojima su većina slučajeva iznetih pred veće bile žene optužene da su opčinile muškarce. Ovo ilustruje uobičajeni stereotip da muškarci nisu koristili ljubavnu magiju. Prema istoričarima Gvidu Ruđeru i Kristoferu A. Faraoneu, ljubavna magija se često povezivala sa prostitutkama i kurtizanama. Žene u ovim profesijama često su imale psihološku moć nad svojim partnerima, a ljutnja je ponekad rezultirala drastičnim merama kao što su optužbe za veštičarenje.
U ranom srednjem veku postoje neki dokazi da se smatralo da su žene češće bile praktičarke ljubavne magije, za koju se smatralo da je manje intelektualna vrsta magije. Na primer, u delima Regino od Pruma, Burchard of Vorms i Hincmar , praktičari ljubavne magije su obično ženski.
Pogled na žene u renesansi najbolje može ilustrovati Malleus Maleficarum iz 1487. godine. U uvodnom delu ovog teksta govori se o seksualnosti žena u odnosu na đavola. Hajnrih Kramer je u svojoj knjizi napisao da „Sva vradžbina potiče od telesne požude, koja je kod žena nezasita“. Ljudi renesanse su se plašili seksualne moći suprotnog pola. Povezali su ga sa đavolom, smatrajući veštice seksualnim partnerima demona. Kramer tvrdi da je veštica dobila svoje moći tako što je pozvala đavola da stupi u telesne odnose. Kroz svoju seksualnost ona stiče svoju moć, pa se na njenu seksualnost gleda kao na zlo i nešto čega se treba plašiti. U mnogim optužbama za vradžbine pred rimskom inkvizicijom, muškarci su optuživali žene da vezuju svoje strasti i seksualnost upotrebom sopstvene seksualnosti.
Dok u literaturi žene dominiraju svetom veštica, neki naučnici veruju da je stvarnost bila mnogo drugačija. Metju V. Diki, istaknuti naučnik magije, tvrdi da su muškarci glavni nosioci ljubavne magije. Demografski, oni sugerišu da su najveća starosna grupa koja je praktikovala ljubavnu magiju bili mlađi muškarci koji ciljaju na mlade, nedostižne žene. Postoje različita objašnjenja zašto je književni svet suprotstavio stvarnost u ovoj oblasti, ali uobičajeno tumačenje je da su muškarci pokušavali da oduzmu sebe od asocijacija.