《三才图会》中有关面相的一章中用作图示的脸几乎都是男性，在女性被严密地圈子深宅大院的文化中，女性的脸被男性观看这一事实是有高度争议性的。在17世纪中的台湾，当荷兰军队在一次对农民住所的强行搜查中，让有身份的女性面对陌生男子，从而引发了一场反对荷兰殖民统治的抗争。在现实生活中，女性的脸可以被某些人观看，比如相士和医者。
深闺中的中国女性
欧洲宫廷绘画中的女性
相术对于中国社会各阶层均相当重要，实际上，几乎可以肯定地说，相术较之类似的风水堪舆学更为盛行。相术把个人与宇宙天地联系起来，例如脸部特征与神圣的五岳胜地的联系，以及数字命理学，尤其是神圣数字“九”的重要意义。袭用至今的相术理论体系，虽然历史悠久，来源纷杂，似乎到了明代早期已基本固定下来，‘相术与任何描绘人脸的尝试都紧密交织在一起，不论此类具象艺术的目的是什么。
相术
在论及相术在肖像画中的地位时，迈蒂.西格斯特德(MetteSiggstedt)评论道：“在元明时期，肖像画基本上成为一种画匠的活计，在中国绘画的主流之外有着它自己的发展脉络。在这一时期，绘画的发展更为追求抽象化和对笔法之书法特性的