如何用Python爬取高颜值美女，相信很多没有经验的人对此束手无策，为此本文总结了问题出现的原因和解决方法，通过这篇文章希望你能解决这个问题。1 数据源知乎话题『美女』下所有问题中回答所出现的图片2 抓取工具Python 3，并使用第三方库 Requests、lxml、AipFace，代码共 100 + 香港云主机 行3 必要环境Mac / Linux / Windows （Linux 没测过，理论上可以。Windows 之前较多反应出现异常，后查是 windows 对本地文件名中的字符做了限制，已使用正则过滤）无需登录知乎（即无需提供知乎帐号密码）人脸检测服务需要一个百度云帐号（即百度网盘 / 贴吧帐号）4 人脸检测库AipFace，由百度云 AI 开放平台提供，是一个可以进行人脸检测的 Python SDK。可以直接通过 HTTP 访问，免费使用。5 检测过滤条件过滤所有未出现人脸图片（比如风景图、未露脸身材照等）过滤所有非女性（在抓取中，发现知乎男性图片基本是明星，故不考虑；存在 AipFace 性别识别不准的情况）过滤所有非真实人物，比如动漫人物 （AipFace Human 置信度小于 0.6）过滤所有颜值评分较低图片（AipFace beauty 属性小于 45，为了节省存储空间；再次声明，AipFace 评分无任何客观性）6 实现逻辑通过 Requests 发起 HTTP 请求，获取『美女』下的部分讨论列表通过 lxml 解析抓取到的每个讨论中 HTML，获取其中所有的 img 标签相应的 src 属性通过 Requests 发起 HTTP 请求，下载 src 属性指向图片（不考虑动图）通过 AipFace 请求对图片进行人脸检测判断是否检测到人脸，并使用 『4 检测过滤条件』过滤将过滤后的图片持久化到本地文件系统，文件名为 颜值 + 作者 + 问题名 + 序号返回第一步，继续7 抓取结果直接存放在文件夹中（angelababy 实力出境）。另外说句，目前抓下来的图片，除 baby 外，88 分是最高分。个人对其中的排序表示反对，老婆竟然不是最高分代码9 运行准备安装 Python 3，Download Python安装 requests、lxml、baidu-aip 库，都可以通过 pip 安装，一行命令申请百度云检测服务，免费。人脸识别-百度AI看完上述内容，你们掌握如何用Python爬取高颜值美女的方法了吗？如果还想学到更多技能或想了解更多相关内容，欢迎关注开发云行业资讯频道，感谢各位的阅读！
相关推荐: Shiro中怎么使用Spring Boot 实现权限管理系统
今天就跟大家聊聊有关Shiro中怎么使用Spring Boot 实现权限管理系统，可能很多人都不太了解，为了让大家更加了解，小编给大家总结了以下内容，希望大家根据这篇文章可以有所收获。Apache Shiro 是一个强大且易用的 Java 安全框架，能够让开发…
免责声明：本站发布的图片视频文字，以转载和分享为主，文章观点不代表本站立场，本站不承担相关法律责任；如果涉及侵权请联系邮箱：360163164@qq.com举报，并提供相关证据，经查实将立刻删除涉嫌侵权内容。
微信扫一扫 
