展示 221 篇文章
每页 5 篇
有些网站会有反爬虫的机制。反爬虫的机制有很多种,之后会在一篇文章中统一说明。
这篇文章是记录headless浏览器时被识别为爬虫的解决方式。
比如这个网站会检查访问者是否异常:"https://haveibeenpwned.com/".
当用Phantom......
python
爬虫
spider
当只是爬静态网页时,用requests并解析页面是很方便的。如果我们看到加载页面时有调用API(浏览器的dev tool里network标签里看),也可以直接向这个api发送请求。
不过当遇到ajax异步加载或者需要执行javascript时,仅仅使用requests就不够了。这时我们可......
python
爬虫
spider
当对图像进行分类时,需要提供足够的样例图像并需要带有标签,这样在训练时才能知道什么样的图像特征对应到什么标签名,达到分类的目的。另外每次训练的损失度和准确率都有可能小幅浮动,属于正常现象。
官方keras有提供一些数据集,比如手写数字,比如该教程里用到的服装,图片是28x28并带有10种......
python
TensorFlow
matplotlib是python的一个数据绘图包。在Mac上使用时遇到了一些报错,分别的解决方式如下。
1. 提示"ModuleNotFoundError: No module named '_tkinter'"
这个错误往往在引入包时就会报错......
python
Kali linux是一个特殊的版本,里面包含了许多的工具,用于网络扫描,渗透测试,安全审计相关等。对于学习技术的人来说,kali就是一个巨大的快捷工具包。虽然学习门槛比较高,但对于热衷技术的人来说还是值得一试。
我记录了一下在mac上用parallels destktop安装kali的......
linux