Bob's Blog

Web开发、测试框架、自动化平台、APP开发、机器学习等

Python爬虫(六)模拟用户登录

对于很多网站来说,登录后才会呈现部分数据。对于非网页形式的服务端,用户身份验证也是必要的操作。

比如贴吧登录后才能看到我的收藏,比如只有有妖气会员才能看的收费漫画,等等。

于是爬虫也需要能够模拟...


Django中访问权限的控制

在使用django时,常常有需求关于限定特定的人的查看和操作行为等,比如未登录无法查看内容,比如只有赋予权限的人才能新增记录。对此这样的需求,有几种处理方式。

(如果是用到了django restframework...


打包自己的python代码

这里的打包不是指弄成可执行程序那样,而是将自己的python代码处理为可以安装的包,并可以上传pypi或者内部的artifactory,用于在requirements中定义并安装对应的版本。

首先安装setupto...


Tensorflow基础图像分类

该篇文章主要是翻译tensorflow官方的基础图像分类教程,加了少许变动和注释。机器学习相关的基础概念不在这里详述。

当对图像进行分类时,需要提供足够的样例图像并需要带有标签,这样在训练时才能知道什么样的图像特征...


Python爬虫(三)解析网页内容

前一篇聊到了简单的请求和获取,这一篇会写关于网页内容的解析。

我们如果是爬取的html,那么内容就会有很多是我们不需要的,我们就需要解析html并抽取到自己需要的内容部分。

对于解析内容,有三种...