博客美化文档(一)
一、B站追番&追剧
1.安装插件
1npm install hexo-bilibili-bangumi --save
2.配置
将下面的配置写入站点的配置文件 _config.yml 里(不是主题的配置文件).
1234567891011121314151617181920212223242526# 追番设置bangumi: enable: true path: vmid: title: '追番列表' quote: '生命不息,追番不止!' show: 1 loading: metaColor: color: webp: progress:# 追剧设置cinema: enable: true path: vmid: title: '追剧列表' quote: '有时间来追剧呗!' show: 1 loading: metaColor: color: webp: progress:
enable: 是否启用
path: 番剧页面路径,默认bangumis/ ...
python爬虫学习笔记[转载]
同类文档:Python 学习笔记
ZY.Zhang
本文档基于 B 站视频教程
一、爬虫基础简介
爬虫简介
**什么是爬虫:**通过编写程序,模拟浏览器上网,然后让其去互联网上抓取数据的过程。
爬虫合法性探究
爬虫究竟是合法还是违法的?
在法律中是不被禁止的
具有违法风险
善意爬虫 & 恶意爬虫
爬虫带来的风险可以体现在如下两个方面:
爬虫干扰了被访问网站的正常运营
爬虫抓取了受到法律保护的特定类型的数据或信息
如何在编写使用的过程中避免进入局子的厄运?
时常优化自己的程序,避免干扰被访问网站的正常运行
在使用,传播爬取到的数据时,审查抓取到的内容,如果发现了涉及到用户隐私或者商业机密等敏感内容,需要及时停止爬取或者传播。
爬虫初试深入
爬虫在使用场景中的分类:
**通用爬虫:**抓取系统的重要组成部分。抓取的是一整张页面数据。
**聚焦爬虫:**是建立在通用爬虫的基础之上。抓取的是页面中特定的局部内容。
**增量式爬虫:**监测网站中数据更新的情况。只会抓取网站中最新更新出来的数据。
爬虫的矛与盾:
**反爬机制:**门户网站 ...