经验总结

记录日常工作生活中遇到的问题,技术和知识点
经验总结

2019年搜索引擎蜘蛛爬虫名称最新整理总汇

4

Deshun 发布于 8年前 (2019-03-31) 12309℃ 赞 (4)

2019年搜索引擎蜘蛛爬虫名称最新整理总汇

一般我们的网站能在百度等搜索引擎上搜到,说明该搜索引擎的爬虫爬到了我们的网站并且被搜索引擎收录。全世界有成千上万的搜索引擎,当然不一定只有搜索引擎才有爬虫蜘蛛。那么每天有这么多蜘蛛访问我们的网站,肯定对网站的产生一些影响,比如流量的损失、占用服务器资源等,严重者甚至造成服务器宕机...

经验总结

Robots协议探究:如何好好利用爬虫提高网站权重

1

Deshun 发布于 8年前 (2019-03-29) 4428℃ 赞 (0)

Robots协议探究:如何好好利用爬虫提高网站权重

站长们通常希望百度、Google 这样的大型搜索引擎来抓取网站内容,但又很厌恶其他来路不明的网络爬虫抓取自己的信息。这样才有“好爬虫”和“坏爬虫”这样的说法。提到“好爬虫”,就不得不提网络爬虫与web之间的访问授权协议——Robots协议了。Robots协议的定义Robots协议...

经验总结

网站HTTP错误状态代码及其代表的意思总汇

1

Deshun 发布于 8年前 (2019-03-07) 3526℃ 赞 (0)

网站HTTP错误状态代码及其代表的意思总汇

在调试Web服务器时,会遇到各种错误代码,让人摸不着头脑,单如果知道了这些代码代表什么意思?很多问题就迎刃而解了,对我们的调试也会有很大帮助。让我们来看一下这些代码分别代表什么意思:400 无法解析此请求。401.1 未经授权:访问由于凭据无效被拒绝。401.2 未经授权: 访问...

经验总结

WPS 2019删除我的电脑中的WPS云文档图标

3

Deshun 发布于 8年前 (2019-03-05) 15184℃ 赞 (4)

WPS 2019删除我的电脑中的WPS云文档图标

WPS新版增加了云文档功能,可以实时同步文件到服务器,方便管理和使用。不过云文档会在我的电脑中生成一个“WPS云文档”图标,而且不能直接删除,特别烦人。其实还是有办法将其删除的,方法如下:1、打开WPS云文档,会在托盘生成一个图标,右击该图标,选择“设置”。2、在弹出的设置窗口中...