首页
论坛
合作外宣
发布硬广
发布外链
热门标签
HOT
友链申请
小黑屋
发布
发布帖子
发布文章
开通会员
开通广告商
全站资源折扣购买
部分内容免费阅读
一对一技术指导
三分钟一帖，避免刷帖
免审发布品牌宣传及新媒体推广
开通广告商
开通外链会员
全站资源折扣购买
部分内容免费阅读
一对一技术指导
三分钟一帖，避免刷帖
免审发布外链内容
开通外链会员
开通会员 尊享会员权益
登录
注册
找回密码
快速登录
首页
论坛
合作外宣
发布硬广
发布外链
热门标签
HOT
友链申请
小黑屋
开通会员 尊享会员权益
登录
注册
找回密码
快速登录
分享
经验分享
网络技能
帖子 7267
互动 5
关注 3
网络上的各种小技巧，保证你能学到很多实用的小技能。
超级版主
申请版主
发布
全部
最新发布
最新回复
热门
精华
站长可乐
1年前发布
0次阅读
关注
私信
百度Spider渲染UA在移动端全流量上线
百度Spider在2017年3月同时推出渲染UA在移动端和PC端进行内测（《百度Spider新增渲染UA抓取公告》），内测期间分析了多个抓取量异常的case，均非渲染UA造成。
本周百度Spider渲染UA在移动端全流量上线，PC端还未全部覆盖。特提醒PC站长，截止目前，对搜索引擎...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
百度Spider升级HTTPS抓取公告
8月份百度Spider升级了对HTTPS数据的抓取力度，HTTPS数据将更快被Spider抓取到。如网站还在做HTTPS的改造，且网站数据未搭建好，建议网站采取以下措施，避免Spider抓取，以免造成网站流量损失
1、把HTTPS的协议封掉，可把443端口关掉；
2、做HTTPS到http的301...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
搜索引擎检索系统概述
前面简要介绍过了搜索引擎的索引系统，实际上在建立倒排索引的最后还需要有一个入库写库的过程，而为了提高效率这个过程还需要将全部term以及偏移量保存在文件头部，并且对数据进行压缩，这涉及到的过于技术化在此就不多提了。今天简要给大家介绍一下索引之后...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
百度不收录原因分析——Spider抓取篇
目前百度Spider抓取新链接的途径有两个，一是主动出击发现抓取，二就是从搜索资源平台的链接提交工具中获取数据，其中通过主动推送功能“收”上来的数据最受百度Spider的欢迎。对于站长来说，如果链接很长时间不被收录，建议尝试使用主动推送功能，尤其是新网...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
搜索引擎抓取系统概述（二）
编者按：之前与大家分享了关于搜索引擎抓取系统中有关抓取系统基本框架、抓取中涉及的网络协议、抓取的基本过程的内容，今天将于大家分享搜索引擎抓取系统第二部分内容—spider抓取过程中的策略。
spider在抓取过程中面对着复杂的网络环境，为了使系统可以抓...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
搜索引擎抓取系统概述（一）
编者按：站长朋友们，今后定期都将在这里跟大家分享一些有关搜索引擎工作原理及网站运营相关的内容，今天先简单介绍一下关于搜索引擎抓取系统中有关抓取系统基本框架、抓取中涉及的网络协议、抓取的基本过程三部分。
互联网信息爆发式增长，如何有效的获取并...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
如何用程序识别Baiduspider ua
近日 ，Baiduspider针对移动抓取user agent（以下简称ua）进行了升级，与PC端的抓取ua做到版本统一，均称为Baiduspider/2.0。从此次更新的移动ua和PC ua来看，不管是移动ua还是PC ua都包含有关键字Baiduspider，我们可以由此判断访客ua是不是来自百度。与PC u...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
如何正确识别Baiduspider移动ua
百度站长平台发布公告宣布新版Baiduspider移动ua上线，同时公布了PC版Baiduspider UA，那么该如何正确识别移动UA呢？我们百度站长平台技术专家孙权老师给出了答案：
新版移动UA:
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like ...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
如何识别Baiduspider
上周百度站长平台接到某站长求助，表示误封禁了Baiduspider的IP，询问是否有办法获得Baiduspider的所有IP，打算放入白名单加以保护，防止再次误封。在此要告诉各位站长，Baiduspider的IP池是不断变动的，我们无法提供IP全集。
除此之外，之前还有站长发来质疑...
评分
回复
分享
站长可乐
1年前发布
0次阅读
关注
私信
百度spider介绍
1. 什么是Baiduspider
Baiduspider是百度搜索引擎的一个自动程序，它的作用是访问互联网上的网页，建立索引数据库，使用户能在百度搜索引擎中搜索到您网站上的网页。
2. Baiduspider的user-agent是什么？
百度各个产品使用不同的user-agent：
评分
回复
分享
上一页
1
…
47
48
49
50
51
…
727
下一页
跳转
3人已关注
分享
网络技能
网络上的各种小技巧，保证你能学到很多实用的小技能。
发布
关注
帖子
7267
互动
5
阅读
24.1W+
lightweb
超级版主
关注
老用户回归福利
学会在新站发帖的，站长赠送5000轻币作为奖励。
查看详情
发布帖子
发布文章
在手机上浏览此页面
登录
没有账号？立即注册
用户名或邮箱
登录密码
记住登录
找回密码
登录
社交账号登录
使用社交账号登录即表示同意
用户协议
、
隐私声明
注册
已有账号，立即登录
设置用户名
邮箱
验证码
发送验证码
设置密码
邀请码(选填)
注册
注册即表示同意
用户协议
、
隐私声明
