爬虫访问小程序内页面时，会携带特定的user-agent

2019年上半年网站seo搜索优化，微信发布了基于小程序页面的搜索。 为了让我们更好的发现和了解小程序的页面，结合过去一段时间我们遇到的各种情况，强烈建议开发者花一些宝贵的时间仔细阅读本文：）

当爬虫访问小程序中的页面时，会携带特定的user-agent“”和场景值：1129

1、小程序中的重定向页面（url）可以直接打开。

小程序页面中的跳转url是我们爬虫发现页面的重要来源，而搜索引擎调用的结果页面（url）必须能够不依赖于上下文状态直接打开。 特别：建议页面需要的参数包含在url中

2、页面跳转首选组件。

小程序提供了两种页面路由方式：

A。 成分

b. 路由API网站seo搜索优化，包括 // //

建议使用组件。 如果非要使用API​​的话，可以在爬虫访问时，对点击设置的时间锁或者变量锁进行屏蔽。

3、页面参数清晰简洁。

结构清晰、简洁、有意义的参数对于爬取和后续分析非常有帮助，但使用 JSON 数据作为参数的方式是一个糟糕的实现方式。

4、仅在必要时请求用户授权、登录、绑定手机号码等。

建议仅在必要时才请求用户授权（例如阅读文章可以匿名，但发表评论则需要姓名）。

5. 我们不会在网页视图中包含任何内容。

我们现在做不到，长远来看也可能做不到。

6、利用配置引导爬虫进行爬行，同时屏蔽掉不值得搜索的路径。

7. 设置清晰的标题和页面缩略图。

页面标题和缩略图在理解页面以及提高曝光率和转化率方面发挥着重要作用。

通过wx.e或者自定义转发内容设置页面的标题和缩略图，同时也完成视频和音频组件的/-for-属性。

8.使用页面路径推送能力

可以大大丰富微信可收录的内容网站seo搜索优化，从而增加小程序内容的曝光机会。请参考：

除非注明，否则均为未来可期SEO原创文章，转载必须以链接形式标明本文链接

本文链接：https://www.szsinotech.com/seo_5917.html