社区站收录难，我从结构上做了三处调整。这个案例讲的是纯技术层面的解决。
那个社区站的问题是，内容很多，用户很活跃，每天新增几百个帖子，但收录只有一小部分。
我查了下原因，发现三个问题。第一，URL 结构太乱。同一个帖子，从不同版块进去有不同的地址，还有很多带参数的地址。第二，分页太多。版块的分页很深，一个热门版块有几百页。第三，有大量低质页面。用户主页、搜索页、标签页，这些内容少但数量巨大，把抓取预算吃掉了。
我的三处调整。第一，URL 规范化。统一帖子的地址格式，其他变体全部 301 过去，带参数的用 canonical 指回。第二，分页控制。早期分页允许抓取，深层的分页用 robots 挡掉，同时给帖子做一个时间排序的归档页，从归档页能到达所有帖子。第三，低质页面处理。用户主页、搜索页设成不索引。
调整完等了一个月。收录量开始稳步上升。三个月后，帖子的收录率从原来的两成涨到了六成多。
这个案例的关键点是，社区站的内容是散乱的，你必须用技术手段帮搜索引擎理清楚。URL 规范、分页控制、低质页面处理，这三件事做好了，社区站的收录问题就解决了一大半。
社区站的SEO，技术是前提。结构不理顺，内容再好也传不出去。
—— 来自 图趣网 - 优秀网站分类目录 的分享
