单页应用(Single Page Application)的搜索引擎优化
单页应用并不是单页一个全新发明的技术 ,而是应用引擎优化随着互联网的发展,越来越受Web开发者欢迎,搜索单页应用的单页体验可以模拟原生应用 ,一次开发 ,应用引擎优化多端兼容 ,搜索效果酷炫,单页节省成本 。应用引擎优化然而 ,搜索由于单页应用基本全部使用JS,单页受制于SEO效果,应用引擎优化目前国内使用单页应页技术的搜索网站还是少之又少。在已知使用单页应用的单页站点中,携程旅行的应用引擎优化SEO效果一直不错,那么今天,搜索安琦老师为我们分享了单页应用SEO解决四大方案,其中第四套是携程旅行曾经采用的技术方案,监控数据表明效果符合预期 :
一、单页应用 ?此SPA不是彼SPA…
我们所说的"单页应用"都为Single Page Application的直译 ,基本市面上"单页面应用"、"One Page Application"、"SPA"及某些语境下的"webapp " 都是指这一类移动站点。
那么典型的SPA是什么样子 ?我们用手机看看这条URL,http://cc-ng-z.azurewebsites.net/,可以衍生想象一下乘以N倍的 :切换页面无需加载的效果 ,Html和JS无法比拟的动画,以及对原生APP的追求……

*案例采用了angularJS这个鼎鼎大名的框架
关于html5及单页应用的处境,推荐以下两篇文章,第二篇实际上是百度UMX写的,但是现在原文删掉了,可以对自己的移动站点在技术架构上有个抉择和处理:
HTML5移动应用开发的生态环境简介
论Web App、Hybrid App以及Native App的设计差异
二 ,高科技永远连累我们干苦力的
为什么这么写,因为SPA对SEO损伤很大,非常大。
优点当然毋庸置疑:效果酷炫,我在视觉和产品面前无从反驳;性能高速度快,全JS嘛当然快 ,我在运维和产品面前无言以对;运算分散,异步加载,又省硬件又省流量,我在开发和产品面前彻底投降;JS前后端,一个人干一个站的活儿——关于这一点,我在老板、HR和产品面前哭的像一个孩子。总之 ,在各路人马的一番碾压后,我手里的网站改版了 ,一个SPA诞生了。
问题接踵而来 :我发现所有页面都变成了全JS生成;所有URL中参数前面都被#分割;第三方统计系统无法再正常工作;PC和移动的适配正则全部失效了;所有人都高兴了,只有你,做SEO的、做网站优化的,欲哭无泪 。
实际上我观察下来 ,只要使用了SPA架构的站点或多或少收到伤害,当看到有些大站点没做处理,只有可能搜索对于他们是个微不足道的渠道 ,比如锤子手机官网甚至不可思议地在PC站点上使用了类似架构,我相信他们的索引是有点问题的。这让我想到知乎上一个问题 ,说AMAZON的URL那么乱(当时)是因为他们不注重SEO吗?答案是不是 ,是他们更注重tracking 。同理 ,SPA带来的优点胜过SEO,我被PK掉了。
三 ,求人不如求己
在SPA项目面前 ,我发现我被放在了所有人的对立面 ,无法抗拒这种时髦架构的上线 ,当然不得不说效果确实比WAP即视感的站点高端和好用太多 ,不要螳臂当车逆历史车轮而动。既然反抗也很痛,那么享受吧!我知道,我还和搜索引擎在一起;老板要的是解决方案,当然回滚这种方案会让我先滚。

让我们看看一个典型的SPA网站架构,和传统的服务端生成内容不同,在传统的网站,当你发起请求的时候 ,页面的组装是在服务器上完成的 ,反馈给浏览器的是已经完成组装的HTML内容;而之于SPA ,服务端负责了数据和素材的存储 ,页面的逻辑执行和组装是在浏览器上通过Javascript完成和呈现的 ,这也就意味着,SPA不需要请求→接受 、请求→接受、请求→接受 、请求→接受这样玩了。完全凭借本地数据 ,即可完成基本的页面请求和访问。
基于此,当某人需要像APP那样切换页面但不刷新,并要在此基础上做文章时,#(井号)这个奇葩的符号粉墨登场 ,完成了"又要本地传输数据又不需要刷新页面"这个奇葩需求的历史任务 ,给单页应用的可抓取性重重一击。整个SPA的网站 ,URL不可抓取,页面内容不可抓取 ,糟透了 。
解决思路倒也简单 ,围绕全JS和URL可用解决问题 。
【方案一 :尽人皆知的Google抓取AJAX方案】
如何让搜索引擎抓取AJAX内容?
A proposal for making AJAX crawlable
Google给了官方指导,并在Twitter上做了个最大的case,但后来T家放弃了,我想更多是T战略上的放弃。腾讯的ISUX博客上也曾经推广过这种方式,居然是在2014年,如下文 :单页应用的SEO浅谈
总的来说,这种方案可以兼容Google,如果资源实在有限 ,有着能抓多少是多少的心态,可以试试 。主要不幸的是,5年前Google已和我们再见了
【方案二 :再做一个服务端生成内容的镜像网站】
说实话 ,量级不大的网站并且极度依赖搜索引擎这个渠道的情况下 ,这不失为一种方案,第一,蜘蛛绝对可抓取;第二,URL规则的完全可控(要知道现在流行的路由方式,在配置URL规则上相对于URLrewrite是有天生缺陷的);第三 ,SPA模式URL衍生的所有问题不再是问题。
但是面临的问题也令我望而却步:我要说服team再维护一个一模一样的网站,不是做完了事 ,是维护,这意味着修Bug要有资源修,改版要有资源改(能说服自己搜索进来然后点两下看到的网站不一样吗?) 、所有相关功能的测试、发布、常规测试,都要耦合在一起 ,当站点大到一定程度,流程前所未有地臃肿,推进无休止的争吵,所有烦恼包围着我,让我想静静。我预计自己会累垮,即使搞定了所有的资源 ,网站优化人员自身也将面临着非常繁重的工作,两个网站怎么融合,适配跳转怎么设定,是否需要主动判断蜘蛛展现不同的内容 ,内链入口怎么放 ,都是耦合 ,且是硬耦合,网站大了页面多了 ,越做耦合越多 ,以后一碰就是坑 。
【方案三 :HTML5 history 中的PushState】
还好 ,开发大大们总是不少奇巧淫技 ,这是个很"经典"的用法,配合<noscript>这个擦边球标签,既能实现URL的自定义 ,又能实现还算有效果的内容抓取 。蜘蛛 、浏览器 ,两方应对 ,给蜘蛛不带井号能抓取的URL,给浏览器访问非井号URL时中间做转换 ,这样的话每张页面都有了可抓取的URL ,且依然使用着高逼格的SPA架构 。内链可以做了 ,Sitemap可以做了 ,适配也轻松了。
但实际上,蜘蛛在这种页面上还是盲的,所有内容要仰仗于noscript这个标签里塞的数据 ,以及搜索引擎对这个标签的支持程度。

做到这一步,单就需求而言 ,搜索引擎的抓取从HTML规范讲完成了 ,但这种方式没有任何搜索承认过支持,包括最核心的那个对于noscript标签的支持。
【方案四:用更高效的方式完成两套页面】
再回到那个简单的架构图,SPA这种架构 ,渲染是在客户端(浏览器)完成的,大致流程如下:

蜘蛛无法执行JS ,相应的页面内容无从抓取 ,弊端还是那个弊端 。但我们知道,传统的服务端生成页面,response里已经是服务器渲染组装好的HTML代码 ,浏览器只负责正确地展现 ,蜘蛛负责正确的解析,所以,我们需要给蜘蛛渲染完成的HTML ,那么你的框架需要兼容如下流程的功能 。

我们看到 ,当访问为SEO所需页面的时候 ,数据传输到了SEO 服务器完成渲染和组装然后吐给浏览器和蜘蛛 ,那么蜘蛛拿到的即是完全可见且融合了SPA的页面——landing页都是蜘蛛可见的 ,接下去用户的点击都是SPA的页面。
需要注意的是,如果你是用URL来区分SPA架构与否,那么内链及入口要全部使用SEO URL,只为用户暴露SPA的链接 ,JS在这里阴差阳错地成为了优势 ,那些SPA的链接将比较难被抓取的 。
其实可以不使用URL来区分 ,延伸想想 。这样一个流程,也无多少高精尖元素 ,其实只是"依照条件"增加了一个服务端自动渲染的步骤,在架构方案上再细细夯实 ,可以实现一套代码两处运行 、SEO页面可单独自定义功能、、同一张landing人和蜘蛛没有跳转,没有区别对待 、全栈工程师的大量使用、SEO页面永远保持最新版等等省时省力的需求功能。
总之 ,如果你和我一样,有文章前面部分的抱怨,SPA架构势在必行,两套页面改版不能同步 ,单独多做一套可抓取页面没有太多资源投入,与此同时还是想以比较保守的方式给蜘蛛展现网站的内容,那么这个思路可以考虑 ,然后为自己量身定做。
关于单页应用的网站优化 ,在实践中我所经历过的这些吧。优化不是按部就班,作为从业人员要审时度势地采取不同方案 ,以结果为导向,上不了线 ,再好的优化也是个方案 。
