一个大型小程序往往就有百万千万个页面,大家可以想象整个网络上的小程序会是什么概念,说是海量一点都不过分.搜索蜘蛛抓取这些页面后,要有效的存放这些数据.数据结构一定要合理并具备较好的扩展性,写入以及访问的速度要很快.同时,搜索引擎还必须计算这些小程序之间的连接关系以及大量的历史数据,这样的数据是很多用户无法想像的.但就谷歌来讲,就有很多近百个的数据中心,上百万的服务器,这样大规模的数据计算,存储,访问一定在技术上有很多挑战.理解了这点,就明白为什么要我们在小程序开发的时候,尽量的减少我们小程序的体积,但就一个页面来说可能看起来比较小,但无数个这样的小程序就可想而知了.
查询处理快速准确
我们在使用搜索引擎进行查询的时候,在搜索栏输入我们想找的关键词,往往不到一秒就能看到搜索的结果.看起来简单,实际上搜索引擎的处理涉及非常复杂的处理过程.
