* 新闻详情- */>
免费预约专业提供网站解决方案
人工智能领域最牛X的公司,国外是Google,国内是百度。都是搜索引擎。这恐怕也不是什么巧合,而是因为搜索引擎是最适合开发人工智能的公司,他们拥有最大量的数据,包括文字、图片、视频,还有地图、路况、用户使用数据等等。
搜索引擎公司的AI成果在多大程度上运用到了他们的核心业务-搜索中?他们都没有明确地对外说明,从搜索工程师的零碎发言中猜测,至少目前还没有大规模使用,并没有改变搜索算法的基础。毕竟人工智能虽然概念存在了几十年,但效果突飞猛进只是近几年的事,还没有出现通用人工智能,在围棋这种规则简单明确的领域中牛X,迁移到规则模糊的系统中,比如搜索,还需要一些时间。
如下:
1、权重优先:先参照链接的权重,再综合深度优先和宽度优先策略抓取。打个比方,如果这条链接的权重还不错,就采用深度优先;如果权重很低,则采用宽度优先。
2、重访抓取:这个就可以直接字面上理解。因为搜索引擎使用单个重访与全部重访结合的居多。所以我们做网站内容要记得定期维护日常更新,让蜘蛛多来访多抓取才能收录快。
二、处理网页。
搜索引擎抓取到网页后,还要做大量的预处理工作,才能提供检索服务。其中,最重要的就是提取关键词,建立索引库和索引。其他还包括去除重复网页、分词(中文)、判断网页类型、超链接分析、计算网页的重要度/丰富度等。
处理网页分为以下几个部分:
1、网页结构化:HTML代码全部删除掉,提取出内容。
2、消噪:留下网页的主题内容。
3、查重:查找删除重复的网页与内容。
4、分词:提取出正文的内容后,分成若干个词语,然后排列存入索引库。同时计算这个词在这个页面出现了多少次。有必要指出,关键词堆砌就是借用这个原理对网站进行优化。这种做法属于作弊。
5、链接分析:搜索引擎会查询分析这个页面的反向链接有多少,导出链接有多少内链,然后判定这个页面多少权重。
上一篇:徐州网络营销技术基础知识学习
下一篇:青岛聚丙烯酸铵seo优化外包
申请获取免费网站建设解决方案