两条主线包括:
一是大数据技术体系。主要是数据采集和数据搜索,构建数据搜索体系。
二是大数据应用。即经历了从Google、Yahoo在搜索引擎时代,数据仓储、 大数据分析时代,大数据挖掘时代,再到AI技术与大数据结合时代。
其中,Google通过HDFS对海量数据的存储,运用Map Reduce技术中高效的计算网页内容,提高用户的检索能力,维系了搜索引擎之巅的地位。由于数据采集离不开存储,索引的构建也需要大量计算,因此存储容器和计算能力贯穿搜索引擎的整个更迭过程。
原创 | 2022-11-23 20:07:41 |浏览:1.6万
两条主线包括:
一是大数据技术体系。主要是数据采集和数据搜索,构建数据搜索体系。
二是大数据应用。即经历了从Google、Yahoo在搜索引擎时代,数据仓储、 大数据分析时代,大数据挖掘时代,再到AI技术与大数据结合时代。
其中,Google通过HDFS对海量数据的存储,运用Map Reduce技术中高效的计算网页内容,提高用户的检索能力,维系了搜索引擎之巅的地位。由于数据采集离不开存储,索引的构建也需要大量计算,因此存储容器和计算能力贯穿搜索引擎的整个更迭过程。
Copyright 2005-2020 www.kxting.com 版权所有 | 湘ICP备2023022655号
声明: 本站所有内容均只可用于学习参考,信息与图片素材来源于互联网,如内容侵权与违规,请与本站联系,将在三个工作日内处理,联系邮箱:47085,1089@qq.com