大数据处理对电子商务影响有哪些？

　　电子商务：通俗来说就是企业通过网络,把线下的业务移到线上去开展,完成商品或者服务的销售交易。 　　大数据：指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。 　　近几年来，互联网产业高速发展，很多传统企业通过电子商务，开展网络营销，线上产生交易的数据量是线下无法比的，因而就产生了处理巨量资料，也就是大数据的急迫需求，解决不好，就成为电子商务发展的瓶颈。反之，大数据处理的成功发展，也促进了企业加速开展电子商务，为互联网产业的发展注入新动力。 　　一、大数据处理模式 　　在电子商务领域内，信息的大批量处理如果是以PB、EB、ZB为计量单位，则这些信息就构成了大数据。以往的计算机处理模式已经很难对这些大数据进行高效率的处理，势必会影响电子商务的总体发展。因此对大数据时代的计算机处理模式进行革新是获得电商行业整体突破的基本保证。传统的数据处理模式是数据库集群模式，大数据处理模式的基本要求是建构云计算Map Reduce处理体系，使信息的分解处理和结果合并成为可能。 　　(一)数据库集群模式 　　集群模式的基本运行原理是将同一种应用程序通过不同的工作方法相互协调共同完成，在面对客户端的数据请求时，为其提供单一映像，并将这些映像通过一定的连接技术和方法与硬件系统进行连接，整体上建构一个松散耦合的集合。简单来说，数据库集群模式实现了数据库技术和集群技术的结合。数据库集群模式的运行较为平稳，具有多方面的技术优势，例如强大的靠扩展性、整体的可靠性等等。 　　但是在面对大数据处理时，数据库集群也表现出了一定的缺陷。这些缺陷主要包含以下方面：第一是可扩展性补不强。如果系统功能节点的硬件基础设施选择的是Pc服务器，那么将会出现系统线缆繁杂、硬件高度复杂化和架设安装难度大等问题，对其扩展性造成了一定的限制;第二是数据通信受限。目前运行高速互联网的必备条件是将 PCI插槽与主机进行连接。但是PCI的数据传送能力有限，不能满足节点间的数据通信要求;第三是提升空间小。这种空间主要是指数据库数据集的可扩展空间，在进行数据处理时如何解决系统的安全性、运算速度和可扩展性是数据库集群模式要面对的重要问题。此外，数据库集群模式还存在兼容性、可靠性、容错性、对异质条件支持能力等方面的局限性。 　　(二)Map Reduce框架 　　云计算构架主要是由低端服务器进行大规模集群构成的数据处理技术，在数据存储容量和数据处理能力上具有绝对的优势。由于云计算平台在运行中的可靠性和可扩展性等功能，目前众多的大型企业或单位都将其作为web搜索和大数据分析的主要平台，如中国移动、淘宝、网易、百度等等。Map Reduce框架主要包含三个方面的内容，即并行编程模型Map Reduce、分布式文件系统(HDFs)、并行执行引擎。 　　Map Reduce的设计是由google完成的，主要是进行大数据集的计算处理工作，代表了分析技术的整体发展状态。Map Reduce在进行数据处理时，先将对象进行抽象化处理，使其以映射和化简操作对的形式呈现出来，其中映射部分进行数据的过滤，化简部分进行数据的聚集工作，在工作中均以良好的界面进行管理工作。对Map Reduce计算过程进行分解，可以将其工作原理理解为将大数据集进行解构，解构之后的结果是形成了数量众多的小数据集，通过集群节点对这些小数据集进行分别处理，由此得出中间结果，将这些结果通过节点进行合并，就可以得出对整个大数据集的处理结果。 　　二、大数据时代电子商务IT技术设施的革新 　　IT基础设施是保证电子商务系统运行的前提，对其进行技术革新能够使其快速适应电子商务大数据时代。在后互联网技术时代，电子商务企业广泛采用的IT基础设施一般是PC服务器。随着数据信息处理规模的扩大和处理能力的要求不断增强，电子商务企业对于IT基础设施的革新正朝着小型化和集群化方向发展，与此同时，电商企业还需要不断地投入大量的人力和技术实现IT基础设施的维护、升级和更新。 　　(一)数据仓库的发展 　　从近期对电子商务信息处理数据的研究可以发现，在系统运行中出现的大数据仍在以惊人的速度发展和增长，其特点也表现为明显的分布式发展和异构性趋势。传统的数据库如具备一般数据处理功能和信息分析技术的数据库以及BI技术已经很大程度上不能满足PB级的数据量处理要求。这种大规模数据的发展促使电子商务数据仓库系统出现了非常明显的变革，也即是数据量数量级不断上调，目前已经实现了由TB向PB的迈进，并且仍呈现出爆炸性的增长态势。 　　根据对现今电商数据量发展状况及趋势的研究，可以发现电子商务数据仓库将会呈现以下特点：第一，未来两年电商数据仓库的最大数据量将会达到甚至超过 1OOPB，并且其增长速度也将呈现出前所未有的变化，远远超过摩尔定律;第二，对数据的分析方式实现质的变化，将从常规化分析向深度化分析转变;第三，中低端硬件组成的大规模集群硬件平台将会代替高端服务器构成的基础设施硬件支持平台，基础设施进一步向集群化发展;由于硬件系统的革新将会对并行数据库产生了重要影响，使其规模不断扩大，由此带来的成本也将逐渐增长。总体来讲，目前电子商务将会出现大规模革新的直接因素是数据量的大规模增长和深度分析的现实要求。 　　(二)云计算构架 　　云计算构架是一种针对分布式网络计算而设计的新型数据处理模式，在应用中已经表现出了良好的适应性。在网络环境中进行计算、存储、软件等在线服务时较传统构架有显著的性能提升。在目前应用于电子商务领域内的云计算构架来讲，其具备了以下特征：按需自助服务(on Demand self-service)、可度量服务(measured service)、池化资源(resource pooling)、泛化网络访问((broad network access)以及快速弹性(rapid elasticity)。 　　三、大数据处理对电子商务的影响 　　云计算的发展历史并不长，首次引入云计算技术的是淘宝网，其所有交易都是基于自建系统完成的，而阿里云也成为我国首家开展云计算供应的公司。云计算对于大数据的超强处理能力使其对电子商务的发展起到了推波助澜的作用，主要影响表现在以下方面。 　　(一)信息检索能力 　　电子商务平台虽然很大程度上改变了消费者的购物方式，但是就营销方式来说，商品数量和种类依然是影响消费者选择商家的主要因素。在电子商务领域内，商品数量和种类呈现出结构的繁杂化发展甚至是非结构化发展趋势。这些都为 IT基础设施以及信息处理技术提出了挑战，大数据处理技术由于其具备的灵活性和功能强大的检索服务使其能够引领电子商务信息处理技术的新方向。 　　云计算的检索服务可以根据客户的实际需求和交易习惯对大量的信息进行筛选和显示，其智能性和高效性也是传统IT基础设施多不能比拟的。此外，云平台还具有信息推荐功能，根据网上交易整体情况筛选热点商品予以展示，提高了交易的针对性和检索效率。云计算性能的优势还体现在对人类部分思维进行描述的功能上，解决了长期以来计算机信息处理不能够准确把握人类语言和知识应用的难题，使数据的处理实现了功能的深度发掘。这种技术优势表现在实际交易中就是电商平台能够对用户输入的语言进行迅速的反