导航:首页 > 网络数据 > 大数据对网络的要求

大数据对网络的要求

发布时间:2022-07-06 16:04:08

❶ 简述大数据时代网络信息具备哪些新的特点

大数据呈现出“4V+1C”的特点:(1)Variety,大数据种类繁多,在编码方式、数据格式、应用版特征等多个方面存在差异性,权多信息源并发形成大量的异构数据;(2)Volume,通过各种设备产生的海量数据,其数据规模极为庞大,远大于目前互联网上的信息流量,PB级别将是常态;(3)Velocity,涉及到感知、传输、决策、控制开放式循环的大数据,对数据实时处理有着极高的要求,通过传统数据库查询方式得到的“当前结果”很可能已经没有价值;(4)Vitality,数据持续到达,并且只有在特定时间和空间中才有意义;(5)Complexity,通过数据库处理持久存储的数据不再适用于大数据处理,需要有新的方法来满足异构数据统一接入和实时数据处理的需求。

❷ 大数据在网络优化中大有可为

大数据在网络优化中大有可为

网络优化是确保网络质量,提升网络资源利用率的有效手段。近年来,随着网络容量的不断提升、网络用户数的不断增加、网络设备的多样化,用新技术和新方法替代传统网络优化手段成为一种趋势,尤其是在大数据分析技术的兴起下,其在网络优化中的作用日渐突出。

网络优化的传统手段

网络优化是通过对现已投入运营的网络进行话务数据分析、现场测试数据采集、参数分析、硬件检查等,找出影响网络质量的原因,并且通过参数的修改、网络结构的调整、设备配置的调整和采取某些技术手段,确保系统高质量的运行,使现有网络资源获得最佳效益,以最经济的投入获得最大的收益。一般而言,传统的网络优化有以下几种方法:

一、话务统计分析法:通过话务统计报告中的各项指标,可以了解和分析基站的话务分布及变化情况,分析出网络逻辑或物理参数设置的不合理、网络结构的不合理、话务量不均、频率干扰及硬件故障等问题。

二、DT&CQT测试法:从用户的角度,借助测试仪表对网络进行驱车和定点测试。可分析空中接口的信令、覆盖服务、基站分布、呼叫失败、干扰、掉话等现象,定位异常事件的原因,为制定网络优化方案和实施网络优化提供依据。

三、用户投诉:通过用户投诉了解网络质量。即通过无处不在的用户通话发现的问题,进一步了解网络服务状况。

四、信令分析法:主要针对A接口、Abis等接口的数据进行跟踪分析。发现和定位切换局数据不全、信令负荷、硬件故障及话务量不均以及上、下行链路路径损耗过大的问题,还可以发现小区覆盖、一些无线干扰及隐性硬件故障等问题。

五、数据库核查与参数分析:对网络规划数据和现网配置参数、网络结构数据进行核查,找出网络数据中明显的数据错误,对参数设置策略进行合理性分析和总结。

六、网络设备告警的排查处理:硬件故障告警一般具有突发性,为了减小对用户的影响,需要快速的响应和处理。通过告警检查处理设备问题,保障设备的可用性,避免因设备告警导致网络性能问题。

在实际工作中,这几种方法都是相辅相成、互为印证的关系。网络优化就是利用上述几种方法,围绕接通率、掉话率、拥塞率和切换成功率等指标,通过性能统计测试数据分析制定实施优化方案系统调整重新制定优化目标性能统计测试的螺旋式循环上升,达到网络质量明显改善的目的。

网络优化亟待创新

当前,随着用户数的不断增长,随着网络容量的不断增加,随着网络复杂度的不断提升,以及网络设备的多样化,网络优化工作的难度正在不断提升,网络优化的方法和手段亟待创新。

首先,网络优化是一项技术难度大、涉及范围广、人员素质要求较高的工作,涉及的技术领域有交换技术、无线技术、频率配置、切换和和信令、话务统计分析等。传统网络优化工作多依赖于技术人员的经验,依赖人工进行统计分析。网络优化的自动化程度较低,优化过程需耗费大量的时间、人力、物力,造成了大量的资源浪费,影响网络问题解决的时效性。另外,优化工程师借助于个人经验对网络数据进行分析和对比,而非根据网络相关的数据综合得出优化方案,存在一定的局限性。

其次,随着我国移动通信事业迅速发展,我国移动互联网发展已正式进入全民时代,截至2014年1月,我国手机网民规模已达5亿。网络结构日益复杂,数据业务已经成为移动通信网络主要承载的业务,用户通过智能终端的即时互联通信行为,使移动网络成为大数据储存和流动的载体。高速变化的数据业务速率和巨大的网络吞吐量以及覆盖范围的动态实时变化,在很大程度上改变了现有网络规划和优化的模型,在网络优化工作中引入大数据是非常迫切和必要的。

最后,全球数据信息成为企业战略资产,市场竞争和政策管制要求越来越多的数据被长期保存。对于运营商的网络优化来说,也需要保存各类数据,以便进行用户行为分析和市场研究,通过大数据实践应用提升网络优化质量并助力市场决策,实现精细化营销策略,提升企业的核心竞争力。

面对上述挑战,运营商正尝试进行网络优化工作的创新,尝试在网络优化中引入新技术和新方法。而正在全球兴起的大数据分析技术,开始在网络优化中大显身手。

网络优化拥抱大数据

大数据(Big Data),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、整理成为帮助企业经营决策目的的资讯。大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。大数据具有数据量巨大、数据种类繁多、价值密度低及处理速度快的特点,同时具备规模性、高速性、多样性、价值性四大特征。

一般而言,利用大数据技术进行网络优化的过程可分为三个阶段:数据来源和获取、数据存储、数据分析。

数据来源和获取—对于运营商而言,通过现有网络可以收集大量的网络优化相关信令资源(含电路域、分组域)、DT测试&CQT测试数据,这些数据大都以用户的角度记录了终端与网络的信令交互,内含大量有价值的信息。如终端类型、小区位置、LAC、imsi、tmsi、用户业务使用行为、用户位置信息、通话相关信息、业务或信令、信令中包含的各种参数值。

设备层包含基站、BSC、核心网、传输网等配置参数和网络性能统计指标(呼叫成功率、掉话率、切换成功率、拥塞率、交换系统接通率等)、客户投诉数据等。

采集到的数据一般而言,经过IP骨干网传输到数据中心,进行存储。随着云计算技术的发展,未来数据中心将具备小型化、高性能、可靠性、可扩展性及绿色节能等特点。

数据存储—网络优化中涉及巨大的数据存储,包括信令层面的数据信息和设备存在的数据信息,这些数据只有妥善存储和长期运营,才能进一步挖掘其价值。传统数据仓库难以满足非结构化数据的处理需求。Google提出了GFS、BigTable、MapRece三项关键技术,推动了云计算的发展和运用。

源于云计算的虚拟资源池和并发计算能力,受到重视。2011年以来,中国移动、中国电信、中国联通相继推出“大云计划”、“天翼云”和“互联云”,大大缓解了数据中心IT资源的存储压力。

数据分析—数据的核心是发现价值,而驾驭数据的核心是分析,分析是大数据实践研究的最关键环节,尤其对于传统难以应对的非结构化数据。运营商利用自身在运营网络平台的优势,发展大数据在网络优化中的应用,可提高运营商在企业和个人用户中的影响力。

电信级的大数据分析可实现如下功能:第一,了解网络现状,包括网络的资源配置和使用情况,用户行为分析,用户分布等;第二,优化网络资源配置和使用,有针对性地进行网络维护优化和调整,提升网络运行质量,改善用户感知;第三,实施网络建设规划、网络优化性能预测,确保网络覆盖和资源利用最大化。对用户行为进行预测,提升用户体验,实现精细化网络运营。

网络优化相关的工具种类很多,针对不同的优化领域,常用的工具包括:路测数据分析软件、频率规划与优化软件、信令分析软件、话统数据分析平台、话单分析处理软件等。这些软件给网络优化工作带来了很大的便利,但往往只是针对网络优化过程中特定的领域,而网络优化是一个涉及全局的综合过程,因此需要引入大数据分析平台对这些优化工具所反映出来的问题进行集合并综合分析和判断,输出相关优化建议。

目前,大数据技术已经在网络优化工作中得到应用。中国电信就已经建设了引入大数据技术的网优平台,该平台可实现数据采集和获取、数据存储、数据分析,帮助中国电信利用分析结果优化网络质量并助力市场决策,实现精细化营销策略。利用信令数据支撑终端、网络、业务平台关联性分析,优化网络,实现网络价值的最大化。

总工点评

综合全球来看,对大数据认识、研究和应用还都处于初期阶段。中国三大电信运营商都在结合自身业务情况,积极推进大数据应用工作,目前还处于探索阶段,在数据采集、处理、应用方面仍处于初级阶段。电信运营商在国内拥有庞大的用户群和市场,利用自身海量的数据资源优势,探索以大数据为基础的网络优化解决方案,是推动产业升级、实现效率提升、提升企业核心竞争力、应对激烈市场竞争的重要手段。利用大数据将无线网、数据网、核心网、业务网优化进行整合,可以完整地优化整个业务生命期的所有网元,改善用户感知,是未来网络优化的趋势。

以上是小编为大家分享的关于大数据在网络优化中大有可为的相关内容,更多信息可以关注环球青藤分享更多干货

❸ 什么是大数据技术

大数据技术是指大数据的应用技术,涵盖各类大数据平台、大数据指数体系等大数据应用技术。大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

大数据技术能够处理比较大的数据量。其次,能对不同类型的数据进行处理。大数据技术不仅仅对一些大量的、简单的数据能够进行处理,通能够处理一些复杂的数据,例如,文本数据、声音数据以及图像数据等等。

另外,大数据技术的应用具有密度低和价值大的效果。一些零散的,各种类型的数据,如果不能在短时间内分析出来信息所表达的含义,那么可以利用大数据分析技术,将信息中潜藏的价值挖掘出来,以便于工作研究或者其他用途的使用,便于政务的便捷化和深层次化。

大数据技术有哪些

跨粒度计算(In-DatabaseComputing)

Z-Suite支持各种常见的汇总,还支持几乎全部的专业统计函数。得益于跨粒度计算技术,Z-Suite数据分析引擎将找寻出最优化的计算方案,继而把所有开销较大的、昂贵的计算都移动到数据存储的地方直接计算,我们称之为库内计算(In-Database)。这一技术大大减少了数据移动,降低了通讯负担,保证了高性能数据分析。

并行计算(MPP Computing)

Z-Suite是基于MPP架构的商业智能平台,她能够把计算分布到多个计算节点,再在指定节点将计算结果汇总输出。Z-Suite能够充分利用各种计算和存储资源,不管是服务器还是普通的PC,她对网络条件也没有严苛的要求。作为横向扩展的大数据平台,Z-Suite能够充分发挥各个节点的计算能力,轻松实现针对TB/PB级数据分析的秒级响应。

列存储 (Column-Based)

Z-Suite是列存储的。基于列存储的数据集市,不读取无关数据,能降低读写开销,同时提高I/O 的效率,从而大大提高查询性能。另外,列存储能够更好地压缩数据,一般压缩比在5 -10倍之间,这样一来,数据占有空间降低到传统存储的1/5到1/10 。良好的数据压缩技术,节省了存储设备和内存的开销,却大大了提升计算性能。

内存计算

得益于列存储技术和并行计算技术,Z-Suite能够大大压缩数据,并同时利用多个节点的计算能力和内存容量。一般地,内存访问速度比磁盘访问速度要快几百倍甚至上千倍。通过内存计算,CPU直接从内存而非磁盘上读取数据并对数据进行计算。内存计算是对传统数据处理方式的一种加速,是实现大数据分析的关键应用技术。

❹ 学习大数据技术有哪些要求

对于要学习大数据专业的本科生同学来说,在学习大数据技术的过程中,要重视数学和统计学相关知识的学习,这对于后期的考研和就业都有比较直接的影响。在学习大数据专业时,可以根据自身的能力特点和兴趣爱好,来选择具体的主攻方向,不同的主攻方向对于基础知识结构的要求也不同。

如果要主攻大数据开发方向,那么应该重点培养一下自身的程序设计能力,可以从Java开始学起,目前Java语言在大数据开发领域的应用依然非常广泛。如果要主攻大数据运维方向,那么应该重点学习一下网络知识和操作系统相关知识,涉及到的内容也是比较的,而且要完成大量的实验。

当前大数据分析(算法)岗位也是一个高附加值岗位,但是不同于开发岗位和运维岗位,算法岗位的竞争比较激烈,所以如果想从事算法岗位,最好要继续读一下研究生。从事算法岗位对于数学和统计学知识的要求比较高,而且还需要具有一定的行业场景知识,所以从事算法岗往往需要更长时间的积累。

最后,虽然学习大数据技术需要各种不同的基础知识,但是由于大数据领域的岗位非常多,所以各种具备不同知识基础的初学者,都能够找到适合自己的切入点。

关于学习大数据技术有哪些要求,青藤小编就和您分享到这里了。如果你对大数据工程有浓厚的兴趣,希望这篇文章能够对你有所帮助。如果您还想了解更多数据分析师、大数据工程师的技巧及素材等内容,可以点击本站的其他文章进行学习。

❺ 云数据时代对网络服务器配置有哪些要求

面对大数据,在选择服务器的配置是,数据中心管理的性能是主要考量方向,比如建立新的或更新现有的数据中心,同时新时代要求网络服务器能够取代旧服务器来提高能源效率。概况的说技术支持与服务、产品的特性和功能/性能是衡量新服务器的两个趋势,目前研祥的工业服务器结合了工控机和传统服务器的特点,对于云数据时代背景下信息安全管理作用明显。希望以上信息对你有用哈!

❻ 大数据学习的对电脑的要求高吗

我们现在大家都有电脑 ,基本上都是8g的内存,如果要学大数据的话,因为专自己要装虚拟机,所以可属以再网上买一个内存加上。这是黑马程序员老师给我们说的。16g以上的话内存就很可以了。硬盘基本现在的电脑都是以ssd为主,把东西放在ssd上会更快,如果有买新电脑的可以注意哦能够给您提供帮助,是我前进的目标

❼ 什么是网络大数据

大数据应用程序需要处理大规模信息,而且在出于弹性的考虑将数据复制到多个位置时,信息的规模变得越来越大。但是,大数据的最重要属性并不在于它的规模,而在于它将大作业分割成许多小作业的能力,它能够将处理一个任务的资源分散到多个位置变为并行处理。
关键因素
1.网络弹性与大数据应用程序
如果有一组分布式资源必须通过互联网络进行协调时,可用性就变得至关重要。如果网络出现故障,那么造成的后果是出现不连续的坏计算资源与数据集。
2.解决大数据应用中的网络拥塞问题
大数据应用程序不仅仅是规模大,而且还有一种我称为突发性的特性。当一个作业启动之后,数据就开始流转。在高流量时间段里,拥塞是一个严重的问题。然而,拥塞可能引起更多的队列延迟时间和丢包率。此外,拥塞还可能触发重转,这可能让本身负载繁重的网络无法承受。因此,网络架构设计时应该尽可能减少拥塞点。按照可用性的设计标准,减少拥塞要求网络具有较高的路径多样性,这样才能允许网络将流量分散到大量不同的路径上。
3.大数据中网络一致性要比迟延性更重要
实际上,大多数大数据应用程序对网络延迟并不敏感。如果计算时间的数量级为几秒钟或几分钟,那么即使网络上出现较大延迟也是无所谓的——数量级大概为几千毫秒。然而,大数据应用程序一般具有较高的同步性。这意味着作业是并行执行的,而各个作业之间较大的性能差异可能会引发应用程序的故障。因此,网络不仅要足够高效,而且要在空间和时间上具有一致的性能。
4.现在就要准备大数据未来的可伸缩性
可能让人有点意外的是,大多数大数据集群实际上并不大。
可伸缩性并不在于现在集群现在有多大规模,而是说如何平衡地扩展支持未来的部署规模。如果基础架构设计现在只适合小规模部署,那么这个架构将如何随着节点数量的增加而不断进化?在将来某一个时刻,它是否需要完全重新设计架构?这个架构是否需要一些近程数据和数据位置信息?关键是要记住,可伸缩性并不在于绝对规模,而是更关注于实现足够规模解决方案的路径。
5.通过网络分割来处理大数据
网络分割是创建大数据环境的重要条件。在最简单的形式上,分割可能意味着要将大数据流量与其他网络流量分离,这样应用程序产生的突发流量才不会影响其他关键任务工作负载。除此之外,我们还需要处理运行多个作业的多个租户,以满足性能、合规性和/或审计的要求。这些工作要求在一些场合中实现网络负载的逻辑分离,一些场合则还要实现它们的物理分离。架构师需要同时在两个方面上进行规划,但是初始需求最好统一在一起。
6.大数据网络的应用感知能力
虽然大数据的概念与Hadoop部署关系密切,但是它已经成为集群环境的代名词。根据不同应用程序的特点,这些集群环境的需求各不同相同。有一些可能对对带宽要求高,而有一些则可能对延迟很敏感。总之,一个网络要支持多应用程序和多租户,它就必须要能够区分自己的工作负载,并且要能够正确处理各个工作负载。

❽ 大数据对互联网的影响

大数据对互联网的影响

大数据是最近经常被互联网大佬提到的名词,大数据在渐渐的改变互联网,互联网大佬们也正在利用大数据对用户提供更精准的营销和服务。

那么大数据是从哪里来的?大数据又对互联网产生了什么影响呢?

互联网的大数据是来自人们的使用习惯,人们经常浏览网络、网络购物、网络社交等留下的信息都会被大数据的收集工具所收集,并上传到数据处理平台进行数据处理。比如电商网站会因为你的购买习惯为你提供你可能感兴趣的商品,搜索引擎会因为你的搜索习惯提供你想要搜索的结果,社交工具和社交平台更是会因为你的兴趣爱好向你推荐你可感兴趣的人。

由于大数据的信息量非常的多,一般的处理工具已经无法满足如此大量数据的处理,云计算平台也随之产生。云计算平台是由大量的服务器组成的,收集的复杂数据为被分成小数据分配到服务器上进行处理,这样即使其中有一台服务器坏了,其他服务器也能正常运行,而且坏了的那台服务品的数据会被重新分配到其他服务器上处理。云计算平台的产生也同样促生了云服务器和云主机的产生。

云服务器的产生也保证了我们的网站不会出现宕机,网站能更好更快的运行。云主机不仅能让网站的访问速度和数据处理速度更快,还能帮我们收集用户的使用习惯,让我们能准确的为用户提供用户所需要的服务。

RAKsmart美国加州服务器中国区的产品经理曾经对我说:“大数据的兴起会让越来越多的企业使用云计算平台,互联网营销和服务将越来越准确,越来越多的中小企业会选择云主机建设网站并开展他们的业务。”

RAKsmart美国加州服务器是一家较早开展云主机业务的公司,一直以品质和服务打动客户,他们也专门针对中国客户提供支持中国电信线路的云主机服务,他们的云主机除了在性能上比一般的强以外,他们的云主机更是可以支持10个独立IP。大家都知道一般中国的云主机都是需要另外购买独立IP的,而RAKsmart美国加州服务器是会免费赠送一个独立IP的,而且价格也比国内的要便宜的多,多年的经验使他们更懂得用户的需要。

以上是小编为大家分享的关于大数据对互联网的影响的相关内容,更多信息可以关注环球青藤分享更多干货

❾ 大数据时代网络舆情管理变革探讨

大数据时代网络舆情管理变革探讨

大数据时代的到来对人类的生活、工作与思维产生变革性影响,深刻改变着商业王国及公共管理等各个领域的面貌,“大数据”日渐成为各行业创新的助推器。当前中国网络舆情环境复杂,网络舆情危机时有发生,社会热点舆情事件和涉官涉政舆情事件不断涌现,造成社会民主生活和政治稳定间的不平衡等诸多影响。大数据背景下的网络舆情正在发生巨大的变化,网络舆情管理变得日益复杂和重要,如何抓住大数据时代为网络舆情管理变革带来的机遇,以“大数据观”变革传统网络舆情管理思维,准确把握网络舆情的内在特征及其在演变过程中的潜在规律,实现网络舆情管理在思维、模式以及技术上的创新,对于新形势下做好网络舆情引导工作,加强和改进网络内容建设,具有重要的理论意义和实践价值。

一、大数据时代必然要求网络舆情管理变革

“大数据”概念最早在20世纪80年代提出,2011年麦肯锡咨询公司发布其研究成果《大数据:下一个创新、竞争和生产率的前沿》,使这个概念得以大范围推广。2012年3月29日,奥巴马宣布将投入2亿多美元启动“大数据发展和研究计划(Big Data Research and Development Initiative)”,将“大数据战略”上升为国家战略。近两年,大数据备受学术界、产业界和政府部门的关注,成为国内外强有力的前沿词汇。大数据又称巨量数据、海量数据、大资料,指的是所涉及的数据量规模巨大到无法通过目前主流软件工具在合理时间内进行抓取、管理和处理的数据集合,是必须通过深度挖掘、计算、分析才能创造价值的海量信息。大数据在体量、复杂性、产生速度及价值密度四个方面都极大地超越了传统的数据形态,具有4V特征:大量(Volume)、多样(Variety)、高速(Velocity)、价值(Value)。数量庞大的网民通过论坛、微博、微信等多种途径方便快捷地发表言论观点,网络舆情的规模和复杂性急速上升,体量巨大而价值密度低,其内在特征的变化必然要求实现网络舆情管理的变革以适应大数据时代的发展,这些要求主要体现在四个“转向”上。

(一)从监测转向预测。大数据的核心和目标就是预测。复杂网络的研究专家巴拉巴西认为,“93%的人类行为是可以预测的,当我们将生活数字化、公式化以及模型化的时候,我们会发现其实大家都非常相似。生活如此抵触随机运动,渴望朝更安全、更规则的方向发展,人类行为看上去很随意、很偶然,却极其容易被预测”[1]。例如,亚马逊可以推荐我们想要的图书,淘宝知道我们的喜好,而人人网可以猜出我们认识谁。传统网络舆情管理把监测已经产生的舆情信息作为起点,这种明显的滞后性使其在网络舆情危机的应对中处于消极被动的位置。而目前留给突发事件的处理时间越来越少,从传统的“黄金24小时”变为“黄金4小时”,如此短的时间使舆情分析和决策尚未来得及参与进来,整个事件就已经造成了爆炸性的效果。在大数据时代,通过挖掘数据相关性,把数学算法运用到海量的数据上进行分析,在敏感消息进行网络传播的初期就提前开始监测,然后建立模型,模拟仿真网络舆情的演变过程,使网络舆情突发事件发生的可能性和倾向性变得可以预测。

(二)从节点转向网络。由监测舆情转向预测舆情的目标实现,最关键的大数据技术就是挖掘数据的相关性。在小数据时代,由于受到数据库和计算分析能力的限制,无论是对于因果关系还是相关关系的追寻,都耗资耗时,并且易受传统的思维模式和特定领域隐含的固有偏见的影响,无法保证舆情分析结果的准确性。因此传统的网络舆情管理只注重舆情内容的监测,通过分析单个数据节点,如网民“说什么”来抓住比较浅层的社会语义表达。大数据则在保留了原始数据的同时,记录了网民“为什么这么说”背后的社会心理和社会关系网。按照大数据思维,每一个数据都是一个节点,可无限次地与其他关联数据形成舆情链上的乘法效应——类似微博裂变传播路径,数据裂变式的关联状态蕴含着无限可能性[2]。通过对海量信息的解构与重构,充分整合政府和企业的数据资产,利用一系列飞速发展的新技术和新工具,描绘、测量、计算各节点之间的关系,深度挖掘数据的相关性,以此排除偏见和视觉盲点,掌握易被忽略的社会动态,预测舆情的发展趋势。因此大数据时代必然要求网络舆情管理变革其监测系统,由节点转向网络,把握相关性,进而分析舆情背后的社会互动,乃至网络族群之间的界限和相互勾连。

(三)从定性转向定量。舆情分析师或解读者从自身经验和视角出发,在传统网络舆情管理的过程中进行定性分析时,必然使其分析结果带有个人价值与理念的主观印记,甚至不同的舆情机构对同一舆情事件会得出相悖的结论。在大数据时代,所有元数据都可通过量化关联转化为有价值的信息,并实现多次利用,每一次利用都是一种创新,大数据成为网络舆情定量管理的力量源泉。尽管数据的相关性决定了某些数据价值的潜藏性,但新技术、新软件的出现使得通过数学分析实现数据的价值转化变为可能。而多维解读舆情和新的深刻洞见的揭示,使舆情分析结果的全面性和客观性大大超越传统的网络舆情管理。但数据的量化并不等同于简单的“数字化”,而是数据的可计算化,舍恩伯格将其称之为“数据化”,是指一种把现象转变为可制表分析的量化形式的过程[3]。“数据化”使态度和情绪转变为一种可以分析的形式,网络舆情的相关信息得以进行深入分析,一些社交媒体如Facebook、Twitter、QQ、微博、微信等坐拥大型数据的宝藏,一旦实现对其自身数据库的深度利用,就能轻易获得社会各个领域和所有用户的几乎全部动态信息。

(四)从样本转向全体。在传统的网络舆情工作模式中,所采集的舆情关联数据仅为样本信息,构建的数据库结构单一、数据量有限。其数据源一般是基于抽样或者针对重点网络站点进行的数据抓取,仅能对小规模、有结构或类结构的数据进行分析,标准不一,难以在不同领域中通用。同时,样本分析并不能保证结果的准确,即使分析方法和操作没有问题,但采样过程的任何偏误都将使舆情分析结果与事实相去甚远。大数据体量巨大,从TB级别跃升至PB乃至ZB级别,完整记录了社情民意,成为人类生存痕迹和心理变化的记录仪。采样的目的是以尽可能少的数据获得尽可能多的信息,但大数据是建立在掌握所有数据,至少是海量数据的基础上的,在数据处理技术日新月异的今天,变革传统舆情管理思维与方法,改变采样的惯性行动成为必要。通过运用大数据技术,建立网络舆情自动分析系统,全天候自动搜索并采集与目标舆情看似毫不相关实则具有内在关联的信息,在抓取和收集页面之后,对信息自动分类、自动获取关键词、自动内容分析和自动报警等。样本扩大至几乎全体,舆情分析的结果更加客观可靠。

二、大数据时代网络舆情管理变革的效应前瞻

抓住大数据时代变革网络舆情管理的新机遇,迎接大数据时代网络舆情管理的新挑战,顺应大数据时代网络舆情管理的新要求,变革与创新网络舆情管理将会产生良好的管理效应,实现新时期网络舆情管理的升级转型。

(一)实现“防火”式管理。传统的网络舆情管理因为无法把握数据相关性,不能准确预测舆情未来的发展趋势,因此采用的是“灭火”式管理模式。政府通常在舆情产生或者已形成舆情危机的情况下才开始采取措施,如发布信息、引导舆情、满足诉求等,以此达到“灭火”效果。在此种模式下,政府经常被动陷入网络舆情漩涡,由此形成视网络舆情为“敌情”的偏见。为了摆脱这一困境,政府总是试图“控制”、“引导”和“应对”网络舆情,以一种上位者的姿态去支配、主宰网民及其舆情表达的方式。然而,若网民在网络舆情中的主体地位得不到保证,网络舆情就会失去其“减压阀”的功能,网络舆情问题将会是治标不治本。大数据时代,政府转变网络舆情管理思路,变革网络舆情管理模式,应用大数据技术对网络舆情进行关联分析、级别划分、聚类分析和倾向性分析,将实现“灭火”式管理到“防火”式管理的转变。通过寻找“导火索”与“减压阀”之间的平衡点,在发挥网络“民间舆论场”作用的同时,将网络舆情危机扼杀在摇篮里。例如美国中央情报局通过抓取海量数据来追踪恐怖分子和监控社会情绪,在“阿拉伯之春”中,通过大数据分析多少人和哪些人的立场从温和变为激进,并“算出”谁有可能会采取有害行为。

(二)打捞“沉没的声音”。大数据源于互联网的分享、开放,但“数字鸿沟”的存在却使“信息穷人”与网络隔绝。尽管互联网的发展使这一部分人的比例越来越低,但发展不均衡性的扩大意味着现在和将来仍然有一个不容忽视的群体将无法提供任何数据。即使是那些能够充分利用网络的人群,也有可能因为在某种情境下成为舆论中的弱势群体,或者因其在舆情主流中的异质思维而选择不在网络上发声。当然,这种选择既可能是主动也可能是被动的。正如美国哲学家埃里克·霍弗所言,“一个国家最不活跃的人群,为占大多数的中间层次。他们是在城市工作和在乡间务农的正派老百姓,然而,他们的命运却受分据社会光谱两头的少数人——最优秀的人和最低劣的人所左右”[4]。显而易见的是,单凭技术体系构筑的大数据平台无法真正获取“全部数据”,通过改革网络舆情管理去打捞那些可能代表某一个群体或一定数量级的“沉没的声音”十分必要。因此,全面思考和理清大数据时代网络舆情管理面临的机遇和挑战,通过“大舆情”观念的构建,变革网络舆情管理的工作理念和模式,将有利于打捞“沉没的声音”。例如,将舆情服务与社会调查相结合,重视实地调研与第一手材料的采集,而不是把网络舆情管理捆绑在技术上,将避免得到不全面的舆情或做出误导性决策。

(三)识破“伪舆情”。当前备受关注的网络舆情,越来越成为依存于影星式的学者、影星式的记者、影星式的商人和影星式的政客为中心的“伪舆情”[5]。重大敏感事件发生后,部分网管和有影响力的舆情机构快速封堵其主观上认为的“有害信息”,选择性地编撰舆情报告,以片面、虚假的“伪舆情”影响决策层对形势的研判,使其做出符合自身利益诉求的决策。有些利益集团则精心扶植和培育自己的网络发言人,引导网民思考的内容和方向。结果,这些舆论领袖对关键事件和问题的看法在网络上大行其道,并淹没其他异质言论,使群众对真相的认知产生巨大偏差。当舆情被各方利益集团的政治力量和经济力量操纵时,它便丧失了独立性,一旦“伪舆情”被识破,舆情机构就可能失去其公信力。基于全网的完整、准确和极速的信息抓取有利于为舆情分析报告提供一手的材料、纯粹的事实,从而获得真实全面的舆情,使网民在不知道“为什么”的情况下,依然能获得对“是什么”的比较公正客观的认知,并以此助力网络舆情的引导。同时,通过变革网络舆情管理的体制机制,保持舆情管理的独立性将有力识破“伪舆情”,剔除“杂音”与“噪音”,使大数据时代的网络舆情真正成为现实世界的“镜像”。

(四)克服“盲人摸象”和“信息孤岛”。海量信息无限增长与网民关注、分析能力有限之间的矛盾,造成了“数据爆炸”与“知识贫乏”的怪象,加剧了社会舆论的“盲人摸象”效应。大数据时代下,网络媒体促进了信息的开放和沟通的便捷,人们对公共事件的参与达到了一个前所未有的高度,但是分众传播、个性化传播的凸显以及信息的碎片化,使得全面、深刻地关注和分析事件变得越来越困难。网民非理性、易激动的特点导致网络舆情的偏激和情绪化,网络的“群体极化”被放大。大数据时代的舆情监测是建立在传统人工和软件无法进行的全网舆情信息采集的基础上,样本扩大到全体。通过运用大数据技术,建立网络舆情自动分析系统,避免因数据源不全面而造成的重要信息监测缺失,将有利于消弭“盲人摸象”现象。与此同时,由于信息化应用水平参差不齐,政府和企业不同的部门之间都存在“信息孤岛”问题:有多少个部门就有多少个信息系统,每个系统都有自己的数据库、应用软件和用户界面,完全是独立的体系,阻碍了数据的互通互联[6]。变革大数据时代网络舆情管理的工作模式,统一舆情行业的技术标准,共享数据,建立网络舆情服务联盟,统筹政府、企业、媒体及社会力量,实现网络舆情的多元共治将有利于解决“信息孤岛”问题。

三、大数据时代网络舆情管理的变革路径

当大数据给各行各业带来变革性影响时,全世界都没做好迎接这场产业革命的准备。但与英美等发达国家相比,中国更像是处在大数据时代的前夜。而中国的人口和经济规模决定了中国大数据的规模为全球最大,为中国抓住时代的脉搏进行改革提供了难得的机遇。在这种大背景下,大数据对传统舆情管理也产生了深刻的影响,要使网络舆情管理变革产生应有的预期效应,适应时代的发展要求,须从思维观念、方法手段、体制机制、技术保障、人才建设等路径着手。

(一)树立大舆情观念。大数据时代网络舆情管理的变革,首要在于树立大舆情观念。这里的大舆情,包括两层含义。第一,强调“大数据观”,即充分实现网络数据平台的开放共享。按照“一切皆可量化”的大数据逻辑,一个新增的相关性数据的产生,通常会带来一个新的分析结果。因此只有形成“大数据观”,实现数据的动态分享,才能有效防止信息“碎片化”,最大限度地消除“盲人摸象”和“信息孤岛”现象。第二,强调网上和网下数据的整合。网络舆情与社会调查结合不足,可能降低舆情的真实性,误导决策。例如,对于假期调整方案的选择,各舆情机构组织的网络投票的结果各不相同,其做出的舆情分析报告也和真实民意相左。因此只有真正掌握“大舆情”,打捞“沉没的声音”,才能正确决策,打造一个更安全、更高效的社会。树立大舆情观念,首先,必须实现数据分析的动态化,打破数据垄断,统一标准,共享数据,预防孤立的舆情机构闭门造车,制定片面或错误的舆情分析报告。其次,应把网上网下各方面数据整合起来,挖掘网络舆情与社会动态背后的深层次关系,实现网络舆情管理和社会治理的紧密联动、同步推进[7]。最后,完善和创新包括舆情抓取、预警、研判到决策、评估等在内的网络舆情管理的各个环节,使舆情管理功能不仅仅限于危机处理,更能发挥辅助决策的作用。

(二)变革网络舆情的引导战略。做好舆论引导工作,应把握好时、度、效。但是目前许多地方和部门对如何进行网络舆情的引导仍然缺乏正确认识,于“时”不能把握好“黄金4小时”,于“度”不能掌握火候,拿捏分寸,于“效”不能保证网络舆情引导的实效质量。大数据由于自身具有的特点,使其利于变革网络舆情的引导战略,变“封改删”、“鸵鸟战术”为“网上引导,网下落地”,使“伪舆情”失去生存的土壤。因此,我们要充分发挥大数据的优势来提高舆情引导工作的能力。其一,利用大数据提升网络舆情引导的预见性和目的性。通过数据抓取和相关性分析,构建网民意见倾向分析模型,了解网民的偏好和特点,建设和完善政府网站、官方微博,扶植和借助意见领袖,做到“善说话、说对话、接地气、办实事”。其二,通过数据的价值转化,实现网络舆情的价值引导。在充分收集相关数据的基础上,运用图表等数据可视化技术揭示事件的前因后果,让数据“发声”,使网民既“知其然”也“知其所以然”,从而全方位360度无死角了解事件的来龙去脉,消除“盲人摸象”现象。其三,提升舆情引导的公信力。一方面加强新老媒体间的互动,发挥各自的优势与公众沟通,破解谣言和流言,达到时效性和权威性的双重保障;另一方面要避免舆情分析师在处理数据的过程中受经验偏好的影响,并防止大数据沦为某些机构和个人更便捷地操纵舆论的手段。

(三)健全大数据舆情管理体制机制。当前,网络舆情管理的体制机制尚不完善,很多地区尚不具备系统规范的舆情应对与处理的管理体系。舆情分析和预测手段落后,危机应对系统缺失,舆情管理组织机构不健全、不稳定,以及多头管理等问题非常普遍。健全大数据舆情管理的体制机制,对于从源头上解决网络舆情管理过程中出现的问题和困难,实现标本兼治,具有决定性作用。因此,为使网络舆情管理取得实效,提升网络舆情工作的规范化和科学化水平,我国应加快建立健全大数据舆情管理的体制机制。首先,建立网络舆情多元管理的互动机制,由国家出台大数据发展战略规划,产学研相结合,统筹政府、企业、社会和公民的力量,形成合力,实现共治。其次,变革网络舆情管理的机构设置,改变以往通过临时组建领导小组或临时办公室等机构,或者以宣传部门为“消防队”等方式被动应对舆情危机的模式,通过常态化机构的设置和专业人员的配备,使网络舆情管理专门化、精细化。再次,建立权责明确的责任机制,通过加快数据立法进程明确各级各部门包括政府部门、企业媒体、人民团体等的权利义务;通过建立由网信部门牵头的大数据舆情管理体制,改变多头管理的局面,并设立政府首席信息官责任制度等。最后,健全大数据网络舆情管理的资源保障机制,大数据时代变革网络舆情管理面临初期成本高、短期效益不明显等问题,需要加大资金、技术、物资、人力等资源的投入。

(四)创新大数据网络舆情管理的方法与技术。大数据时代的到来,要求网络舆情管理必须采用更为先进的技术,这主要表现在对各种相关软件的大量应用以及对大数据技术支撑平台的依托。目前中国网络舆情监测采集软件中较具代表性的有TRS互联网舆情信息监控系统、北大方正智思舆情监控系统、军犬网络舆情监控系统、乐思网络舆情监测系统等。此外,还应完善和创新大数据技术支撑平台的五大基石——数据监测技术、数据挖掘技术、数据存储技术、数据分析技术、数据安全技术,使大数据为网络舆情管理服务的同时又不超出我们的控制。同时,我们也不能陷入“技术是万能的”误区而盲目迷信和依赖技术,更不能因相信大数据强大的预测功能而导致“数据独裁”,变成数据的奴隶。因此,网络舆情管理还需要依靠其他方法和手段相辅相成,共同作用。法律因其具备最大的强制性和权威性,成为最有效的管理控制的手段。法律与道德相互联系,在极具复杂性和特殊性的虚拟空间里,教育和自律被摆在重要的位置上。例如,欧美发达国家如美国、英国、加拿大等都通过倡导用户自律和自我管理来提高网民的媒介素养,加强自我把关能力。此外,还可以效仿韩国、新加坡等运用行政手段,要求网络用户在获得国家有关部门颁发的许可证的情况下,才能访问政府严格控制的信息等。

(五)培育大数据时代的网络舆情管理人才。大数据时代的网络舆情将会形成多向度的研究,例如对社会话语表达、社会心理描绘、社会关系呈现、社会诉求预测等的分析研究。网络舆情将真正成为一门与多学科交叉的社会显学,对人才的全面性要求很高。中国教育的学科划分和培养体系,客观导致培养出来的人才很难跨界。换句话说,真正进入这个行业的门槛是很高的。正因如此,各国越来越重视对数据科学家的培养,如美国在大学专门开设研究大数据技术的课程,通过严格的业务培训和职业资格认证,培养下一代的数据科学家。2013年9月,我国人社部联合人民网启动“网络舆情分析师职业培训计划”,“网络舆情分析师”成为一项被正式认可的职业。但是我国现有舆情工作人员的水平仍然严重滞后,很多舆情机构尤其是地方政府并没有专业的数据处理、分析团队和专门的网络舆情管理部门。为突破大数据时代变革网络舆情管理的人才瓶颈,从短期看,可以通过招考、录用等方式引进数据挖掘、分析人才,通过委托培养、网络培训等方式强化已有专业人才力量,通过购买服务的方式短期租赁大数据舆情管理的高素质人才。从长远看,则要系统梳理网络舆情管理所需人才目录,培养和壮大既精通数据挖掘、数学建模,又拥有较高学习能力、分析能力和知识水平,横跨统计学、社会学、计算机学、传播学、管理学等学科的复合型人才,打造一支大数据网络舆情管理的专业人才队伍。

以上是小编为大家分享的关于大数据时代网络舆情管理变革探讨的相关内容,更多信息可以关注环球青藤分享更多干货

❿ 大数据时代网络信息具备哪些新的特点

特征
数据量大(Volume)
第一个特征是数据量大。大数据的起始计量单位至少是P(1000个T)、内E(100万个T)或Z(10亿个容T)。

类型繁多(Variety)
第二个特征是数据类型繁多。包括网络日志、音频、视频、图片、地理位置信息等等,多类型的数据对数据的处理能力提出了更高的要求。

价值密度低(Value)
第三个特征是数据价值密度相对较低。如随着物联网的广泛应用,信息感知无处不在,信息海量,但价值密度较低,如何通过强大的机器算法更迅速地完成数据的价值“提纯”,是大数据时代亟待解决的难题。

速度快时效高(Velocity)
第四个特征是处理速度快,时效性要求高。这是大数据区分于传统数据挖掘最显著的特征。

阅读全文

与大数据对网络的要求相关的资料

热点内容
母子血亲小说 浏览:402
苓梦凡回心转意 浏览:404
斯嘉丽约翰逊漏点的电影 浏览:414
斯托米丹尼尔斯主演的作品 浏览:214
写饥荒mod需要哪些编程语言 浏览:284
都市特种兵杨洛完结版 浏览:266
qq头像女生侧身霸气 浏览:882
守望先锋声音文件 浏览:506
电影最后女人老了,和机器人 浏览:456
手机qq2016旧版本670 浏览:195
台湾的风月电影 浏览:378
韩国漂亮的护工 浏览:897
在线播放电影在线观看 浏览:606
拉拉电影大尺度 浏览:119
盘点小说主角姓苏的小说 浏览:76
什么网站看电视剧不卡还免费 浏览:644
打开的文件是放在哪里 浏览:392
看电影快进就断网 浏览:679
韩国资源在线观看 浏览:415
电视猫一键安装工具附件 浏览:920

友情链接