找回密码
 立即注册
搜索

你了解大数据吗?

大数据(big data),IT行业术语,是指无法在一定工夫范围内用常规软件工具停止捕捉、管理和处理的数据集合,是需求新处理形式才能具有更强的决策力、洞察发现力和流程优化才能的海量、高增长率和多样化的信息资产。所触及的数据量规模宏大到无法在可接受的工夫内达到捕捉、管理、处理、并整理成为人类所能解读的信息。




· 大数据的特点(4V):

容量(Volume):数据量大,如在社交网络上,每天产生大约2.5万亿字节的数据;

种类(Variety):数据类型的多样性,随着传感器种类的增多及智能终端、社交网络等的高速发展,数据种类也变得愈加复杂;

速度(Velocity):高速,数据获取、分析的速度非常快。大数据的交换和传播是经过互联网、云计算等方式完成的,远比传统媒介的信息交换和传播速度快捷。

真实性(Veracity):数据的质量。高质量的数据时大数据分析的保证,但是大数据来源广泛、数据量大、数据类型复杂多样,其质量存在不确定性,对大数据的发展来说是一种应战。




· 大数据的发展历程

以机器学习为例,机器学习是大数据迷信的重要数据分析方法,早在二十世纪五十年代到七十年代初就曾经出现。

机器学习中的常用算法——神经网络,可以追溯到五十年代中后期基于神经网络的"衔接主义"(connectionism)学习。

2005年,Hadoop项目诞生。Hadoop为大数据提供了一个高速运算和存储的基础。

· 大数据技术

大数据技术包括数据搜集、数据存取、数据处理、统计分析、数据可视化、数据安全。

· 数据搜集(搜集和被搜集)


卫星数据搜集




计算机数据搜集









· 数据存储:分布式存储、云存储


分布式存储









· 数据处理(预处理)


英文词频统计预处理



· 数据分析:对规模宏大的数据停止分析。


房地产数据分析




多维数据分析



· 数据可视化:数据可视化是指将大型数据以图形或图像方式展现,并经过数据分析和开发工具发现其中未知信息的处理过程。


旅游数据可视化



· 数据安全

大数据时代,数据泄露事情层出不穷,数据安片面临很多应战,像外部非授权人员对信息系统停止恶意入侵,非法访问隐私数据,像教育局先生隐私数据遭到恶意盗取,形成先生钱财损失。








大数据的价值表现:

大数据早已融入进各个范畴,体如今我们生活的方方面面,各类企业和商家充分应用了大数据的潜在价值,像淘宝的引荐,知乎的文章推送,买机票后的酒店引荐,我们每天看的天气预告等都是大数据分析的结果。明天很多事情都末尾和大数据挂钩,构成不同类型的大数据,如智慧城市与大数据;生物信息大数据;医疗、制药大数据;制造业大数据。











如有错误欢迎指出!
图片来源于网络,侵权请联络删除!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

大神点评3

是爷们的娘们的都帮顶!大力支持
回复

使用道具 举报

sbiyjiu 2020-9-16 20:27:14 显示全部楼层
不聊了,又该去搬砖了。。。
回复

使用道具 举报

说谎。 2020-9-17 20:11:06 来自手机 显示全部楼层
广告位,,坐下看看
回复

使用道具 举报

高级模式
B Color Image Link Quote Code Smilies