new_jam 发表于 2023-11-30 06:31:38

大数据含义是什么?

大数据有两种含义,一种是大批量的数据。量级有多大?比如通常读一本几百万字的电子小说,每天专注地快速地阅读,少说用时也需7-15天,而文档在手机、电脑上存储占用空间有多大呢?10MB而已,也就是说如果按照7天处理10MB文字,推算1GB的内容需耗时710+天,相当于两年时间,而当下互联网企业每天产生的数据量是10GB-10000GB不等,这样的数据量,如果用一个人去处理的话,每天的数据量得花20年到20000年,在时间长度和成本上而言几乎是不可能实现的,因为这才是一天的数据量。
同样可以感受一下存储成本:大家手机、电脑都有存储空间,手机256GB应该为主流了,电脑2TB(2048GB)左右,即便存储空间应景很大,而实际企业生产中用不了几天就存储不下了。大家想象一下,如果打开一个1GB大小的EXCEL或者TXT文本文档会发生什么现象呢?有兴趣的小伙伴可以试一试,你会发现电脑变得超级慢超级卡,而且你甚至都打不开这个文档。
对企业而言企业绝对不能接受该现象的发生,因为数据处理不了,相当于干再多活都不知道哪些赚了哪些赔了,企业是要靠赚钱来存活的,如果为了处理数据再购买更高性能的机器作为服务器去处理这些信息,那成本将会极其高昂,企业负担不起,于是乎就有人发出这样的疑问:
有没有一种可以让很多台廉价的机器组建成一台牛逼的机器的技术?就好比合体技能一样?
有需求就有大牛,很快,一项新的计算机计算技术框架——分布式数据处理框架诞生了,目的很明确,就是解决了上面提到的疑问——让很多台廉价的机器组合起来变成了一个牛逼的、专门针对短时间内处理大量数据的系统,这就叫大数据处理技术。也是我们大数据的第二种含义,被简称为大数据。
如果你还是觉得理解不透彻,可以去多易教育的官网看看带有图片和讲解视频的专栏,通俗易懂的让你迅速了解什么是大数据,毕竟多易是大数据培训行业的领头羊嘛!

hyq6 发表于 2023-11-30 06:32:11

大数据(big data),IT行业术语,是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

http://picx.zhimg.com/v2-abfd8dd1b217bf06bc83c538c6c41d8f_r.jpg?source=1def8aca
从大数据的技术体系来看,大数据涉及到数据的采集、整理、存储、安全、分析、呈现和应用,这一系列操作的结果就是让数据产生价值,也就是“数据价值化”,随着未来更多的社会资源将进行数据化改造,大数据所能够起到的作用也会越来越明显。

大数据能干什么
大数据最核心的价值就是在于对于海量数据进行存储和分析。相比起现有的其他技术而言,大数据的“廉价、迅速、优化”这三方面的综合成本是最优的。

大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换而言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。

对于企业来说,利用大数据技术不仅能够全面升级自身的运营方式,也能够促进企业的管理,以及产品的创新。从这个角度来看,大数据的发展前途对于企业的发展前途有重要的影响,在当前产业结构升级的大背景下,大数据的发展前景还是非常广阔的。当然,企业要想充分利用大数据,还需要逐渐完善大数据的应用体系,包括物联网、云计算、传统信息系统等。

对于职场人来说,掌握大数据技术会在一定程度上促进自身的岗位升级,而且也会打开更多新的就业渠道。目前大数据岗位比较集中在互联网领域,这与互联网行业自身的特点有关系,随着大数据技术逐渐开始落地到传统行业领域,整个传统企业会释放出大量的大数据岗位,而且这些岗位的附加值往往也比较高。

大数据的价值体现在以下几个方面



[*]对大量消费者提供产品或服务的企业可以利用大数据进行精准营销
[*]做小而美模式的中小微企业可以利用大数据做服务转型
[*]大数据可以通过数据收集来预测疾病的发生,从而做出预警等
[*]面临互联网压力之下必须转型的传统企业需要与时俱进充分利用大数据的价值


大数据时代引领未来的方向
大数据是继云计算、物联网之后IT产业又一次颠覆性的技术变革。云计算主要为数据资产提供了保管、访问的场所和渠道,而数据才是真正有价值的资产。
大数据时代网民和消费者的界限正在消弭,企业的疆界变得模糊,数据成为核心的资产,并将深刻影响企业的业务模式,甚至重构其文化和组织。因此,大数据对国家治理模式、对企业的决策、组织和业务流程、对个人生活方式都将产生巨大的影响。

光点科技数智工厂—企业级数据治理服务平台
一站式数据治理工具,提供数据汇聚、建模、开发、管理和服务能力,以及自动化数据处理和数据存储计算环境,是数据中台的关键底座。

http://picx.zhimg.com/v2-5adcdf6076c7567c4cbcd85c546d3f94_r.jpg?source=1def8aca
关于光点科技

光点科技是一家在政企数据治理、数据中台建设、数据可视化展示分析方面有着丰富经验的公司。光点科技既提供数据产品,也提供数据服务,服务客户超过100家,在金融、电信、政务、企业、工程、教育、检验检测等行业有丰富的经验和创新的解决方案。

光点自研的数据治理服务平台,能够为客户提供数据汇聚、建模、开发、管理和服务能力,以及自动化数据处理和数据存储计算环境。为企业的数据治理提供一站式数据治理工具。

点击这里,立即获取更多客户案例和解决方案


大数据中台_数据治理_数据智能_大数据分析_光点科技
大数据解决方案_企业数据中台_数据治理服务_光点科技

欢迎关注@光点科技,让数据更智能,让操作更简单⁓

918外链网 发表于 2023-11-30 06:32:51

一般来说,大数据指的是无法在一定时间内通过常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

http://pic1.zhimg.com/v2-10904dc46ea9fe47e2a67ebec7c7147a_r.jpg?source=1def8aca

数据可视化 - 派可数据商业智能BI可视化分析平台

大数据有五个常见的特性,分别是:
容量(Volume):大数据拥有庞大的数据规模,数据的大小决定所考虑的数据的价值和潜在的信息;
种类(Variety):大数据包括了视频、图片、文字、音频等多种不同格式、不同来源的数据,有着丰富的数据类型;
速度(Velocity):大数据对数据处理有着敏感的反应速度,对数据采集、数据处理、数据挖掘提出了新的要求;
真实性(Veracity):大数据的真实性是指数据的准确度和可信赖度,代表着数据的质量。
价值(value):大数据可以通过从大量不相关的各种类型的数据中,挖掘出对未来趋势与模式预测分析有价值的数据。
如何理解大数据

从实际的企业实践出发,大数据在企业中的主要构成是不同来源、不同口径、不同结构的海量数据。通过大数据,企业不需要拘泥于企业原有的业务数据、用户数据和行为数据,完全可以搜集网络上的公开数据,从更庞大的数据源获取真实的数据,转化为企业的资产,提升数据价值。

http://pica.zhimg.com/v2-1173ac9cc05ca1b244819ba66eb63bd5_r.jpg?source=1def8aca

数据可视化 - 派可数据商业智能BI可视化分析平台

因为大数据的特性,所以企业可以采集企业内外不同来源的海量数据,并且对这些数据的种类和格式没有太多要求,这就使大数据能够充分利用数据资源,充分发挥数据的价值,获得大规模、多平台、多样化的数据资产,让企业能够利用大数据在电商购物营销、地图交通指引、业务分发办理、预警舆情危机等。
大数据有什么作用

其实大数据我在我们身边,拿我们生活中最常见,也是最离不开的社交平台来说。QQ经过长时间的发展的用户积累,同时依靠腾讯的大数据推荐技术应用,让用户的社交圈层能够在潜在联系中不断外扩,也让你曾经见过,但没有成为好友的人能够在互联网上重新得到推荐,形成一个联系紧密的朋友圈层。
还有喜欢听歌的朋友印象比较深刻,网易虽然在音乐版权方面落于下风,但却依靠音乐推荐积累了良好的口碑,培养了大批忠实用户,能够形成在音乐软件内听歌,而非因为听歌选择音乐平台的选择逻辑,从而在一个非社交的平台内,形成了另类的社交风格。

http://picx.zhimg.com/v2-71b4e3581566e7ff1fbbc8f5508ecc2b_r.jpg?source=1def8aca

数据可视化 - 派可数据商业智能BI可视化分析平台

这些日子的618则是另外一种大数据的应用,通过对用户在互联网的访问记录、点击记录、收藏记录等,电商平台能够凭借不同平台、不同来源的、不同格式的海量数据,构建全面的用户画像和兴趣画像等,对用户进行精准的投放、智能推荐符合要求的产品,提升商品的转化。
随着数字化的深入,大数据已经成为企业的重要核心资产,能够在应用上起到关键性作用。通过对大量数据进行分析和挖掘,大数据可以转化为大量价值信息,支撑业务活动的发展以及企业战略的决策,能够为我们的业务流程、经营管理、组织建设、研发生产等各方面带来高效、便捷、精准的服务。
关于派可数据 商业智能BI可视化分析平台:
派可数据-商业智能BI_大屏BI可视化分析平台_用友BI财务分析_数据中台​www.packingdata.com/​www.packingdata.com/​www.packingdata.com/​www.packingdata.com/​www.packingdata.com/​www.packingdata.com/​www.packingdata.com/

huchuanhao 发表于 2023-11-30 06:33:49

什么是大数据?

高速发展的信息时代,新一轮科技革 命和变革正在加速推进 ,技术创新日益成为重塑经济发展模式和促进经济增长的重要驱动力量,而“大数据”无疑是核心推动力。
那么,大数据是什么意思呢?如果从字面意思来看,大数据指的是巨量数据。那么可能有人会问,多大量级的数据才叫大数据?不同的机构或学者有不同的理解,难以有一个非常定量的定义,只能说,大数据的计量单位已经越过TB级别发展到PB、EB、ZB、YB甚至BB级别。
最早提出“大数据”这一概念的 是全球知名咨询公司麦肯锡,它是这样定义大数据的:一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型以及价值密度低四大特征。
研究机构Gartner是这样定义大数据的:“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流转优化能力来适应海量、高增长率和多样化的信息资产。
若从技术角度来看,大数据的战略意义不在于掌握庞大的数据,而在于对这些含有意义的数据进行专业化处理,换言之,如果把大数据比作一种产业,那么这种产业盈利的关键在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。
大数据的特征

一般认为,大数据主要具有以下4个方面的典型特征,即大量(Volume)、多样(Variety)、高速(Velocity)和价值(Value),即所谓的4V,接下来,通过一张图来具休描述。


http://pic1.zhimg.com/v2-5bb709ee69e698ec5c535e2cc6a3b19e_r.jpg?source=1def8aca

1. Volume(大量)
大数据的特征首先就是数据规模大。随着互联网、物联网、移动互联技术的发展,人和事物的所有轨迹都可以被记录下来,数据呈现出爆发性增长。数据相关计量单位的换算关系如下表所示。
单位换算格式Byte1Byte=1024bitKB1KB= 1024ByteMB1MB= 1024KBGB1GB= 1024MBTB1TB= 1024GBPB1PB= 1024TBEB1EB= 1024PBZB1ZB= 1024EB2. Variety(多样)
数据来源的广泛性,决定了数据形式的多样性。大数据可以分为三类,一是结构化数据,如财务系统数据、信息管理系统数据、医疗系统数据等,其特点是数据间因果关系强;一是非结构化的数据,如视频、图片、音频等,其特点是数据间没有因果关系;三是半结构化数据,如HTML文档、邮件、网页等,其特点是数据间的因果关系弱。有统计显示,目前结构化数据占据整个互联网数据量的75%以上,而产生价值的大数据,往往是这些非结构化数据。
3.Velocity(高速)
数据的增长速度和处理速度是大数据高速性的重要体现。与以往的报纸、书信等传统数据载体生产传播方式不同,在大数据时代,大数据的交换和传播主要是通过互联网和云计算等方式实现的,其生产和传播数据的速度是非常迅速的。另外,大数据还要求处理数据的响应速度要快,例如,上亿条数据的分析必须在几秒内完成。数据的输人、处理与丢弃必须立刻见效,几乎无延迟。
4.Value(价值)
大数据的核心特征是价值,其实价值密度的高低和数据总量的大小是成反比的,即数据价值密度越高数据总量越小,数据价值密度越低数据总量越大。任何有价值的信息的提取依托的就是海量的基础数据。当然目前大数据背景下有个未解决的问题,如何通过强大的机器算法更迅速地在海量数据中完成数据的价值提纯。
研究大数据有什么意义?

现在的社会是一个高速发展的社会,科技发达,信息流通,人们之间的交流也越来越密切,生活也越来越便捷,大数据就是这个高科技时代的产物。阿里巴巴创办人马云曾经说过,未来的时代将不是IT时代,而是DT的时代,DT就是Data Technology,数据科技,这显示出大数据对于阿里巴巴集团来说是举足轻重的。
有人把数据比喻为蕴藏能量的煤矿。煤炭按照性质有焦煤、无烟煤、肥煤、贫煤等分类,而露天煤矿、深山煤矿的挖掘成本又不一样。与此类似,大数据并不在于“大”,而在于“有用”。数据的价值含量、挖掘成本比数量更为重要。对于很多行业而言,如何利用这些大规模数据,发掘其潜在价值,才是赢得核心竞争力的关键。
研究大数据,最重要的意义是预测。因为数据从根本上讲,是对过去和现在的归纳和总结,其本身不具备趋势和方向性的特征,但是可以应用大数据去了解事物发展的客观规律、了解人类行为,并且能够帮助我们改变过去的思维方式,建立新的数据思维模型,从而对未来进行预测和推测。比如,商业公司对消费者日常的购买行为和使用商品习惯进行汇总和分析,了解到消费者的需求,从而改进已有商品并适时推出新的商品,消费者的购买欲就会提高。
知名互联网公司谷歌对其用户每天频繁搜索的词汇进行数据挖掘,从而进行相关的广告推广和商业研究。
大数据的处理技术迫在眉睫,近年来各国政府和全球学术界都掀起了一场大数据技术的革命,众人纷纷积极研究大数据的相关技术。很多国家都把大数据技术研究上升到了国家战略高度,提出了一系列的大数据技术研发计划,从而推动政府机构、学术界、相关行业和各类企业对大数据技术进行探索和研究。
可以说大数据是一种宝贵的战略资源,其潜在价值和增长速度正在改变着人类的工作、生活和思维方式。可以想象,在未来,各行各业都会积极拥抱大数据,积极探索数据挖掘和分析的新技术、新方法,从而更好地利用大数据。当然,大数据并不能主宰一切。大数据虽然能够发现“是什么”,却不能说明“为什么”;大数据提供的是些描述性的信息,而创新还是需要人类自己来实现。

wushuhong 发表于 2023-11-30 06:34:26

首先来说一下什么是大数据,上世纪90年代末,美国航空航天局的研究人员创造了大数据一词,自诞生以来,它一直是一个模糊而诱人的概念,直到最近几年,才跃升为一个主流词汇。其实简单的来说,大数据就是通过分析和挖掘全量的非抽样的数据辅助决策。
大数据可以实现的应用可以概括为两个方向,一个是精准化定制,第二个是预测。比如像通过搜索引擎搜索同样的内容,每个人的结果却是大不相同的。再比如精准营销、百度的推广、淘宝的喜欢推荐,或者你到了一个地方,自动给你推荐周边的消费设施等等。
大数据的价值体现在以下几个方面:
1)对大量消费者提供产品或服务的企业可以利用大数据进行精准营销
2) 做小而美模式的中长尾企业可以利用大数据做服务转型
3) 面临互联网压力之下必须转型的传统企业需要与时俱进充分利用大数据的价值
大数据时代已经来临,它将在众多领域掀起变革的巨浪。大数据最核心的价值就是在于对于海量数据进行存储和分析。但我们要冷静的看到,大数据的核心在于为客户挖掘数据中蕴藏的价值,而不是软硬件的堆砌。因此,针对不同领域的大数据应用模式、商业模式研究将是大数据产业健康发展的关键。我们相信,在国家的统筹规划与支持下,通过各地方政府因地制宜制定大数据产业发展策略,通过国内外IT龙头企业以及众多创新企业的积极参与,大数据产业未来发展前景十分广阔。
大数据时代已经来临,它将在众多领域掀起变革的巨浪。大数据最核心的价值就是在于对于海量数据进行存储和分析。但我们要冷静的看到,大数据的核心在于为客户挖掘数据中蕴藏的价值,而不是软硬件的堆砌。因此,针对不同领域的大数据应用模式、商业模式研究将是大数据产业健康发展的关键。我们相信,在国家的统筹规划与支持下,通过各地方政府因地制宜制定大数据产业发展策略,通过国内外IT龙头企业以及众多创新企业的积极参与,大数据产业未来发展前景十分广阔。
欢迎大家留言讨论!

jbuse 发表于 2023-11-30 06:34:56

数据量很大,存储处理很难

Vikivzl 发表于 2023-12-1 00:50:50

Как создать новую тему jinriwenda.com ??

918??? ??? 2023-11-30 06:32
????,?????????????????????????????????????,??????? ...

Есть кто из модераторов, так как не могу ответить в новую тему?
Может я не правильно пишу?
Нужна Ваша помощь.
Спасибо.
页: [1]
查看完整版本: 大数据含义是什么?