大数据时代_51CTO博客
1, 大数据可以用于人才管理(录,离,升,降,调)。 招聘时候根据简历内容自动给出测试题,机器自动过滤,判单候选人是否适合公司的岗位,适合什么岗位,根据大数据分析,可以提前3个月预测人员是否会离职,提前采取留人措施。 问题:收集什么样的员工数据,以及如何收集这些数据,来预测人员是否会离职? 2. C ...
转载 2021-10-28 22:24:00
308阅读
2评论
  大数据会是一场概念的骗局么?近期这样的讨论在网上随着大数据的话题而不断涌现出来。其实大数据并不是一项全新的技术,它的本质表现在数据的形态更为复杂,增长的速度更快和交互的频率更高 今年已经被认为是云计算时代的“大数据”元年,各大平台即服务(PaaS)提供商备受媒体的关注,比如亚马逊、谷歌、Heroku、IBM和微软。但是哪些提供商在公共云领域真正提供最全面的A
原创 2012-06-14 14:18:34
653阅读
一、大数据的结构1.大数据的结构化大数据包括结构化、半结构化和非结构化数据,非结构化数据越来越成为数据的主要部分。据IDC的调查报告显示:企业中80%的数据都是非结构化数据,这些数据每年都按指数增长60%。大数据就是互联网发展到现今阶段的一种表象或特征而已,没有必要神话它或对它保持敬畏之心,在以云计算为代表的技术创新大幕的衬托下,这些原本看起来很难收集和使用的数据开始容易被利用起来了,通过各行各业
2017年最热的技术词汇非人工智能A莫属,大数据B和云计算C渐少人提及了,但就像倒在了杯子里的啤酒,当泡沫逐渐消去,醇香才开始四溢!让我们一起回顾一下云计算平台在2017年都有哪些精彩!公有云混战难分胜负2017年,中国公有云市场群雄混战。互联网大鳄、外资巨头、硬件厂商、初创新贵们,似乎都觊觎着这块肥肉,不肯离场。阿里云继续一骑绝尘,最新一季度营收近30亿人民币,继续同比100%的成长,虽然还不盈
转载 2018-08-13 09:18:29
420阅读
大数据时代: 生活、工作和思维的大变革一书写的相当不错,深入浅出,实例丰富。不过读的时候,常让人迷恋于各种小故事,而无法一下子把握整本书的想阐述的思想脉络。所以,自己列个提纲,记录一下书内的一些闪光点。 第一部分:思维变革一共三章,这三章其实是一个整体,联系起来理解其实会更深刻。抽样、精确、因果三者之间的关系是什么?在解决经典统计问题,三者的作用是什么?而针对大数据状况下,全部、混杂、相关的作用是什么?1. 抽样vs全部抽样在数据收集时效性不能保证时采取的办法。而采用全部数据模式,是因为信息收集技术的进步。 而全部数据模式会比抽象数据更能反映 问题的本质。因为抽样数据需要保证随机性,而不是数量
转载 2013-09-27 19:08:00
145阅读
2评论
 现在想想也不记得当时是怎么找到《大数据时代》这本书的,好像是在查找数据库方面的书,看到亚马逊推荐的书里有这本,发现最近才出版的就买一本回来看看。   然而这个过程中,其实自己已经得到了大数据带来的影响。 我的浏览记录被亚马逊监视着,根据这些记录它们寻找和我浏览记录相关(同类)的书籍,预测我会看它们的可能性比较大,于是在亚马逊给我的推荐书目里,就多了一本大数据时代。而我买
原创 2013-04-11 16:51:41
602阅读
wifi探针数据分析本项目实现的主要功能:通过探针设备采集可监测范围内的手机MAC地址、与探针距离、时间、地理位置等信息:探针采集的数据可以定时发送到服务端保存:利用大数据技术对数据进行人流量等指标的分析。最终以合理的方式展示数据处理结果。1、数据收集数据收集由服务器和探针设备共同完成,探针采集数据并发送到服务器,服务器接收探针设备的数据,处理成定格式保存至分布式文件系统(HDFS)中,供数据处理
转载 2023-07-29 23:40:21
0阅读
大数据”一词近年来在IT行业很火热,相信大家都有过这样的体验,在购物软件上购买或者浏览了一件商品,下次再购物时会收到同类商品的推送,这是因为我们的浏览记录和购物记录都会存到软件后台数据里面,商家会根据这些数据预测我们感兴趣的商品,这就是大数据的应用之一。大数据又叫做巨量资料,指无法在一定时间范围内使用常规的工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有的更强决策力、洞察发现力和流程
原创 2021-04-01 17:45:31
1024阅读
大数据”一词近年来在IT行业很火热,相信大家都有过这样的体验,在购物软件上购买或者浏览了一件商品,下次再购物时会收到同类商品的推送,这是因为我们的浏览记录和购物记录都会存到软件后台数据里面,商家会根据这些数据预测我们感兴趣的商品,这就是大数据的应用之一。 大数据又叫做巨量资料,指无法在一定时间范围内使用常规的工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有的更强决策力、洞察发现力和流
转载 2021-04-03 21:17:34
991阅读
2评论
大数据时代意义一、大数据对经济社会的重要影响。1、能够推动实现巨大经济效益比如对中国零售业净利润增长的贡献,降低制造业产品开发、组装成本等。预计2013年全球大数据直接和间接拉动信息技术支出将达1200亿美元。2、能够推动增强社会管理水平大数据在公共服务领域的应用,可有效推动相关工作开展,提...
转载 2017-01-26 11:25:00
542阅读
2评论
一、大数据时代还需要数据治理吗?数据平台发展过程中随处可见的数据问题大数据不是凭空而来,1981年第一个数据仓库诞生,到现在已经有了近40年的历史,相对数据仓库来说我还是个年轻人。而国内企业数据平台的建设大概从90年代末就开始了,从第一代架构出现到现在已经经历了近20年的时间。在这20年的时间里,国内数据平台实施者可以说是受尽折磨,数据项目一直不受待见,是出了名的脏活累活。可以说,忽视数据治理给数
原创 10月前
104阅读
Hadoop来临特点:海量数据需要及时分析和处理。海量数据需要深入分析和挖掘。数据需要长期保存问题:磁盘IO成为一种瓶颈,而非CPU资源。网络带宽是一种稀缺资源硬件故障成为影响稳定的一大因素Hadoop在国内的应用奇虎360:Hadoop存储软件管家中软件,使用CDN技术将用户请求引到最近的Hadoop集群并进行下载京东、百度:存储、分析日志、数据挖掘和机器学习(主要是推荐系统)广告类公司:存储日
原创 2017-06-26 17:50:20
3287阅读
1点赞
近些年来,大数据逐步渗透到现实生活,从医疗到信贷,可谓是各个行业。单从“大数据”这个词语来看,说明数据量很大。如果这些数据结果,不做处理,以单纯数字呈现,相信你看的超不过10秒中,你会头皮发麻。你都头皮发麻了,那我们的客户岂不更发麻,如果这个问题解决不了,将非常影响大数据的发展。由此一个职业必将会兴起,就是数据可视化工程师,而它的职责就是将大数据的结果做的一目了然,降低客户的阅读时间和阅读门槛。此
原创 2018-05-06 12:47:21
1450阅读
1点赞
“许多年前,人们隔山相望,都觉得彼此非常遥远,时间过得很慢,未来遥不可及;到后来,有了电话、有了视频,人们的联系近一点,可以听得、看得远一点;去年的疫情,迅速地让线上远程联系成为常态,中国的留学生隔着时差上课,时间、空间都折叠、压缩进隔离的房间;而在上个月,神舟12号发射成功,空间站的建设也更进一步——我们去年连门都出不了,今年已经一脚驻扎在太空。”刘慈欣在2021世界人工智能大会上演讲时如是说。
转载 2021-12-15 10:10:38
493阅读
随着对不同类型、不同体量数据的结构化存储、批量处理以及价值挖掘需求的增多,支持大量结构化和非结构化数据的系统将继续增长。市场需要数据平台来帮助数据管理人员管理和保护大数据,同时允许最终用户进行数据分析。这些系统将逐步成熟,在企业内部的IT系统中更好地运行。1、数据处理变得更加快速,数据也变得更加易于使用2、大数据不再只是Hadoop3、相关组织将利用数据湖(DataLake)来实现价值4、成熟的架
原创 2023-04-19 09:46:31
161阅读
大数据时代精髓-“精准”大数据时代的到来,让互联网领域乃至这个世界都产生深刻变化,随着大数据应用的逐渐深入,对大数据精髓的淘汰也逐渐成为人们关注的焦点。以下三大论断可以反应出大数据精髓所在:大数据作为一种新的测量工具,将再一次引领新的繁荣,提供给人们更多的选择。大数据之“大”,不仅在于容量,更...
转载 2016-02-24 18:25:00
303阅读
2评论
常常听到人们会提起单位,之前的以MB和GB为主,以前一个128MB的U盘容量都觉得,哇,好大啊。现在U盘8G,16G,32G,64G都成主流了,笔记本都1TB了。 百度、阿里,以及腾讯这样的互联网巨头,其分析平台每天处理的数据量高达100PB,2011年全球数据总量为1.8ZB...新的单位很多。
原创 2021-07-20 16:03:15
879阅读
## 引言 随着互联网、物联网和移动设备的普及,数据量呈爆炸式增长,我们进入了所谓的“大数据时代”。在这个时代,能够高效地收集、存储、处理和分析大规模数据集变得至关重要。大数据不仅改变了商业智能(BI)和决策支持系统(DSS)的面貌,还对个人隐私保护和数据分析伦理提出了新的挑战。 ## 大数据的概念 ### 定义 大数据通常指的是超出传统数据库软件处理能力的数据集合。它包括数据的三个V特性:大容量
原创 3月前
28阅读
大数据”,其实并不是新的概念和现象。早在1980 年代,美国就有人提出了“大数据”的概念。30多年来,由于信息技术的进步,各个领域的数据量都在迅猛增长,美国的企业界、学术界也不断地对这个现象及其意义进行探讨。最近这一两年,“大数据”这个概念在美国变得越来越流行、越来越重要。2012年3月,美国联邦政府宣布投入2亿多美元启动大数据的研发任务,并把大数据定义为和历史上的互联网、超级计算同等重要的国家
转载 精选 2013-01-11 15:32:43
1067阅读
什么是大数据?这篇文章给你答案
原创 2022-10-16 16:05:35
132阅读
  • 1
  • 2
  • 3
  • 4
  • 5