“凡是过去,皆为序曲”
《大数据时代》读书笔记
20xx年2月20日 sunjinshuang
各章节内容摘要与感想
第一部分 大数据时代的思维变革
1. 不是随机样本,而是全体数据 --更多
通过GOOGLE预测流感流行趋势和Farecast系统预测机票价格等例子说明了大数据时代分析数据立足于海量数据分析的重要性,而非传统的取样分析,并且阐述了在很多领域曾经不被重视的混杂数据在大数据时代而产生了新的商业价值的案例,只有从思想上改变了原始的数据分析方法,重视大数据思维方式,才能更好的发现生活中更具价值的信息和商机。
2. 不是精确性,而是混杂性 --更杂
在“小数据”时代,采样最基本、最重要的要求就是减少错误,保证质量,因为收集的信息量较少,所以要保证记录下来的信息要尽量精确。但在大数据时代,很多时候数据的量变会产生质变,如果依然沿用以前的分析方法,可能会和更多有价值的信息失之交臂,只有容忍不精确性,拥抱混杂性,以一种高屋建瓴的思维方式跳出传统思维模式,才有可能发现更多平凡数据中隐藏的“宝藏”。
3. 不是因果关系,而是相关关系 --更好
知道“是什么”就够了,没必要知道“为什么”。在大数据时代,我们不必知道现象背后的原因,而是要让数据自己“发声”。本节通过列举了亚马逊网站的书评团队输给图书推荐系统、蛋挞与飓风用品捆绑销售、客户购买行为与怀孕预测、纽约沙井盖与爆炸事故预测等众多经典案例来阐述在生活中很多时候我们并不需要寻找事物之间的因果关系,而只要知道了相关关系就足够给我们的生活和工作带来有价值的信息,人们必须转变在以往的日常生活中,习惯性地用因果关系来考虑事情的思维,才能在大数据
时代更好的认知自己和这个世界。
第二部分 大数据时代的商业变革
1. 数据化:一切皆可“量化”
“数据”(data)一词在拉丁文里是“已知”的意思,也可以理解为“事实”。信息化的发展其实就是一场逐渐将世界转化为数据的革命,在将世间万物运转过程中所“散发”的特征量化为数据的过程中,其所具有的的商业价值也就如泉水般源源不断的涌现出来,文中莫里的航海导航图的研制和日本教授通过研究司机不同坐姿的臀部经压力传感器数据化后所孕育出的新型产业链,着实让人眼前一亮,大呼数据化研究的不可思议。如今的信息技术变革重点在“T”(技术)上,而不是在“I”(信息)上。现在,是时候把聚光灯打向“I”,开始关注信息本身了。
2. 价值:“取之不尽,用之不竭”的数据创新
节选:
我们所处的时代之所以与众不同,是因为数据的收集不再存在固有的局限性。技术已经发展到一定程度,大量信息可以被廉价地捕捉和记录。数据经常会得到被动的收集,人们无需投入太多精力甚至不需要认识这些数据。而且,由于存储成本的大幅下降(在过去的50年中,数字储存成本大约每2年就削减一半,而存储密度则增加了5000万倍),保存数据比丢弃数据更加容易。这使得以较低成本获得更多数据的可能性比以往任何时候都大。
不同于物质性的东西,数据的价值不会随着它的使用而减少,而是可以不断地被处理。这就是经济学家所谓的“非竞争性“的好处:个人的使用不会妨碍其他人的使用,而且信息不会像其他物质产品一样随着使用而有所耗损。
数据就像一个神奇的钻石矿,当它的首要价值被发掘后仍能不断给予。它的真实价值就像漂浮在海洋中的冰山,第一眼只能看到冰山的一角,而绝大部分都隐藏在表面之下。
3. 角色定位:数据、技术与思维的三足鼎立
从商业角度描绘了大数据价值链的三种角色定位:
? 基于数据本身的公司
? 基于技能的公司
? 基于思维的公司
并依此讲述了3种定位不同的公司的核心竞争力、未来发展前景和商业模式的转变所带来的新的挑战和商机。作者对未来公司体系结构和经营模式有了大胆的设想,认为大数据是决定未来企业的核心竞争力,对各个行业将会起到决定性的影响,谁首先掌握了大数据技术和思维,进行了深入的变革,谁就会最先受益并在此后的竞争过程中遥遥领先。文中的一个观点让人印象颇深:“行业专家和技术专家的光芒都会因为统计学家和数据分析家的出现而变暗,因为后者不受旧观念的影响,能够聆听数据发出的声音“。
第三部分 大数据时代的管理变革
1. 风险:让数据主宰一切的隐忧
2. 掌控:责任与自由并举的信息管理
最后一章主要是讲大数据时代的到来带来的个人隐私、公共安全、司法公正方面的风险问题,通过数据的公开和共享,个人信息将越来越容易被利用,个人隐私的保护将变得不堪一击。甚至通过大数据分析预测,将将要犯罪之人绳之以法所面临的道德风险问题,一一进行讨论分析。但就如核工业技术和生物工程学领域的发展一样,人类总是先创造出可能危害自身的工具,然后才着手建立保护自己、防范危险的安全机制,在这方面,大数据也和其他领域的新技术一样,机会的到来也伴随着风险。但作者也在书中讨论了应该如何建立一种安全的机制去管控不可预知的风险问题,甚至设想了一种新的职业--“大数据算法师”,对数据利用的风险进行评估和提供相关分析算法的解决方案这一职业进行了描绘。
虽然大数据技术和思想能帮助我们更好地进行已有的工作,但大数据也并非万能的,人类的创造力、直觉、天赋和灵感远非机器所能取代。大数据为我们提供的不是最终答案,只是参考答案。
第二篇:《与大数据同行:学习和教育的未来》读书笔记
《与大数据同行:学习和教育的未来》读书笔记 世界发展到今天,生活的节奏随着科技的发展将变得越来越快。互联网从1.0时代向2.0时代的时代的进步,我们再也不是单相的被动的接受信息,而是将互联网作为一个交流的渠道,信息的交换随之诞生。更甚者互联网3.0时代的到来,人工智能,互联网+等等概念的提出和发展,我们生活的各个领域都将发生翻天覆地的变化。在这个发展的过程,各种数据的产生,处理,存储,分析将变得至关重要。我们已经可以找到很多这样影响我们生活的例子,维基百科让我们每个人都有了编辑词条,完善知识的能力;自媒体的产生让我们每个人都能成为事情的发现者而不是倾听者;亚马逊能够准确的通过你的浏览历史准确推送你所需要的书籍;Siri的推出,告诉我们人工智能离我们并不遥远。而当我们不断构建出这个庞大的躯体的同时,数据如同血液一般在不停的运转。
我们生活的各行各业都在发生翻天覆地的变化。但在我们教育领域的改变却是凤毛麟角。自从现代意义上的学校诞生到现在,课堂没有发生根本的变化,培养的模式和方法依然如百年前重复不前,教育如同农业一样还停留在刀耕火种的时代已有百年。虽然很多有识之士已经意识到传统的授课方式不利于学生的个性化发展,但如何促进学生的自主学习、个性化发展?互联网的技术优势得到了很好的体现,大数据仿佛一记灵丹妙药,解决了上述长久困扰教育者的难题。
早在20xx年的时候托马斯·弗里德曼的《世界是平的》这本书中就给我们描述了未来世界将被抹平,地域的阻隔将不断被打破,各种语言之间的交流将日益频繁,而今天我们的生活正一步步的进入托马斯·弗里德曼《世界是平的》里面的描述世界,正一步步的进入迈克尔舍恩伯格的《大数据时代》所描绘的未来时代。今天再次读到维克托·迈尔-舍恩伯格教授的《与大数据同行》我们不尽要去思考,大数据的未来将在教育领域引起多少改变? 教育领域大数据的到来让我们教育工作者能够更好的了解学生在如何学,了解该老师如何教,最终实现因材施教,促进学生个性化学习。实现上述目标,大数据在改进学习方面有着三大核心的要素:反馈、个性化和概率预测。反馈就是要建立完善的反馈系统,针对学生的学习过程实施反馈,通过反馈改进学生的学习情况,最终形成一个良性循环,促进学生学习。个性化则是基于个人学习数据累积,每个人的情况不同,积累的学习数据也不同,利用现代化的信息手段可以了解每个人的学习特点,针对每个人的学习特点提供个性化的教学辅助支持。概率预测是大数据实现上述目的的方法,基于大数据的预测不可能做的百分百准确,大数据所能提供的参考也只是一个概率,决策者所要考虑的是当概率达到多大时,采取什么样的对策。
从目前对大数据的应用来看,大数据确确实实在促进学生的学习方面起到了重要的作用。以在线学习平台为例,当前炙手可热的可汗学院的成功与大数据的应用密切相关。可汗学院的网站存储了大量的学生学习记录,基于这些记录,网站针对每个学生的答题准确率运行一个统计模型,用来判断学生是否“精通”某个学科领域。不仅如此,系统还能为学习者找到最适合他们所学主题的学习路径,使他们不仅能够根据自己的步调,还可以按照最有效的顺序来学习。相比传统的课堂教学模式,可汗学院运用大数据的优势有效的提升了学生的学习效果,帮助了一些学习困难生找到了最适合他们的学习路径。
正如一切新生事物的发展总会遇到或多或少的阻力,可汗学院的发展也是如此。当我们的世界变得越来越小,我们的交流也随之需要打破各种语言的障碍,不同文化差异上的障碍。但我们有理由相信,随着大数据的发展。这些运用大数据的各种方式都会不断得到完善,语言的障碍,不同文化的碰撞等等,最终将会产生更加耀眼的火花。
当然,大数据的应用也同样存在着巨大的风险。如果我们过分迷信数据,大数据带来的问题也将凸显了出来。数据一旦成为决定因素,过去的数据将永远影响一个人的未来。过分
迷信大数据的预测也将直接影响一个人当前的教育,当下采取的一些措施直接去增强预测的结果,最终可能阴差阳错。例如,当根据某学生的学习情况预测很有可能成为一个医生,于是所有的培养围绕着促进该学生成为医生,最终的结果很有可能是他成为了医生,真实的情况是,他可能更适合做一个科学家,但是因为大数据的预测,因为后续的教育彻底断送了他的科学家之路。另一方面,大量数据的产生,信息的安全对我们也将是要给挑战。每个人从出生到死亡将会产生大量的数据,单单就学习而言,终生学习已经被时代所要求。大量数据的保存,数据由什么人,什么机构来保管,又该如何在保证我们信息安全的前提下做到信息的合理共享。这一系列的问题都将是大数据发展过程中必须需要一步步去解决,一步步去完善。
当然,我们还不必过分担心大数据的危害,至少在现在的教育上,大数据的应用远远没有想想的普及,大数据的影响也远远没有想象的神奇。大数据在教育中的应用还处在不断探索阶段,从系统的设计到模型的分析,还有许许多多的问题要解决。我们也不必担心大数据将会给传统的教育带来致命性的打击,大数据在教育上至始至终都将是为了让我们的教育得到更好的发展,就现阶段而言,大数据的发展离不开传统教育的土壤;传统教育的变革也需要大数据的力量。我们应该相信,只有传统教育和大数据的更好结合,相辅相成,我们的教育将会更加有生机,我们的教育将会得到更好的发展。