人大经济论坛CDA大数据分析师培训学习心得
CDA 大数据分析师的课程让我对“大数据”这个概念有了更为具体的认识。以往对于“大数据”,我的认知还是仅仅停留在概念层面上。而上完课后,尤其是了解如何搭建Hadoop平台以及其生态环境之后,“大数据”这个概念终于落地了。
Hadoop的核心框架是Hdfs和MapReduce。Hdfs是分布式文件系统,其主要作用是存储及读取数据。而MapReduce实际上是Hadoop工作的核心思想。任何想要在Hadoop集群上完成的算法都必须基于MapReduce的思想实现。因此,我认为想要学习Hadoop,其核心在于充分理解MapReduce。而同时,MapReduce的理解也是理解大数据分析思想的关键,即如何将庞大的数据分解成可以进行操作的小数据集。
人大经济论坛Hadoop大数据分析师课程大致可分为如下几个部分(阐述并不是按照时间顺序,而是按照个人对于这个课程的理解)。第一部分是原理及背景的讲解:个人认为,这一部分其实是重点,因为涉及到了大数据分析的核心,也包括了Hadoop的运行原理。例如1.0版本与2.0版本的差异,其核心在于2.0版本增加了独立的资源管理器Yarn,这极大的提升了Hadoop处理海量数据时的效率;第二部分是搭建平台:从最初的单机模式,至伪分布模式,到最终的集群模式。这部分内容中核心的部分是如何写好配置文件,在这里课程中也会涉及到核心参数的介绍,这对于理解Hadoop平台及今后自己如何配置Hadoop集群模式都是十分有用的;第三部分是Mahout的介绍: Mahout是建立在Hadoop平台上的软件,其中集成了许多很有用的算法。这些算法往往不是十分前沿的,但在处理海量数据时往往可以显现出强大的作用。课程中对于Mahout的讲解也是十分仔细的,因为它是目前最为常用且方便的分析海量数据的软件;第四部分是Java培训: 由于Hadoop是由Java编写的,因此对于自己想编写MapReduce的学员,这部分内容其实是十分关键的。因为我认为想真正成为一个大数据分析师,仅仅会用Mahout上现成的算法是远远不够的。修改已有的算法甚至是构造新算法都是一个想真正进入这一行业的从业人员所必需的。课程中也会涉及到怎样在源文件中修改MapReduce程序,从而实现自带的算法所不具有的功能。从这一点上也体现了课程的深度;第五部分是对Hadoop整体生态环境的介绍,介绍并在Hadoop平台上搭载了如Hive, HBase等等常用的应用。对于其优劣势也有较为详细的介绍,例如Hive可以利用HQL语句进行数据库操作,便于那些熟悉SQL语句的DB管理人员操作。而HBase是一种面向列的数据库,使得查询及插入数据更高效。相较于Hive,HBASE显然更适用与海量数据的管理。这些对于Hadoop整体生态环境的介绍体现了课程一定的广度。
总体来讲,人大经济论坛hadoop大数据分析师培训课程,无论是课程内容的深度和广度,还是课程的教学质量,都是完美的,学完本人受益匪浅,通过最短的时间使自己快速进入到大数据分析的领域中。八天的培训中,最让我感动的是培训老师的认真负责的态度。课程中每一步骤都由老师一对一,手把手指点,耐心程度让人点赞。这样的教学方式保证能让每个学员都能跟上进度,有些入门级的同学当然问得更多些,老师也能一一解答,相信他们的收获比我更多。
人大经济论坛CDA大数据分析师第二期课程学员
第二篇:数据分析师
数据分析师(网络科技公司类)
上海xx网络科技有限公司 职位:项目数据分析人员
岗位要求:
1、有直复营销经验;有市场和营销经验;
2、了解数据库技术,掌握SPSS或SAS;
3、有一定的市场敏感度,根据业务需要进行数据分析;
4、有直复营销经验优先
xx信息技术(上海)有限公司 职位:数据分析
任职要求:
1、大学本科及以上学历,数据统计分析专业及相关专业,良好的数据采集、处理、分析能力;
2、相关工作经验1年以上,了解游戏行业尤佳,优秀应届毕业生也可;
3、对数据比较敏感,熟练操作计算机及Office软件;
4、学习能力强,能较快接受新事物;
5、良好的沟通能力,口头表达清楚流利,有较强的写作能力;
6、工作认真、负责、仔细,有良好的团队合作精神。
携程计算机技术(上海)有限公司 职位:商业数据分析师
职位描述:
1、负责全国销售部利润考核,业绩评估;
2、参与全国销售部数据分析及决策支持;
3、进行市场调查研究,就销售模式、市场合作等专题,撰写专项调查研究报告;
4、协助管理全国销售总部的部分推广项目。
任职要求:
1、本科及以上学历,统计学或应用数学相关专业;
2、两年以上数据统计分析或市场研究工作经验;
3、精通SPSS或SAS软件;
4、良好的数据分析、沟通协调能力;
5、对六西格玛、项目管理、平衡计分卡等管理方法有了解者优先。
时代网络 职位:数据分析师
职位要求:
1、统计学或计算机相关专业本科或以上学历;
2、有清晰的统计分析思维;
3、有电信行业经营分析工作经验者优先考虑;
4、有一定数据库应用经验;
5、有ERP或BI领域工作经验者优先考虑;
6、一年以上工作经验;
7、有扎实的统计学知识基础;
上海盛大网络发展有限公司 高级数据分析师
职责:
1、游戏行为数据的分析和挖掘,并建立相关数据模型;
2、对市场活动进行评估;
3、为游戏,销售策划方案提供支持;
4、日常数据分析。
要求:
1、学士或以上学历,统计/数学/计算机等相关专业;
2、熟悉 sas 或 spss 等分析统计工具, 熟悉数据挖掘的常用算法;
3、优秀的分析技巧和沟通能力,对数据的有一定的敏感性;
4、有数据分析工作经验,或有在电信,银行,IT行业相关经验者优先考虑。
北京万方数据股份有限公司 数据分析员
职位要求:
1、统计学相关专业研究生以上学历
2、对中国宏观经济状况有一定的了解和认识;
3、学习能力强;
4、熟练掌握SPSS、Eviews等相关统计软件;
5、具有较好的团队合作意识;
6、做事认真细致,能承担工作压力;
7、较高的英语能力和中文写作能力,CET6
阿里巴巴(中国)网络技术有限公司 数据分析师
职位描述:
1、负责数据整理及分析工作,提交数据分析报告
2、满足各部门内部数据需求
职位要求:
1、大学本科以上学历,数学、统计、数理统计或信息技术等专业方向;
2、相关领域至少1年以上工作经验
3、熟练使用各种数理统计、数据分析工具软件;
4、良好的沟通交流能力,文字语言表达能力,较好的逻辑分析能力;
5、强烈责任心,良好的沟通能力,具备良好的团队合作精神。
市场研究
海科盈通(北京)科技有限公司 市场研究专员
职位描述:
1、大专及以上学历、年龄25-45岁之间;
2、具有良好的协调和沟通能力;
3、有较强的语言表达能力,良好的逻辑思维能力和行动力;
4、有强烈的进取意识,有热情,责任心强,有团队意识;
5、具有良好的协调和沟通能力和良好的人际关系;
6、有积极进取的精神及接受挑战的信心;
7、熟练使用办公软件,英语良好。
8、工作经验2年以上,工作地点北京;
广州网易互动娱乐有限公司 市场研究员
岗位描述:
1)根据产品开发方向和市场策略,制作、提交市场调研计划,确保调研计划得到有效实施。
2)根据市场调研计划,撰写调研方案,及时处理实施过程中的问题,确保调研活动按计划和预算完成。
3)对调研结果进行深度分析,撰写并提交深度分析报告,为公司的市场营销与产品开发决策提供支持。
4)根据各业务部门提出的临时需求,确定优先级,合理调配资源,确保突发性调研需求得到及时实施。
5)寻找和管理调研合作伙伴(专业的调研公司、销售商、市场研究机构等),指导调研人员开展工作,以提高调研质量。
岗位要求:
1)学历要求:本科以上,经济、管理类等专业
2)经验要求:三年以上市场调研或行业研究经验
3)素质要求:形象思维与逻辑思维、信息收集、计划与监控能力、学习能力、市场意识、沟通与协调能力
4)知识与技能要求:
1)具备营销管理、统计学、经济学、战略管理学等相关学科的基础知识;
2)熟悉市场调研和市场分析的基本方法和流程;
3)对网络游戏行业有一定的了解,熟悉公司产品;
4)善于应用各类数据和模型对问题进行深入、系统地分析;
5)文案组织能力;
6)熟练使用各类办公软件(office等)和统计分析软件(spss等)。
北京完美时空网络技术有限公司 市场研究专员
岗位职责一:
处理来自产品部门的调研需求,并独立负责调研项目的报告撰写工作。
监控网络游戏市场的动向,分析主要竞争对手的产品及市场动向
任职资格:
市场营销相关专业硕士,具有良好的市场敏感度和数据分析能力,熟练运用Excel,SPSS
岗位职责二:
处理来自产品部门的定性调研需求,并独立负责调研项目的报告撰写工作。
任职资格:
有定性访谈主持人从业经验,良好的沟通能力和访谈控制力,对市场具有比较好的分析判断能力
上海山房房地产经纪有限公司 市场研究人员Market Researcher 职位描述:
本科以上学历,房地产、市场研究或经济相关专业,房地产专业优先
熟悉房地产市场,并有1年以年房地产经验
对市场有敏锐的分析能力和文字功底
英语4级或以上
Bachelor’s degree, major in real property or market research or business etc., Preference in real property.
Familiar with property market, at least 1 years working experience in the industry. Ability to analyze investment-environment and report writing.
CET-4 or above.
迪特泰克营销顾问(北京)有限公司 IT产品市场研究专员
职位描述:
1、负责相关业务的市场调查、问卷访问和对IT渠道、消费类电子产品、办公用品等渠道进行市场信息收集工作;
2、协助其他部门开展市场调查工作并配合资深市场研究人员进行常规项目市场报告的撰写工作;
3、了解家用PC,打印机,笔记本产品市场者优先。
职位要求:
1、大专以上程度;
2、独立思考能力、优秀的语言沟通能力、熟练运用计算机文档软件;
3、对市场调研有兴趣;
4、客户导向、团队协作;
5、诚实、踏实、敬业;
6、有相关行业工作经验者优先;
7、统计学专业优先。
销售分析
艾博生物医药(杭州)有限公司 销售分析专员
工作职责:
1 、制作销售报表, 并定期进行销售统计分析并制作相关报告。
2 、核算产品成本,管理和维护产品报价及报价体系。
3 、根据公司制定的OEM政策;审核客户定制化要求,综合分析评估项目的可行性、合理性。
任职条件:
1、本科以上学历
2、英语CET-6,熟练的英语读写能力,并能够进行基本的商务英语口语对话。
3、能够熟练使用EXCEL,WORD进行数据分析和报告制作,有ACCESS,K3使用经验者优先。
4、具有1年以上销售分析或相关的工作经验。
广州市欧联投资管理有限公司
工作内容:
1、收集、整理、分析各种销售基础数据,对各销售网点达成的销售做分析与比较,并生成销售分析报告并定期向上级领导汇报销售进展情况;
2、完善和维护及时有效反映销售业绩的销售数据分析报告体系(包括数据收集、整合、分析),为管理层提供决策支持;
3、提供各类销售项目的基础销量数据准备和分析、汇报;
4、针对销售量录入和管理系统数据的维护和结构优化;
5、定期做库存分析,及时跟踪补货情况,并提供相应的报告;
6、协助部门经理负责公司信息化规划和项目实施;
7、协助部门经理负责公司信息化系统(包括软件、硬件、网络等)的维护和管理。 岗位要求:
1、本科以上学历,统计、财务、信息管理类专业;
2、三年以上零售及消费品(皮具鞋类服饰行业)数据分析与管理经验
3、良好的逻辑分析能力,数据分析和统计能力强;
4、熟悉数据库管理,对数据管理和统计分析有较深入了解,熟悉SAP系统者优先;
5、熟悉ERP项目的规划和实施,熟悉POS系统和OA系统的规划和实施;
6、良好的沟通协调能力、服务意识和团队意识。
京卫大药房 数据专员
职位描述:
为满足药房网(京卫元华)发展商品规划的需要,根据商品规划部年度经营计划,完成商品数据统计、分析、维护工作
负责建立药房网(京卫元华)商品数据库,进行商品销售分析与销售预测
定期收集商品品类变化数据并进行分析,撰写分析报告
针对商品销售的变化,周期性收集与分析公司内部客户需求和反馈
负责商品数据分析工作
对公司商品数据进行筛选、核查、整理
每月提交商品数据分析报告
其他:
银行、证券、保险、大公司的市场部门