大数据是无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。下面是由小编为大家整理的“大数据学习心得体会”,希望对您的工作和生活有所帮助。
10月23日至11月3日,我有幸参加了管理信息部主办的“20__年大数据分析培训班”,不但重新回顾了大学时学习的统计学知识,还初学了Python、SQL和SAS等大数据分析工具,了解了农业银行大数据平台和数据挖掘平台,学习了逻辑回归、决策树和时间序列等算法,亲身感受了大数据的魅力。两周的时间,既充实、又短暂,即是对大数据知识的一次亲密接触,又是将以往工作放在大数据基点上的再思考,可以说收获良多。由衷地感谢管理信息部提供这样好的学习机会,也非常感谢__培训学院提供的完善的软硬件教学服务。
近年来,大数据技术如火如荼,各行各业争先恐后投入其中,希望通过大数据技术实现产业变革,银行作为数据密集型行业,自然不甘人后。我行在大数据分析领域,也进行了有益的探索,并且有了可喜的成绩。作为从事内部审计工作的农行人,我们长期致力于数据分析工作。但受内部审计工作性质的限制,我们也苦于缺少有效的数据分析模型,不能给审计实践提供有效的支持。这次培训,我正是带着这样一种期待走进了课堂,期望通过培训,打开审计的大数据之门。
应该说,长期以来,农业银行审计工作一直在大规模数据集中探索。但根据审计工作特点,我们更多的关注对行为数据的分析,对状态数据的分析主要是描述性统计。近年来火热的大数据分析技术,如决策树、神经网络、逻辑回归等算法模型,由于业务背景不易移植,结果数据不易解释,在内部审计工作中还没有得到广泛的应用。
通过这次培训,使我对大数据分析技术有了全新的认识,对审计工作如何结合大数据技术也有了一些思考。
一是审计平台技术架构可以借鉴数据挖掘平台。目前,审计平台采用单机关系型数据库。随着全行业务不断发展,系统容量不断扩充。超过45度倾角的数据需求发展趋势,已经令平台不堪重负。这次培训中介绍的数据挖掘平台技术架构,很好地解决了这一难题。挖掘平台利用大数据平台数据,在需要时导入、用后即可删除,这样灵活的数据使用机制,即节省了数据挖掘平台的资源,又保证了数据使用效率。审计平台完全可以借鉴这一思路,也与大数据平台建立对接,缓解审计平台资源紧张矛盾。
二是可尝试在部分场景应用大数据分析技术。目前,审计选样主要通过专家打分法。这次培训中介绍的逻辑回归和决策树算法,也是解决这一方面的问题。通过历史样本和历史底稿的数据,通过训练建立选样模型,将与底稿相关的主要风险特征选入模型,再将模型应用于验证样本。这样就可以应用大数据技术,为审计提供支持。
三是加强与管理信息部和软件开发中心的合作。本次培训中我们也看到,经过一段时间的积累,我行已经具备了一定的大数据分析经验,储备了一批具有相应经验的人才。作为业务部门,我们应加强与管理信息部和软件开发中心的对接,通过相互沟通和配合,确定业务需求,发挥各自优势推动大数据技术的落地。就像行领导所指出的那样,大数据技术哪个部门先投入,哪个部门先获益。目前,我行大数据技术应用正处于井喷前夕,我们应抓住这一有利时机,推动审计工作上一个新台阶。
这次培训对于我来说,只是打开了一扇窗,未来大数据分析的道路还很长、也一定很曲折,但我也坚定信念,要在这条路上继续努力,所谓“独行快、众行远”,有这样一批共同走在大数据分析路上的农行人陪伴,相信农业银行大数据之路必将有无限风光。
在目前互联网经济的时代,数据已成为企业的核心资产,对数据的应用、管理能力也已成为企业核心竞争力。在我们生活中大数据的应用也越来越广泛,比如网上购物、新闻推送等领域,银行业的大数据应用也具有巨大潜力,大数据分析的热度不断提升。基于市场形势及同业的快速发展,行领导对我行大数据体系的建设给予了高度的重视,董事长指示“大数据是商业银行极其重要的资产和资源,在银行经营管理中发挥越来越重要的作用。谁跟不上大数据发展的形势,谁就会被市场竞争所淘汰。”,赵行长也多次提到“大数据是一个金矿,哪个部门先用,哪个部门先受益”。为了将大数据分析有效应用到实际业务工作中,支持我部业务发展,本人参加了管理信息部牵头组织的本次培训。
前期在管理信息部的牵头组织下,我部申请将“贵金属交易潜在客户挖掘”项目为大数据分析示范项目,希望以贵金属业务为切入点,探索大数据分析在金融市场领域的应用。随着项目的推进,我对数据分析在贵金属业务领域的应用有了简单认识,但仍局限于对数据库表的统计、加工。通过本次的学习,加深了对我行大数据服务体系建设方案的了解,初步掌握了大数据分析的理论基础、方法流程,并尝试应用工具开展简单的分析工作,主要学习成果总结如下:
一、深入理解我行大数据体系建设方案
今年年初,行党委审议通过了大数据分析的总体思路和实施方式,即建设“一个平台、一套机制、一支队伍”,以数据分析示范项目为驱动,带动“一个平台、一套机制、一支队”滚动发展,逐步建立完善大数据分析服务体系。经管理信息部及软件开发中心2年的不懈努力下,我行大数据分析的基础平台已搭建完成,为数据分析人员提供了一站式数据服务基础,同时也初步形成了一套健全的运营管理机制保障高效优质的数据服务,包括分析用户管理、数据安全管理、项目管理等。而一支队伍则是本次培训的主要目的,也是大数据分析工作的的关键,即形成一支我行自有的专业的数据分析师团队。
二、初步掌握大数据分析的理论基础及方法
理论是支持实践的基础,可有效指导实践,大数据分析工作也不例外。数据分析的理论基础为概率论及数理统计,在大学时作为一门必修课,有一个学期的时间来学习,本次培训在讲师的带领下,则通过一天进行了回顾。同时也学习了统计学及常用统计模型,并结合实际简单案例了解应用场景,重点的学习模型包括Logistic回归、决策树、时间序列,这些模型后续如何应用到实际业务分析中仍需要不断的探索实验。
理论是支持实践的基础,可有效指导实践,大数据分析工作也不例外。数据分析的理论基础为概率论及数理统计,在大学时作为一门必修课,有一个学期的时间来学习,本次培训在讲师的带领下,则通过一天进行了回顾。同时也学习了统计学及常用统计模型,并结合实际简单案例了解应用场景,重点的学习模型包括Logistic回归、决策树、时间序列,这些模型后续如何应用到实际业务分析中仍需要不断的探索实验。
大数据分析工作也有一套方法、流程,一般数据分析的主要步骤包括业务理解、数据理解、数据准备、建模、评估/报告、应用、监测,在不断的循环迭代中加强数据对业务发展的支持。
三、尝试应用工具开展简单分析
工欲善其事,必先利其器。在了解大数据分析的理论基础后,本次培训还介绍了我行现有数据分析工具:woody、mole及sas,以及对应的sql、python及sas编程基础,也通过一些简单的案例开展数据处理、建模、模型训练、评估等操作,将理论知识有效的结合实践中,也为往后开展实际业务分析打下了基础。
四、确定后续学习方向及定位
两周的学习使我对大数据分析有了更加深入的认识,但仍局限于框架、概况,大数据分析的学习是持续的,而不同角色的分析人员需要关注的方向也不尽相同。正如孙总所提到的,数据分析师必须是复合型人才,作为业务部门的一名业务分析师,在加强对业务痛点理解的同时,后续仍需进一步学习分析工作所需的专业知识,不断自我提升,包括掌握常用的统计模型,结合实际业务场景选取尽可能合适的模型,掌握python语言,灵活运用woody及sas等分析工具,提高分析效率,成长为一名懂业务、懂技术、懂模型、懂市场的分析师。
培训的内容很丰富,涵盖了多个领域,包括领导力、团队协作、沟通技巧等等。这些内容都是我在学校里难以学到的,但我相信它们对于我未来的职业发展有着非常重要的意义。
在这次培训中,我学到了很多实用的知识和技能。比如,如何有效地进行团队协作,如何提高自己的领导力等等。这些知识和技能不仅对于我未来的工作有着重要的帮助,同时也对我的生活有着积极的影响。
在培训过程中,我认识了很多志同道合的同学,我们一起学习、交流,互相帮助。他们的存在让我感到不再孤单,也让我更加坚定了自己的信念。
总的来说,这次培训让我收获颇丰。我不仅学到了很多实用的知识和技能,还结交了很多志同道合的朋友。我相信,这次培训将会成为我人生中一段美好的回忆,也将会对我未来的发展产生积极的影响。
经过前期的MOOC课程自学和集中面授学习,我顺利地通过选拔考试,获得2024年湖北__“菁英计划”人才培养第三阶段大数据专业的培训资格。11月12日至22日,我与省内其他24名学员一起,参加了在杭州华为全球培训中心举办的“__计划”第三阶段大数据专业培训。与7月份开展的第二阶段培训相比,本次培训在数学基础知识、Python编程语言、数据挖掘模型与算法方面有了更深入的讲解,同时新增了__云机器学习服务MLS、大数据架构和大数据治理等内容,并强化了本课程的实验教学。
本次培训中,全体25名学员都表现出了积极端正的学习态度。在__老师的指导下,大家刻苦专研大数据挖掘知识,课上遇到问题主动向老师请教,课后积极复习消化新知识,基于自身学习情况及时与老师协商调整授课和学习方式。面对课程内容多、难度大而课时少的情况,大家都欣然接受由原来每周2次晚自习调整为每天上晚自习并且晚自习时间延长1小时的安排。培训期间,大家仔细琢磨常见的分类、回归和聚类算法,比较不同算法的优缺点;在理论学习的基础上,大家通过上机实操对所学知识做进一步巩固和强化;在实验室搭建环节,虽然大家碰到了许多棘手问题,但通过老师的悉心点拨、学员间的激烈讨论,所有问题逐一解决;面对课时紧、学习任务重的挑战,大家自觉利用课余时间,针对课堂上未消化的内容自行查漏补缺。
本次培训虽不能保证让所有学员都成为大数据挖掘方面的专家,但它让大家有机会更加深入地了解大数据挖掘这门技术,并且点燃了大家对大数据挖掘的学习热情。面对课程庞大的知识架构和体系,大家纷纷表示,虽然很难在10天内对所有知识有充分的认识和掌握,但培训结束后仍会卯足干劲,主动做到持续性学习,争取在大数据挖掘道路上越走越远。
培训的主题是关于人工智能和大数据的应用,对于我这个专业的学生来说,这是一个充满挑战和机遇的领域。在这次培训中,我学到了很多关于人工智能和大数据的基本知识,包括机器学习、深度学习、数据挖掘等方面的内容。通过老师的讲解和实际操作,我逐渐理解了这些技术的原理和应用场景,也意识到了这些技术对于未来的影响和价值。
除了专业知识的学习,这次培训还注重培养我们的团队协作和沟通能力。我们被分成了几个小组,每个小组需要完成一个项目。在项目中,我们遇到了很多问题,但是我们通过团队协作和沟通,都克服了困难,完成了项目。这次培训让我深刻体会到了团队协作的重要性,也让我学会了如何更好地与他人沟通和合作。
此外,这次培训还注重培养我们的创新思维和实践能力。老师鼓励我们在课堂上积极发言,提出自己的见解和想法,同时也鼓励我们动手实践,将所学知识应用到实际中。通过这次培训,我不仅学到了很多新知识,也提高了自己的创新思维和实践能力。
这次培训让我收获颇丰。提高了自己的团队协作和沟通能力,以及创新思维和实践能力。