数据大数据时代

2022-05-25 版权声明 我要投稿

第1篇:数据大数据时代

思考大数据时代的数据信息管理

一方面是大数据时代的来临及各种数据开发应用实践,另一方面是客户隐私面临着前所未有的风险与担忧,客户管理工作者面前的挑战足够艰巨。

目前许多如日中天的互联网企业的巨大价值大都和拥有海量客户信息有关,新的商业模式也日益和基于客户洞察基础上的商业行为有关。在客户服务领域,个性化的精准服务在大数据时代也日益成为可能。最近APP商店上的一款新应用Placeme号称能记住使用者的每一条路径和到达过的每个地方,其强大的学习和分析功能可以帮助使用者在合适的时候(比如下班时)启动导航软件分析路况、遭遇车祸时自动呼叫救援、在适当的加油站附近提醒加油。这样的个人助理需要收集存储大量的个人数据,而智能手机今后就是这样的一个个人信息收集器,其背后的云计算服务器义不容辞地永久存储着海量的个人信息。可以想象基于这样的技术基础和逻辑框架,在服务领域的创新仅仅是打开了一个门缝而已。

对个人信息被泄漏的担忧引起的消费者保护性立法在世界各国也成趋势。前不久,荷兰的《网络中立法》获得通过,其确定运营商不得对网络流量采取歧视性限制之后,还规定未经用户许可,不得利用目前流行的DPI(“深口袋检视技术”)提取任何客户个人信息。

在中国,客户信息的不正当使用较之国际上多数国家都更为严峻。一方面企业创新乏力,利用客户信息进行客户关怀和维系的努力除了短信问候生日之外真正能建模分析的不多;另一方面,非法出售、使用个人信息在市面上又屡见不鲜。这几天网上传出某些淘宝商户为了要客户删除差评,居然利用所谓追讨公司用公布个人信息、组织个人攻击来要挟。而大企业中员工偷偷将企业拥有的客户个人资料出售牟利的例子我们也屡闻不鲜。企业面临着两难的选择,像中国移动那样几年前被315晚会批评后一直坚持“五不”政策,在利用短信进行营销创新和新业务拓展方面甚至在客户洞察利用方面几乎无任何作为。

企业面对数据海量爆发的时代,一定需要突破一些固有思维。

首先,数据是企业能够使之不断增值的巨大潜在财富,大量的创新将建立在此基础上,任何企业很难再一味忽视或拒绝。

其次,大数据时代的数据决不仅仅限于客户个人资料,大量的应用、社会环境数据同样是整个数据海洋的重要内容。大量的客户洞察并不需要涉及或者影响用户的个人隐私,完全可以为客户资料进行完整的保护保密。

再者,建立良好的客户关系与品牌声望,确保给客户带来价值。研究表明,大多数客户是愿意让渡部分隐私损益的。今后,改善客户生活工作的一系列新型应用一定是建立在客户行为洞察基础上,客户的“个人云”托管不是要不要有的问题,而是交给哪家企业更加放心的问题。最近海外一些国家的一项调查表明客户对谷歌、苹果的个人信息信任度比电信运营商为高,在中国的倾向我们依然不得而知。

最后,数据管理是一个专业性的工作,设立岗位、建立流程、投资平台、并且改善文化都是题中应有之义。

第2篇:大数据时代与数据传输技术

摘要:随着云计算、大数据、物联网、人工智能逐步发展,大数据时代的到来離不开信息的大量采集,本文从电信号、光信号和无线信号的传输种类和技术特点进行总结分析,深入解析网络OSI开放系统互联参考模型的七层协议用途和数据传输的特点,并对数据传输的发展和未来的应用情景进行展望。

关键词:大数据    数据传输   协议  网桥  光缆  5G  GPRS  WiFi

近年来,云计算、大数据、物联网、人工智能逐步发展,信息量呈几何级数的增长直接造就了大数据概念的出现。大数据时代的到来离不开信息的大量采集,就数字信息的采集技术而言,目前的数字信息采集方法已经完善,文字、图片、音频、视频等多维度的数字信息的采集手段和技术基本完备,数据的采集越来越实时化,随处可见实时音频直播和视频直播。可以说信息的采集环节已经基本实现实时化,但在信息传输和处理还有较大的开拓和发展空间。

数据传输就是按一定规则把数据从数据源传输到数据终端,实现点与点之间的信息传输与交换。需要传输的数据根据协议被分解成一个一个数据包(其中包括本地机和目的机的地址),通过网线传输给目的机。

以早期电话线上网为例,接到用户的请求后,数字信号从Internet上下载,通过ISP接入用户所在区域的交换机,通过D/A变换变成模拟信号,传到调制解调器,再经A/D变换,还原成计算机可接受的数字信号。

数据通过信号进行传输,包括电信号和光信号,电信号又分为模拟信号和数字信号,模拟信号是指随着时间连续变化的电压或电流等;数字信号是指自变量和因变量都离散的信号;光信号就是电磁波谱中的可见光。

把数字信号转换成模拟信号,即调制;把模拟信号恢复成数字信号,即解调。负责这两项功能的调制解调器(Modem),就是常说的“猫”。

在OSI开放系统互联参考模型中,网络从上至下分为七层:物理层、数据链路层、网络层、传输层、会晤层、表示层、应用层。每一层都有各自需要遵守的规则,称为“协议”。

1、物理层(Phisical Layer):是OSI的最底层,实现系统与通信介质的接口功能,为实现链路实体之间透明地传输比特流提供服务。

2、数据链路层(Data Link Layer):在相邻两系统的网络实体之间,建立、维持和释放数据链路连接,实现透明的可靠的信息传输服务,数据传输的基本单位是帧(frame)

3、网络层(Net Work Layer):网络层主要涉及通信子网及与主机的接口,以实现两个端系统中传输实体间的通信,传输的基本单位是组(packet)。

4、传输层(Transport layer):为不同系统内的会晤实体间建立端-端的透明可靠的数据传输,执行顺序和流量控制,管理多路复用等,数据传输的基本单位是报文(message)。

5、会晤层(Session layer):为不同系统内应用进程之间建立会晤连接,提供一个能满足多方面要求的会晤连接服务。

6、表示层(Presentation Layer):向应用进程提供信息表示方式,对不同系统的表示方式进行转换、通信,提供标准的应用接口和通信服务,如数据加密,正文压缩等。

7、应用层(Application Layer)是OSI最高层,为应用进程访问OSI环境提供手段,其他各层都通过应用层的应用进程提供服务。

OSI参考模型层次划分及数据流动原则:

1、网络中各主机都具有相同的层次

2、不同主机的同等层具有相同的功能

3、同一主机内相邻层之间通过接口通信

4、每层可以使用下层提供的服务,并向其上层提供服务

5、不同主机的同等层协议来实现同等层之间的通信。

TCP/IP协议就是一组最常用的网络协议。主要包括五层,将会晤层、表示层、和应用层三层合在一起作为应用层,即物理层、链路层、网络层、运输层、应用层,上下层、同等层之间也通过协议进行通信.

数据传输物理层主要由网线(双绞线、光缆)、网卡、路由器、交换机等硬件构成;网关则在网络层以上实现复杂的网络互连功能。

网卡:网卡和计算机之间的通信通过I/O总线以并行传输方式进行,网卡的ROM由销售商分配唯一的MAC(48位串行号)地址,安装网卡后用户可以通过电缆或无线连接计算机与外界局域网。网卡驱动程序会告知网卡应该把局域网传送过来的数据存储在什么位置。网卡上传数据时发出中断请求把收到的帧交给协议栈中的网络层,由协议栈向下交给网卡发送到局域网。

双绞线:网线的压接通过RJ-45接头完成。它里面有8个铜片可以和网线中的4对双绞(8根)线对应连接。1、2线是传送数据的,3、6线是接收数据的。1、2,3、6之间是一对差分信号,波形一样,相位差180度,同一时刻的电压幅度互为正负。这样可以使信号可以传递的更远,提高抗干扰能力。

光缆和光猫:利用光导纤维传递光脉冲来进行通信,光纤传输的是光信号,需要通过光模块、光猫进行转换才能被电脑CPU读入。光模块的作用就是光电转换,发送端把电信号转换成光信号,通过光纤传送后,接收端再把光信号转换成电信号。光猫负责将光信号转换成标准的互联网以太网协议信号。

数据的有线传输发展的同时,无线数据传输的技术近年来发展迅猛。

常见无线传输方式有两种:近距离无线通信技术和远距离无线传输技术。近距离无线通信技术是指通信双方通过无线电波传输数据,并且传输距离较近。常用的近距离无线通信标准有:Zig-Bee、蓝牙(Bluetooth)、无线宽带(Wi-Fi)、超宽带(UWB)和近场通信(NFC)。目前广泛应用的WiFi技术与蓝牙技术一样,属于在办公室和家庭中使用的短距离无线技术。

远距离无线传输技术:广泛应用的无线通讯技术主要有GPRS/CDMA、数传电台、扩频微波、无线网桥及卫星通信、短波通信技术等,可以在较远、有污染或环境恶劣区域等。

(1) GPRS/CDMA无线传输:

GPRS(General Packet Radio Service)是一种以全球手机系统(GSM)为基础的数据传输技术,是GSM的延续。GPRS和以往连续在频道传输的方式不同,是以封包(Packet)式来传输,GRRS的分组交换技术具有实时在线"按量计费"高速传输等优点。

5G网络指的就是在移动通信网络发展中的第五代网络,其峰值理论传输速度可达20Gbps,合2.5GB每秒,比4G网络的传输速度快10倍以上。一部1G的电影可在4秒之内下载完成。

CDMA是中国电信运行的一种基于码分技术和多址技术的新的无线通信系统,其原理基于扩频技术。

(2) 数据传输电台:

数传电台采用数字信號处理、数字调制解调、具有前向纠错、均衡软判决等功能的一种无线数据传输电台。在航空航天、铁路、电力、石油、气象、地震遥感、遥测领域得到广泛应用。

(3) 无线网桥:

无线网桥是无线射频技术和有线网桥技术相结合的技术。无线网桥是为使用无线(微波)进行远距离数据传输的点对点网间互联而设计,在数据链路层实现LAN互联的存储转发设备。

(4)卫星通信:

卫星通信是利用人造地球卫星作为中继站来转发无线电信号,从而实现在多个地面站之间通信的。卫星通信系统通常由卫星端和地面站二部分组成。

目前以GPS全球定位系统、北斗定位系统已经达到非常精确的程度,海底电缆、移动通信和全球定位系统三大信息技术的发展,迎来了互联网时代海量的数据产生,任何一秒钟产生的共享数据量都是惊人的,每一位终端用户都是独立的个体,并不断更新和活跃着。

在大数据的时代,通过信息和数据的有效传输和处理,将大大提高沟通的效率、促进人类科技和文化交流的繁荣,全面提高人类的生活质量。

参考书目:

[1]孟宪伟,许桂秋.大数据导论[M].北京:人民邮电出版社,2019:3-11.

[2]谢希仁.计算机网络[M].北京:电子工业出版社,2017:46-63.

[3]汤小丹等.计算机操作系统[M].西安:西安电子科技大学出版社,2014:350-368

作者简介:

刘增文  1969年出生,男,汉族,山东省诸城市人,大学本科,高级工程师,研究方向为农业装备与汽车、工程机械、数控机床维修与技术改造、工业互联网技术等。

作者:刘增文

第3篇:“大数据+”继续教育:继续教育如何拥抱大数据时代

摘 要:通过调研继续教育目前的现状和问题,分析大数据技术对继续教育教学产生的影响,探索继续教育在大数据时代应如何创新教学模式,实现个性化教育管理与服务,提升继续教育的核心竞争力。

关键词:大数据;继续教育;个性化;学习评价

党的十八大以来,习近平总书记多次强调中国要坚定实施科教兴国战略,创新教育方法,努力发展全民教育、终身教育,建设学习型社会。高校积极搭建继续教育平台,探索形式各异的继续教育模式。伴随云计算、移动通讯、物联网等新一代信息技术的高速发展,大数据的获取保存成为可能,这将为社会各个领域带来深刻影响,与国家终身教育息息相关的继续教育更是站在了大数据时代的风口浪尖。在这种形势下,继续教育只有创新教育方法,顺应时代发展,才能摆脱僵化被动的状态,张开双臂拥抱大数据时代。

一、继续教育目前的现状和问题

(一)教学内容与教学方法单一

目前我国继续教育普遍依附于传统的普通高等教育,仍以学历教育为主,没有根据职业化需求突出岗位培训、成人教育的特色,体现出实践性、技能性、行业性优势,学生虽然在学历上有所提高,但实践技能并无太大长进。检验继续教育效果的方式也是以“普教化”为标准,没有在发展中形成自己的特色。

在专业设置和教学内容上,缺乏现代教育意识与通识教育观念,教学设置单调、陈旧、脱离实际,缺乏活力和吸引力。在教学方法上,面授教学是全日制课堂教学的压缩版;使用的教材基本套用高职全日制;教学计划、考试形式等没有脱离普通高等教育的教育模式,没有体现在职人员学习的特点。日常教学也只是传统意义上的说教式教学,缺乏现代意义的柔性服务,不能因材施教。

(二)教学互动反馈机制缺失

对于教学而言最为关键的就是教与学之间的互动,互动效果如何直接影响着教学效果。远程继续教育把传统课堂的教学内容平行搬移到互联网上,属于以知识传递为中心的接受认知,是单向的课程资源共享平台,老师无须组织教学活动,仅提供数字化教学资源即可。教学形式为单一的线性教学方式,学生在网上点播老师的授课录像,遇到问题时无法与教师或其他同学互动交流,不能及时解决学习中遇到的难题,老师也了解不到学生具体的学习情况和学习进度,不能及时辅导,缺乏师生互动,生生互动,因此大部分继续教育的网络教学效果并不是很好。

(三)教育评价机制单一

教育评价是根据一定的教育价值观或教育目标,运用有效的评价技术和手段,通过系统地搜集信息资料和分析整理,对教育活动满足教育主體需要的程度作出的价值判断活动。

我国目前的继续教育基本上是只抓招生和发证两头,限于数据来源和评价信息的数量规模,难以获取量化的数据支持。教学评价更多是基于学生考试成绩、作业成绩和平时课堂表现进行的结果性评价与经验性评价,并未形成发展性教育评价观,从学生的需要出发,重视学习过程、学习体验和师生交流,量身定制学习方案,更好地达成学习目标。

(四)专业课程设置与市场需求不符

继续教育的目的或是提高学生的任职能力,或是为跳槽、转岗后的个人发展提供支撑。明确的目标指向决定了高校继续教育在内容上既要有针对性,也要有层次性,必须贴合企业实际和市场需求,做到“实际需要什么,就教授什么”。

然而目前我国各高校继续教育在专业开设、课程设置、教学方式和手段等方面办学同质化严重,依旧是传统的课程内容和教学方法,与市场需求脱节。在培养模式上仍以应试教育为主,缺少顺应时代发展的非学历教育,不能很好地适应市场和社会对人才的需求。

二、“大数据+”继续教育

20世纪90年代,印度著名的教育学家苏伽特?米特拉在做过大量实证试验后提出“学习是一种自组织行为”。大数据时代是建立在通过互联网、物联网等现代网络渠道广泛大量数据资源收集基础上的数据存储、价值提炼、智能处理和展示的信息时代,更是充分演绎了新时期自组织的个性化学习过程。大数据时代的到来,促使传统的“经验式”教学模式向“数据服务”教学模式转变。通过对学生相关数据进行分析,关注每个学习者的微观表现,有针对性地调整教学方案,发展优势潜能,实现个性化教育管理和服务。

(一)教育评价的客观性

发展性教育评价观需要及时有效地把握学生日常学习过程中的表现、所取得的成绩以及所反映出的情感、态度、策略等方面的发展,但如何获取产生于课堂、作业、师生或生生互动过程中的相关信息是一大难题。

大数据时代以云计算、物联网作为载体,在后台默默记录学生整个学习过程中产生的不同层面数据和信息,以全面的大数据为基础依托于相关的评价模型进行分析,全方位了解学生的过程性学习信息。大数据有能力关注每一个学生每时每刻的学习活动中产生的微观表现,如记录提问的教学内容、重复审题和修正答案的次数、视线停留在教师身上的时间、合作学习讨论的频率等等。更为可贵的是,这些数据的记录是悄然进行的,学生不愿在实验情境下表现出来的行为也能得到完整的呈现,因此数据也更为真实自然。大数据的应用使我们可以更多地关注学习过程, 了解是哪些因素影响了学业水平并找出这些因素间的关系,从而提高教育评价的客观性。

(二)教育方式的个性化

国际个性化教育协会将个性化教育定义为:为受教育者量身定制教育目标、教育计划、教育培训方法、辅导方案并加以执行,组织相关专业人员为受教育者提供学习管理策略、知识管理技术以及整合有效的教育资源,帮助受教育者突破生存限制,实现自我成长、自我实现和自我超越。个性化教育要求施教者必须了解学生已有的知识储备、学习能力以及兴趣特长等,尽管过去我们也强调因材施教,但真正做到这一点并非易事,大数据时代为这一切提供了可能。

在大数据时代,继续教育学习者可以按照自己的偏好,不固定时间地点,灵活地进行个性化学习。在线学习平台会自动留存学习者的学习行为数据,系统后台根据不断更新的行为数据进行分析预测,评估学生的优缺点,分析学生的思考习惯,创建心理测量图,并根据学生的学习进展实时调整之后的学习内容和重点,从而实现对学习者的学习行为及时自动提示、引导和评价。在大数据的支撑下,面对同样的教学内容,每个学生的不同表现和反馈内容被传送到后台,系统可以对学生进行分门别类,总结出各类的特点和相应最优的学习方法。通过对大量教学数据的归纳分析,也可以起到预测效果,什么样的学习内容、什么类型的教学方法更适合当前学习的学生,结合对市场数据的分析,能够明晰当下的市场需求,有助于为学生按需推荐课程内容,真正做到继续教育课程内容与市场需求同步化。

三、继续教育如何拥抱大数据时代

(一)改变教学模式,提高教育质量

1.改变教学模式,实现混合式教学

大数据时代,教师在固定的场所以一对多的教学模式对学生进行单向灌输式教学,必将变为翻转课堂与在线学习互动相结合的混合式教学模式。与按部就班、限定时间空间的传统课堂教学模式相比,在线学习能为学生提供更加自主的学习空间,10分钟左右的交互式短视频配套相应的测试学习模式,能有效减少在线学习过程中产生的视觉疲劳,促进学生集中注意力。

在线学习平台会留下宝贵的学习行为数据资料,比如鼠标的点击情况,在视频某处的重复观看和暂停,答错的题目是否会回顾复习等等。当数据量积累到一定程度,继续教育者通过对群体的学习行为模式进行数据挖掘,就会得出学习规律,判定出哪些知识点需要重点强调,有针对性地开展教学和指导。通过大规模教学数据与课程资源的反复检验和改进,进一步提高在线教学资源的优质性。这种在线学习与课堂教学相结合的混合式教学模式,可以使参加继续教育的学生更加合理地安排学习时间,用课堂上的探究式学习巩固在学习平台上的学习效果,最大程度地提高继续教育教学质量。

2.优化教学互动,提升教学效果

继续教育开放的在线学习平台为生生、师生、师师搭建良好的交流途径,鼓励学生协同学习、发表观点、交流看法,培养互相学习的氛围,在探讨中提出问题,在相互质疑与论证中得出正确的结论,共同进步。这样的互动过程也有助于老师掌握学生的学习情况,便于老师对学生有针对性地答疑解惑,解决其学习过程中的问题。此外,老师之间也可以通过交流平台对课程的教学重点、难点进行分析探讨,以促进产生新的更加科学合理的教学方式。

教师可以通过大数据技术对学生学习行为、学习爱好等非结构化数据进行分析及挖掘,做出预测并及时做出决策调整,规划出最有效的学习路径,设计弹性的教学运作机制,使教育更具特色和个性。学生可以借助大数据,更好地了解、总结自己的学习状况,不断调整学习策略,有针对性开展自主学习,大大提高自己的学习效率。

(二)建立资源共享机制,实现教学资源互通

我国继续教育应逐步实现资源共享机制,可以借鉴MOOC的发展模式。目前MOOC在线教育模式已经从原来的课程展示与免费学习阶段迈向学分认证阶段,这也是MOOC可持续发展的关键,美国三大MOOC平台已经先后推出了学习成果认证机制。继续教育也应推进学历教育与非学历教育的协调发展,推进教育资源共享。参考MOOC平台的运营模式,建立教育资源共享机制。首先,建立标准统一、形式多样、满足经济社会发展和适应各类人群教育需求的办学模式。利用高校多种教育形式并举的优势,实现校内各种资源的共享使用,避免重复建设造成浪费。其次,适当引进MOOC平台课程,选取合适的课程进入课程体系,鼓励学生进行选修或作为专业课的教学辅助。高校应挖掘内在优势,理顺管理体制和运行机制,打破各形式独立办学的堡垒,提高教学资源的共建共享力度。

(三)结合数据分析,实现按需定制

1.以市场需求为导向制定培训计划

高校继续教育以满足市场需求为人才培养的目标,因此继续教育人才培养制度要以市场需求为导向。

大数据时代的到来,使高校可以在广泛大量数据资源的收集基础上,进行数据挖掘分析,掌握市场需求情况,从而在政策引导下,紧密围绕需求制定培训计划,准确定位,充分调研,开发能够满足各种需求的培训项目。在发挥高校学科、行业优势的基础上开展继续教育办学,利用学校优势学科形成的产学研平台和教学资源,将前沿理论与实践应用紧密结合,为行业企业提供订单式的形式丰富的继续教育服务。

2.实现个性化课程定制

建立于基础教育之上的继续教育要进一步遵循个性化教育理念,通过对被教育对象进行综合调查、研究分析,根据学生的潜质特征和自我价值倾向,制定出符合其目标与要求的培养方案。

与基础教育不同,参加继续教育的学生大多已经积累了一定的行业知识技能,有了相对丰富的工作经验,参加再教育的目的或是希望解决工作中的难题,或是接受新领域新知识,或是进行学历提升。继续教育者应当根据学生不同的需求实现个性化课程定制,在较短时间内使学生在专业知识、行业技能、工作方法、学习观念等方面获得突破性进展,并具备更强的独立创新能力。

(四)成果互认,实现多方位教育衔接

多方位教育衔接包括不同学历层次、不同学习形式、学历教育与非学历教育的衔接,学历教育与职业资格认证的衔接,相近专业课程衔接等,关键点在于成果互认的学习评价制度。

通过设立以学分互认为标志的学分银行制度,有计划地推进不同类型继续教育之间的学分互认。学生可在“学分银行”中开户,自主调节学习进度、学习年限,将获得的学分存入“银行”积累起來且终身有效,达到一定学分后即可获得学位或进入相应层级的高校进修,也可与就职条件相关联。完善配套的学分政策及继续教育质量保障政策,践行教育起点、过程及结果的平等,必将显著增强大数据时代下的继续教育吸引力。

四、结语

继续教育作为我国构建学习型社会终身教育大体系的重要部分,目前受限于资源与技术,存在教学内容与评价机制单一,缺少教学互动反馈机制,专业课程设置脱离市场需求等问题。大数据时代的到来为继续教育破解困境提供了一把利刃,使传统的“经验式”教学模式向“数据服务”教学模式转变有了可能。借助大数据时代的东风,继续教育必将抓住机遇在新形势下迎来一轮新的大发展。

参考文献

[1]陈炜煜.MOOC为继续教育战略转型带来的新契机[J].成人教育, 2015(2).

[2]黎志华.教师教育评价研究[D].上海:华东师范大学,2011.

[3]张燕南,赵中建.大数据时代思维方式对教育的启示[J].教育发展研究,2013(21).

[4]朱建平,李秋雅.大数据对大学教学的影响[J].中国大学教学, 2014(9).

[5]赵灿,贾伟, 王世燕. 基于MOOC的高校继续教育改革探析[J].继续教育,2016(1).

[6]刘丽莹.MOOC视域下普通高校继续教育发展改革的探讨[J].继续教育,2015(3).

[7]祖静.构建创新型继续教育模式的探讨[J].继续教育研究, 2014(2).

作者:郜盼盼 贾伟 马凤涛

第4篇:大数据时代的“数据解读”

褚宝福 鲍静 摘 要:大数据时代提高学生解读数据能力是我们提升教学有效性的新课题。面对《经济生活》教材中的众多经济数据,我们不能止步于浅层次的文本阅读,还需要将它们从“知识”“情感”和“思想”三个维度上进行解读,使其融入知识、能力及情感态度价值观“三维”目标之中,为拓宽学生知识视域、提升学习能力、培育正性情感、树立正确价值观服务。 关键词:经济数据 知识性解读 能力性解读 思想性解读 褚宝福,男,浙江省嘉善高级中学,中学高级教师;鲍静,女,浙江省嘉善高级中学,中学一级教师。 大数据时代,学会正确解读数据已成为人们应具备的重要技能之一。因此,培养和提升学生解读数据能力就成为我们提升教学有效性的新课题。普通高中思想政治课教科书中设置了大量的数据,仅人民教育出版社2014年3月第6版普通高中必修

一、经济数据的知识性解读 所谓知识性解读,指的是教师在教学时,能够从纵横两个视角引导学生对《经济生活》中的数据进行解读,让学生获取相关的经济学知识,以达成思想政治课的知识目标。 1.基于纵向视角的知识性解读。从纵向视角对经济数据进行知识性解读,强调的是对一定的经济数据进行历史性考察,并据此解读出相应的经济学知识。如对教科书第10页“2010年4月8日人民币对美元的汇率中间价为682. 59,2013年4月8日人民币对美元的汇率中间价为626.5”这一数据,我们的历史性考察分两步:首先是选择四个典型的历史时期来考察汇率情况。一是1953年到1972年,国家实行计划经济,实行严格管制和固定不变的汇率政策,使人民币对美元的汇率基准价长期稳定在246.1上。二是1981年至1993年,国家实行对外开放,发展社会主义市场经济,为扶持出口,增加外汇收入,人民币对美元的汇率基准价控制在149和195.8之间。其中1985年至1993年国家为平衡国际收支,实行官方牌价与外汇调剂价格并存的政策,使人民币对美元的汇率基准价由293.6逐渐上升到576.2。三是1994年至2005年,为进一步完善发展社会主义市场经济体制,国家逐步形成了以市场供求为基础的、单一的、有管理的浮动汇率制。人民币对美元的汇率基准价保持在835与819间浮动。四是2005年7月21日起至今,实行以市场供求为基础的、参考一蓝子货币进行调节、有管理的浮动汇率制度。人民币对美元的汇率基准价水平由797上升到619,并呈稳中有升的特点。其次,在上述四个时期考察的基础上,我们可引导学生解读出这样一些基本的经济学知识:一是我国的汇率政策是为适应并促进不同时期经济社会发展的需要而制定的,期间经历一个由严格管制向市场逐渐过渡的历史过程,并呈日趋市场化开放化的发展趋势。二是汇率是以另一国货币来表示的本国货币的价格,其高低最终由外汇市场决定,但同时也会受到国家政策等因素的影响;三是一国汇率数据的变动会对该国经济发展和居民生活带来一定的影响。我国人民币汇率总体呈上升趋势,这对我国经济发展和人民生活既有利也有弊,需要我国防范汇率风险等。 2.基于横向视角的知识性解读。从横向视角对经济数据进行知识性解读,强调的是对经济数据横向间的各类关系进行分析,并解读出其中所蕴涵的经济学知识。如对教材第66页“财政收入”这一数据,我们的知识性解读也分两步进行:首先将教材上“2012年财政收入”来源项目细化,并选择典型项目进行横向分析。一是分析财政收入、税收收入、非税收收入的数量及关系:2012年财政收入117210亿元(不含债务收入),税收收入100601亿元,非税收收入16639. 24亿元,分别占全部财政收入的85. 83%和14. 20%。二是分析税收中几个主要税种的数量及关系:国内增值税26415.5亿元、国内消费税7875. 58亿元、营业税15747. 64亿元、企业所得税19654亿元、个人所得税5820. 28亿元、关税103.5亿元等,其中国内增值税已成为我国目前税收的主要来源,企业所得税次之,营业税居第三,然后是国内消费税和个人所得税,关税数量较少。三是分析非税收收入中主要项目数量及关系:行政事业性收费4579. 54亿元、国有企业利润1154. 02亿元、罚没1559. 81亿元等,其中行政事业性收费最多位居第一,而国有企业上交利润相对比较少,低于各类罚没收入。四是几类主要国有企业利润数量及关系:烟草企业252. 64亿元、石油化工企业308.

45、电力企业76. 74亿元、煤炭企业106. 54亿元、电信企业106. 90亿元、电子企业1. 65亿元、金融企业0.33亿元、转制科研企业1.88亿元等,其中石油化工、煤炭、电力等资源类国有企业利润占总利润的42. 61%,而科技为主的国有企业利润只占总利润的9.5%。其次在上述分析的基础上,我们可引导学生解读出这样一些基本经济学知识:一是税收是依法取得财政收入的基本形式,是财政收入的主要来源。二是增值税、营业税、企业所得税等是国家收入的主要来源,但也直接影响企业的生存和发展。当前的税收改革特别是“营改增”,对国家税收总量及企业发展与竞争力影响甚大。三是非税收收入中行政事业性收费太多,而国有企业上交利润偏低,与国有经济的性质、地位及作用不匹配。四是国有企业利润结构不合理,其中资源类国有企业的利润占利润总量过高而科技类国有企业利润偏低,这表明我国仍需要大力推进经济发展方式的转型升级。

二、经济数据的能力性解读 所谓能力性解读,指的是教师在教学时,能够引导学生运用比较、综合两种方法对《经济生活》中的经济数据进行解读,提升学生分析数据和概括数据的能力,以达成思想政治课的能力目标。 1.基于比较方法的能力性解读。运用比较方法对经济数据进行能力性解读,强调的是对不同的经济数据,依据一定的标准进行相应的比较,以培养和提升学生分析数据的能力。如对教材第82页虚线框中的“农村居民人均纯收入”和“城镇居民人均可支配收入”数据的能力性解读,可分下述两种情况:首先,对同一经济主体在不同时间点上的数据进行纵向比较性解读,以培养学生纵向分析数据的能力。如可将教材82页上“农村居民”和“城镇居民”两类经济主体的经济数据,分别补充上2013年和2014年的最新数据,形成下述比较表格: 依据上述表格数据,引导学生分别分析从2009年至2014年农村居民人均纯收入和城镇居民人均可支配收入数据变动的特点:城乡居民人均收入逐年增加,但农村居民收入增长速度快于城镇等。其次,对同一时间点上不同经济主体的数据进行横向比较性解读,以培养学生横向分析数据的能力。我们同样可依据上述表格,引导学生分析我国在2009年至2014年期间,每年农村居民和城镇居民人均收入数据的差异情形:城镇居民收入高于农村居民,绝对差距数据在拉大等。 2.基于综合方法的能力性解读。运用综合方法对经济数据进行解读,强调的是在一定的范围内对不同经济主体的经济数据进行相应的综合,以培养学生的数据概括能力。一般我们可选择两种主要范围展开综合性解读:首先就同一教学单元中的经济数据进行综合性解读,以培养学生从单元经济数据中概括出相应结论的能力。如对第二单元“生产、劳动与经营”中的主要数据,我们按照因果联系的逻辑原则,将“我国主要产品产量居世界位次”、“城乡居民储蓄存款余额”、“储蓄存款利息和股票价格”、“投资理财的分配数额”、“保险理赔数额”等数据进行综合,形成下述数据体系:依据上述体系,引导学生对①②③④四组原因结果关系进行概括,可得到这样的结论:随着我国我国经济不断发展、经济实力不断增强,居民储蓄余额不断增加,同时由于国家经济的发展和居民储蓄余额的增加,会引起居民投资理财途径的多样,而这会进一步提高了居民的储蓄余额和国家经济的发展,由此在居民投资与国家经济发展间形成了相互促进的良性互动。总之,一国经济的发展与投资间存在着密切的关系,需要我们正确地处理。其次对教材中不同单元中经济数据进行综合性解读,以培养学生从不同单元经济数据中概括出相应结论的能力。如对第二单元“生产、劳动与经营”和第三单元“收入与分配”中的众多数据,我们同样可依照因果联系的逻辑原则,进行综合,形成下述综合体系: 依据上述体系,引导学生对①②③④⑤⑥六组原因结果关系进行概括,可得到这样的结论:第一,随着我国经济的发展,不仅带来居民投资增多和日趋多样,而且还促使国家财政收入、企业收入和居民收入不断提升及财政支出数量的增加。第二,我国居民投资和财政投资的增加,必然促进我国经济的发展。第三,国家财政收入的增加、企业利润、居民收入的不断提升,也必将推动我国经济的发展。第四,在国家财富一定情况下,投资的增加会引起收入的减少,而收入的增加会引起投资的减少,两者存在此消彼长的关系。第五,国家、企业和个人之间收入分配结构的变化会影响国家经济的发展,同样国家投资结构和居民投资变动也会影响国家经济的发展。总之,一国经济的发展既需要投资的作用,也需要消费的作用,因此必须协调好投资与消费的关系,实现经济的转型与持续发展。

三、经济数据的思想性解读 所谓思想性解读,指的是教师在教学时,能够引导学生从现象和原因两个层面对《经济生活》中众多经济数据进行解读,让学生接受情感熏陶和价值观教育,以达成思想政治课的情感态度价值观目标。 1.基于现象层面的思想性解读。经济数据本身较为抽象枯燥,缺乏情感,但与数据形成、变动相关的经济现象却是具体、丰富的。教学时,我们可借助这些现象进行情感性解读,让学生接受情感熏陶、培养学生积极向上的正性情感。如对教材89页中的“投资和消费对经济增长的贡献率”数据,我们在教学时可分两种情形进行:首先选择与“投资对gdp增长贡献率”的经济现象进行解读,如列举各省市县政府投巨资建设“美丽乡村”,培养学生热爱乡村的情感。其次,我们选择与“消费对gdp增长贡献率”数据相关的经济现象进行解读,如例举因书香社会建设而形成的“阅读消费”现象培养学生热爱读书的情感喜好。 2.基于原因层面的思想性解读。经济数据本身反映的是一种客观事实,显得呆板和冷漠,缺乏生动的教育性。但数据产生及变动背后的原因,却值得人深入思考。教学时借助这些数据背后的原因,我们可以让学生了解党和政府所做出的各种努力和探索,进而借此进行价值观教育,以帮助学生树立正确的价值观。如对教材89页中的“投资和消费对经济增长的贡献率”数据,我们可以对其进行补充扩展并形成下述表格,然后分两种情形进行解读。 首先选择“投资对gdp增长贡献率”数据进行原因性解读。我国2000年至2014年“投资对gdp增长贡献率”呈现由低到高、再由高到低的变动特点,主要原因有二:一是我国投资政策由偏向追求发展速度转向追求发展质量与效益,二是投资结构由偏重经济建设转向民生发展。这样的解读,不仅可使学生认识到我们党和政府立足经济发展的实际,制定和实施科学的投资政策,实现了经济的平稳运行,而且还能体会到政府在制定和实施投资政策时始终坚持“以人为本、以民为本”的出发点和落脚点,从而有利于学生树立乐于为国家、为民众奉献的正确价值观。其次选择“消费对gdp增长贡献率”数据进行原因性解析。自2010年后我国“消费对gdp增长贡献率”保持持续增长态势,其背后的重要原因是政府贯彻落实科学发展观,扩大内需、提高城乡居民生活水平,努力实现经济发展方式的转型。这样的原因解读,不仅让学生认识到政府根据经济发展的客观规律,充分发挥消费对经济的拉动作用,实现经济发展方式的转型,而且还能真正体会到政府在制定和实施消费政策时同样始终坚持提升人民生活水平、满足人民需要这一社会主义生产的本质与目的,从而有利于学生树立以人民利益为最高的价值标准和价值追求。 学会筛选、分析、解读数据,是大数据时代生存发展的必备技能。普通高中教科书中的数据,作为一种教学资源,不应该只停留于浅显的阅读文本层次上。我们需要站在培养学生适应时代发展要求的新高度来解读,将知识、能力、情感态度价值观等目标融入经济数据的教学之中,让枯燥的、抽象的,甚至是呆板的、冷漠的经济数据富有灵性,充满情感。 (责任编辑:刘丹)

第5篇:大数据时代的小数据建设

——应用改错本做个小数据

兴仁县城南街道三昧塘小学 姓名:杨栋先 电话:13984672598 联系地址:贵州省兴仁县城南街道三昧塘小学 邮编:562300

大数据时代做个小数据,《道德经》里的第六十三章有这样一句话,“天下大事必作于细,天下难事必作于易”。其意思是天下所有的大事都必须从“细”、从“小”做起,天下所有的难事都必须从从“易”、从“简”做起。对于这句话我有很深刻的体会,把它用到我的教育教学这件大事中来,应该同样可以从小事做起。

在教育教学中,大部分老师对如何轻松教会学生知识感到头疼,尤其是那些自觉性较差的学生,大脑里没有学习的概念,作业强迫做,而且有些还是为了应付差事而乱做,这是为什么呢?本人认为原因有二:一是作业量大;二是作业次数频繁。记得我孩子读小学时,有些题目做了七八遍还要做,我给孩子说会做的就不要做了,只做模糊的题目就行了,可孩子说这是老师要求做的,说是为了巩固,这都是分等惹的祸。其实学生学习知识,如果会的就永远会了,要积累的是那不懂的部分。

那么,怎样才能使学生在这激烈的社会竞争中既做得少,成绩又能脱颖而出呢?从多年来的教学经验,我找到了一条捷径——应用改错本。

2016年12月在清华大学学习期间,刘茗教授给我们讲座讲到了教师专业水平的成长时,其中一条是“不要小看改错本,必须充分利用改错本。”此时的我非常高兴,非常激动,因为我一直都在要求学生利用改错本,但是效果不是很显著。现在想来,主要原因是不会应用,我的改错本只是为了改错,为了积累,可在学生的脑海中,要把错的改正过来,应该是印象深刻了才能改正,才能真正记住。

为此,怎样才能让学生记忆深刻呢?通过最近学习了国家公务员公需科考试的大数据的应用以后,我忽然茅塞顿开,大数据的作用那么大,我们做不了大数据,但我们可以做小数据呀!正如全国十大金口才之一的周士渊老师在讲《习惯学》的其中一条就是习惯养成的三字诀——易、少、小。也就是说,我们培养学生良好的学习习惯,可以从应用改错本这个小习惯作眼。

在大数据广泛应用的时代,我深受启发,我对学生应用改错本进行初步研究,而研究的方法主要是从小数据入手。首先,一个单元结束后收集学生的错误知识点,然后对学生的错误进行分类,找出错因,挖掘错误知识之间的联系。我是语文教师,我主要研究语文,所以,学生的错误大概可以分成:字、词、句、段、章五类,要求学生准备不同的改错本,分别记下不同的错误知识。如字词类,教师先将学生错误的字词作为数据资源库,找出错因,看看学生是对哪个类型结构、或者偏旁、或者从分类的错字较多,这样可以分类统计,然后进行归纳总结,针对错误再找出行之有效的教法。例如:

一、错误的知识可以要求学生参与分析,分析的过程实际是学生再学习、再认识、再总结和再提高的过程,这样学生对字的认识理解更深刻、掌握更牢固、运用更灵活。

二、老师再要求学生把特易错的字结合课文内容变成一个个小故事,这样,呆板的字就变活了,学生肯定容易记住。然后再把单元与单元之间联系起来逐于归类处理,到最后学生对字的认识就会形成一个知识链数据库。

其他知识也可以利用类似的方法进行数据统计,必须强调的是数据不是简单的数字,而是有根据的数字,最精确的事实,是深入挖掘的语言和载体,所以教师收集的数据必须是学生真实的错误知识点,将这些知识点进行统计、分析,再找出教法,教会学生正确知识点,这样收集的数据才有用。

专家在讲大数据时谈到:数据可以说明过去,也可以驱动今天,更可以决定未来。是的,当我们在收集学生错字的资源库里找到了学生的错因,再根据错因找到了一条条的教学规律时,我们可以把每个年级的规律装订成册,作为校本教材来使用,这不就是利用国家教材开发校本教材吗?如果老师把这些规律掌握了时,应用这些规律进行教学,学生一旦都会了,还可能布置很多作业(如反复抄写生词)吗?还会把考试当作枷锁吗?

这样一来,我们今后的教学就会教得轻松,学生也会学得容易。因此,我决定在大数据时代做个小数据——对学生改错本进行数据统计再研究。

第6篇:读《大数据时代》有感:大数据与小生活

大数据与小生活

--读《大数据时代》有感

施佳驰

不知从什么时候开始,"大数据"这个词悄然成为了我们的常用词汇;我们也不知从什么时候开始,迈进了"大数据时代".那么,大数据时代究竟是一个怎样的时代?英国"大数据时代的预言家"维克托迈尔·舍恩伯格和肯尼思 库克耶的《大数据时代》对此有着详细而深刻的洞见。

一、什么是大数据?

根据《大数据时代》中所说,"大数据是人们在大规模数据的基础上可以做到的事情,而这些事情在小规模数据的基础上是无法完成的。大数据是人们获得新的认知、创造新的价值的源泉,大数据还为改变市场、组织机构以及政府与公民关系服务。"、"大数据即一种新型的能力:以一种前所未有的方式,通过对海量 数据进行分析,获得有巨大价值的产品和服务,或深刻的洞见。" 大数据有两层含义,第一层含义,大数据是一个总结性的概念,是对海量数据的总称;第二层含义即书本中所指出的,是一种新型的能力与方式。区别于小规模数据时代的抽样分析,大数据时代,分析的样本不再需要经过抽样,直接将全体数据进行更快更准确地分析。

二、大数据的核心是什么?

大数据的核心应当是减少冗余,提高资源配置效率。根据收集到的数据分析、挖掘出庞大数据库独有的价值,以便进行干预或提供相应的资源与服务。自古以来,人类社会的发展便是资源配置不断优化的过程,大数据作为一种新型的生产工具,它能让我们通过分析海量的数据,得知该如何更有效地分配稀缺的资源。

如医院通过对某个病人病史、生活习惯、衣食住行、工作娱乐情况等进行全方位分析,便可以准确了解病人的生活情况与生活环境,精确地指出症结引起原因所在,只要建议病人针对引起病源的因素做出调整或进行医学干预,便可以了,避免了对病人过多的用药与过大范围的盲目干预。

同样的道理,如果银行通过分析某一申请人的家庭情况、消费历史、生活习惯、财务习惯、网页浏览记录等各方面的数据,便可以清晰了解此申请人各方面的情况,甚至可推测其内心的真实想法与将要采取的做法,从而判断申请人的贷款申请资格,决定该不该授信,授信多少等内容,所有的信息在大数据时代,能在系统中搜索一下,几分钟便能全部收集完成。相比以前,()申请人申请后,银行得派出两名客户经理上门进行访问、调查、收集电信、征信等多方面的信息,再进行人工分析、鉴别等过程,耗费的时间多不说,风险也相对更高。

可见,大数据的运用不但提高了工作效率,节省了机构与申请人的时间,更能基于精确的信息,确保风险可控,且保证了授信给该申请人的正确性,将有限的资金用在刀刃上,提高资源配置质量。

三、什么是大数据思维?

书中指出,大数据思维是一种意识,认为公开的数据一旦处理得当就能为千百万人急需解决的问题提供答案。大数据与三个重大的思维转变有关:首先,要分析与某事物相关的所有数据,而不再依靠分析少量的样本;其次,乐于接受数据的纷繁复杂,而不再追求精确度;最后,我们的思维不再探求难以捉摸的因果关系,转而关注事物的相关关系。

大数据思维应当是一种意识,认识到大数据的无穷威力,并积极拥抱这个繁荣的时代;世界上的一切都是信息,都是可以量化分析的信息。如果将相关的信息进行交互分析,便能获得"上帝的视觉"——窥视知道分析对象的一切,包括所思所想;获得的信息可以通过类比,准确推测分析对象的想法以及未来行为;根据推测出来的内容进行干预或服务,从而获得商业机会;在一切均有记忆、一切均能收集、能更加准确预测未来的时代,我们或许受困于过去的行为;在这个时代,对隐私权、公平与正义的探讨上升至一个新的语境。

四、新的时代,我们该怎么办?

老子说,无为而治。因此,我们还是该吃饭就吃饭,该逛街就逛街,想吃甜点便吃甜点,过自己的生活,努力自己的工作。大数据是一种意识,更是一种工具,所有的工具最终都是为了让我们生活得更加方便、更加如意,而作为最高智慧生物的我们,要做的,便是习学如何通过这新的工具,改造世界,创造生活。

当然,西方也有谚语:预测未来最好的办法是创造未来。面对新的时代,我们,努力将生活过成自己想要的样子,便是最好的信条。

第7篇:大数据时代银行

近年来,大数据热潮引发了一场思维、生产和生活方式的重大变革,可以说开启了全新的时代。对于天然具有数据属性的金融业来说,一方面,大数据能够为金融机构的经营管理提供充分的信息支持;另一方面,大数据滋生的新型金融业态对传统金融机构带来了严峻挑战。在这场社会大变革中,金融机构将如何应对,非常令人期待。为此,本刊邀请了多位金融机构的高级管理者以及业内专家,共同探讨大数据时代金融业的变革与发展。

近十年来,中国银行业的改革发展取得了令世界瞩目的成就。在今年《银行家》《福布斯》发布的大企业排行榜和市值排名上,五家大型商业银行均已跻身世界前列。随着以移动互联网、云计算、“大数据”和物联网为代表的信息革命的兴起,银行业又一次面临新的机遇和挑战。中国银行业能否用好大数据,实现经营、管理和服务创新,决定了其未来的可持续发展能力。

银行业已初步具备运用大数据的基础

大数据是信息技术与互联网产业发展到特定阶段的产物,从互联网到物联网,从云计算到大数据,信息技术正在从产业基础走向产业核心。而银行业作为与信息技术深度结合的行业,互联网思维和决策数据化已开始嵌入经营管理的全流程。大数据实质是“深度学习”,能够为银行提供全方位、精确化和实时的决策信息支持。银行的经营转型、产品创新和管理升级等都需要充分用好大数据。目前,银行在客户分析、风险管理方面对大数据运用已初步积累了一定的经验,为未来过渡到全面大数据运用奠定了良好基础。

20世纪90年代,随着信息技术发展,国内银行业顺应潮流,将信息技术广泛应用到业务处理和内部管理,以提高服务管理效率。进入21世纪,大银行率先推进系统大集中和数据大集中,整合原有分散化的信息系统,不断适应加快产品创新、提升客户体验等市场需求,建立数据仓库和数据平台,信息化程度不断提高。近几年,银行业大力发展面向客户的新一代核心业务系统,信息系统建设日趋完备,电子银行等在线金融服务大幅增长,在提升客户体验和风险管控能力、满足监管各项要求的同时,形成并储存了庞大的可用数据资源。银行业的数据资源不仅包括存贷汇核心业务结构化数据,也包含客户电话语音、在线交易记录、网点视频等非结构化数据。

中国建设银行(以下简称建设银行)从2011年开始建设企业级全行共享的新一代核心业务系统,以客户为中心、面向服务设计架构,实现业务与IT融合、产品快速创新的目的,目前已初具规模。特别是在新一代系统设计中,充分考虑数据储存和应用的重要性,并专项设置了数据集成层模块,包括数据缓存区、数据记录系统、历史数据存储、分析数据仓库、实时数据仓库、公共数据集市。

银行业开始尝试接入和整合外部数据资源。在传统的数据分析模式下,银行业出于市场分析、内部管理、监管需要,产生并记录了巨量的文本式结构化数据,涉及客户账户资金往来、财务信息等,以及网银浏览、电话、视频等非结构化数据。但是,传统意义上的银行仅能掌握客户与银行业务相关的金融行为,无法获得客户在社会生活中体现兴趣爱好、生活习惯、消费倾向的情感或行为数据,无法与业务数据形成联动。随着电子商务的快速发展和移动金融的深化,银行业逐步加强与外部数据源对接,甄别有效信息,整合多渠道数据,丰富客户图谱。目前,已有多家银行进行了有益尝试。

一是银行与电商平台形成战略合作。银行业共享小微企业在电商平台上的经营数据和经营者的个人信息,由电商平台向银行推荐有贷款意向的优质企业,银行通过交易流水、买卖双方评价等信息,确定企业资信水平,给予授信额度。建设银行曾在这方面做过有益的尝试。此外也有银行参股电商、开展数据合作的案例。

二是银行自主搭建电商平台。银行自建电商平台,获得数据资源的独立话语权。在为客户提供增值服务的同时,获得客户的动态商业信息,为发展小微信贷奠定基础,是银行搭建电商平台的驱动力。2012年,建设银行率先上线“善融商务”,提供B2B和B2C客户操作模式,涵盖商品批发、商品零售、房屋交易等领域,为客户提供信息发布、交易撮合、社区服务、在线财务管理、在线客服等配套服务,提供的金融服务已从支付结算、托管、担保扩展到对商户和消费者线上融资服务的全过程。

三是银行建立第三方数据分析中介,专门挖掘金融数据。例如,有的银行将其与电商平台一对一的合作扩展为“三方合作”,在银行与电商之间,加入第三方公司来负责数据的对接,为银行及其子公司提供数据分析挖掘的增值服务。其核心是对客户的交易数据进行分析,准确预测客户短时间内的消费和交易需求,从而精准掌握客户的信贷需求和其他金融服务需求。

银行业有处理数据的经验和人才。数据分析和计量模型技术在传统数据领域已得到较充分运用,同时也培养出大批精通计量分析技术的人才。如在风险管理方面,我国金融监管部门在与国际接轨过程中,引入巴塞尔新资本协议等国际准则,为银行业提供了一套风险管理工具体系。银行在此框架下,利用历史数据测度信用、市场、操作、流动性等各类风险,内部评级相关技术工具已发挥出效果,广泛应用于贷款评估、客户准入退出、授信审批、产品定价、风险分类、经济资本管理、绩效考核等重要领域。

银行已初步尝试应用大数据。我国银行业大规模运用大数据技术尚不成熟,但多家银行已从关键点、具体业务入手应用大数据挖掘技术,解决效率提升中的难题。例如,有的银行提供集电话、网络在线、客户端、微博、微信于一体的整合服务平台,也有的银行信用卡中心开发智能云语音,着眼于客服语音信息的挖掘和分析,通过对海量语言数据的持续在线和实时处理,为服务质量改善、经营效率提升、服务模式创新提供支撑,从而全面提升运营管理水平。还有些银行在个人客户营销方面,着重客户数据分析,摸索出客户行为模式和潜在需求,促成定向精准销售。例如,通过分析客户行为数据和财务数据来锁定潜在客户,根据客户行为规律,并结合其所在区域、行为内容来确定消费习惯,开展针对性营销;通过分析交易记录信息来有效识别小微企业客户,并用远程银行和云转借实施交叉销售。此外,有的银行还将其内部客户编号和微博、QQ、邮箱等相对应,将互联网数据与传统数据一起存储,建立数据库,不仅了解客户理财、基金购买等交易行为的频繁程度,还可以发现其他动态信息如出差、喜好和社交圈等。

国际同业大数据运用的经验教训

金融业大数据运用的国际经验主要体现在快速判断宏观经济趋势、分析预测客户及交易对手行为、防范欺诈、改进内部效率以及外包非核心业务等方面。

快速判断宏观经济形势。英国央行已经开始运用大数据对英国房地产市场和劳动力市场趋势作出快速判断。以前,英国央行通过统计部门发布的房地产销售数据、就业数据等,判断房地产市场和劳动力市场变动趋势,但统计部门的数据一般有数日乃至数周的时滞,不利于对形势的快速判断。目前,英国央行已通过对一些网络搜索关键词的监控,如“按揭”“房价”“职位”等,获取最新的经济运行情况。

分析预测客户及交易对手行为。由谷歌(Google)前首席信息官Douglas Merrill创办的信用评估公司ZestFinance,通过大数据技术把收集的海量碎片化数据整合成完整的客户拼图,较为准确地还原客户的真实状况和实际信用状况,并据此支持合作公司向难以从银行获得贷款的美国人提供“工资日贷款”(payday loan)。西班牙对外银行(BBVA)推出的具有记忆功能的ATM机ABIL,不但能记住客户习惯的取款金额、频率,还能根据其账户情况给出相应的取款建议。美国一些基金公司在几年前开始借助社交媒体大数据,分析市场情绪变动,进而判断未来交易是扩大还是萎缩。近期,这些基金公司进一步通过分析金融交易大数据,识别交易对手的交易特征,预判交易对手的交易动向,并采取相应的操作,以获取差价。

防范欺诈。运用大数据分析软件,可以预防信用卡和借记卡欺诈。通过监控客户、账户和渠道等,提高银行在交易、转账和在线付款等领域防御欺诈的能力。在监控客户行为时,大数据可以识别出潜在的违规客户,提示银行工作人员对其予以重点关注,从而节省反欺诈监控资源。

改进内部效率。美国银行用大数据分析该银行某呼叫中心员工的行为,通过在员工姓名牌中置入感应器,监控员工的行走线路与交谈语气,可以知道员工在工作场所的社交状况。监控结果表明,那些一起享受工间休息并相互交流的员工工作效率更高,他们可以在日常交流中分享如何应付“难缠”顾客的小窍门。美国银行发现这一现象后,即转而推行集体工间休息,此后员工表现提升了23%,而员工说话语调所反映出的压力水平则下降了19%。另外,还有些欧美银行运用大数据评价分支机构绩效并获得显著成效。

大数据的应用存在运维风险和运营风险等,前者如数据丢失、数据泄露、数据非法篡改、数据整合过程中的信息不对称导致错误决策等,后者如企业声誉风险、数据被对手获取后的经营风险等。因此,必须加强数据管控。这方面既有成功的经验,也有值得总结的教训。从已出现的问题看,最大的风险来自网络攻击和欺诈:2011年,网络银行欺诈给日本53家银行造成2700亿日元(约合225亿元人民币)的损失;2012年,诈骗集团曾攻击欧美至少60家银行的网络,盗取银行资金;2013年,国内某保险公司受黑客攻击,造成数十万保单信息泄露。为此,一是高度重视并推进统一的数据标准,并做好数据清洗,保证数据质量。二是审慎划定数据边界,合理开展内外部数据共享和非核心数据业务外包。三是大数据下应更加重视隐私保护和信息安全,加大对反网络攻击的投入。

推动大数据应用的策略

党的十八大提出坚持走中国特色新型工业化、信息化、城镇化、农业现代化道路,信息化已升级为国家战略。我国银行业加快大数据应用不仅具有行业意义,而且对于推动我国信息化进程、服务“新四化”发展也有重要作用。我国银行业要从战略高度充分认识到大数据分析、运用的重要性,从管理体系建设、具体运用模式方面不断探索,打造银行业在大数据时代的核心竞争力。

建立完善的大数据工作管理体系。银行业应充分认识大数据的重要性,在总行层面建立大数据工作推进机制,制定大数据工作规划,主管数据部门对大数据工作进行统筹规划、组织协调、集中管理,业务部门承担大数据采集、分析和应用的职责,全面定义、收集、多方式整合集团内外部各类数据,形成管理数据、使用数据和推广数据的有效工作机制。

增强数据挖掘与分析运用能力。在银行内部全面推广基于数据进行决策、利用信息创造价值的观念,引进数据挖掘和大数据运用专业方法和工具,培养专业数据挖掘分析人才队伍,重视人才的经济金融、数学建模、计算机新型算法等复合型技能,建立前瞻性的业务分析模型,把握、预测市场和客户行为,将数据深度运用到业务经营管理过程,利用数据来指导工作,设计和制定政策、制度和措施,做到精准营销和精细管理。

以大数据技术促进智慧银行建设。推动大数据向生产力转化,加快产品创新实验室的技术研发,把实验室成熟产品运用于客户的营销和服务,推进智慧银行建设,把技术创新优势转化为竞争优势。网点服务要运用好大数据等技术成果,推广普及智能叫号预处理、远程银行VTM、电子银行服务区、智能互动桌面、人脸识别等创新服务,将传统银行服务模式和创新科技有机结合,利用智能设备、数字媒体和人机交互技术为客户带来“自助、智能、智慧”的全新感受和体验。智慧网点在建设推广中,还应充分采用用户交互技术和体验设备,吸引客户浏览、试用、比较各类金融产品,辅以工作人员推荐,从地域、客户、产品等多种维度,挖掘客户需求,实现对合适客户、在合适时间、通过合适渠道、推荐合适产品。

建立基于大数据分析的定价体系。当前,资金的交易变动频率和流动性加快,大数据从更宽广角度,预判负债的波动情况,能更灵活测算是否满足监管要求和贷款需求变化,从而为银行以存定贷、以贷吸存策略提供量化支撑,可有效降低资金成本。银行还要运用大数据分析,建立起综合服务和信贷差异化定价体系,做到对不同产品、不同行业、不同区域实施差别化定价,最终实现一户一策的综合化、差异化服务,提升精准营销水平。例如,将对公、对私客户逐步纳入定价系统,进行客户选择,不同服务内容享受不同信贷优惠,达到差别化定价和客户最佳体验的双重目的。

依托大数据技术提升风险管理水平。大数据能较好地解决传统信贷风险管理中的信息不对称难题,提升贷前风险判断和贷后风险预警能力,实现风险管理的精确化和前瞻性。大数据时代,银行业可以打破信息孤岛,全面整合客户的多渠道交易数据,以及经营者个人金融、消费、行为等信息进行授信,降低信贷风险。如建设银行依托“善融商务”开发出大数据信贷产品“善融贷”后,银行可实时监控社交网站、搜索引擎、物联网和电子商务等平台,跟踪分析客户的人际关系、情绪、兴趣爱好、购物习惯等多方面信息,对其信用等级和还款意愿变化进行预判,在第一次发生信贷业务,缺乏信贷强变量情况下,及时用教育背景、过往经历等变量进行组合分析,以建立起信贷风险预警机制。由历史数据分析转向行为分析,将对目前的风险管理模式产生巨大突破。

大数据是信息革命中非常前沿且快速发展的技术,银行业要抓紧解决内部数据挖掘分析和外部资源的安全整合利用问题,加快人才队伍建设和技术成果转化,通过大数据的高效应用,加速推进银行业的转型升级和可持续发展

第8篇:大数据时代下数据挖掘技术的应用

摘要:大数据时代是信息时代的一个重要特征,实际上,在大数据时代的背景下进行数据挖掘技术的探究与应用其实就是通过在巨大的信息群中不断挖掘出具有一定价值意义的信息进行整合,在此基础上对已整合的信息进行进一步的处理,以提高信息数据的价值。本文以此为出发点,就大数据时代下数据挖掘技术的应用进行深入探究。

关键词:大数据 数据挖掘 挖掘技术

中图分类号:tp311 文献标识码:a 文章编号:1007-9416(2016)05-0000-00

1数据挖掘与数据挖掘技术的方法分析

“数据海量、信息缺乏”是相当多企业在数据大集中之后面临的尴尬问题,由此而诞生的数据挖掘技术其实就是用以处理这一尴尬问题的技术。数据挖掘实际上是相对比较新型的一门学科,在几十年的发展过程中,已经不可同日而语。其实数据挖掘技术的本质就是人工智能技术,而数据挖掘技术的利用相对应的就是指人工智能技术的开发与应用,也就是说数据挖掘其实是依赖技术的提升来实现数据的整体创新的技术,所以,整个数据挖掘技术实际上是非常具有信息价值的,它能够帮助决策者更快的得到重要信息并作出决策,提高效率和准确率,是非常重要的知识凭证,能够在一定程度上提高当下企业的整体竞争力。

数据挖掘技术的核心就是分析,通过分析方法的不同来解决不同类别的问题,以实现数据挖掘的潜在内容。简单来说就是对症下药以保证药到病除。

1.1聚类分析法

简单来说聚类分析就是通过将数据对象进行聚类分组,然后形成板块,将毫无逻辑的数据变成了有联系性的分组数据,然后从其中获取具有一定价值的数据内容进行进一步的利用。由于这种分析方法不能够较好的就数据类别、属性进行分类,所以聚类分析法一般都运用在心理学、统计学、数据识别等方面。

1.2人工神经网络

人工神经网络是通过大批量的数据进行分析,而这种数据分析方式本身是建立在一定的数据模型基础上的,因此通常都可以随时根据数据需求进行分类,所以人工神经网络也是当下数据挖掘技术中最常用的一种数据分析方式之一。

1.3关联性分析法

有时数据本身存在一定的隐蔽性使得很难通过普通的数据分析法进行数据挖掘和利用,这就需要通过关联性分析法完成对于数据信息的关联性识别,来帮助人力完成对于数据分辨的任务,这种数据分析方法通常是带着某种目的性进行的,因此比较适用于对数据精准度相对较高的信息管理工作。

1.4特征性数据分析法

网络数据随着信息时代的到来变成了数据爆炸式,其数据资源十分广泛并且得到了一定的普及,如何就网络爆炸式数据进行关于特性的分类就成为了当下数据整理分类的主要内容。在上文中提到的人工神经网络数据分析也属于这其中的一种,此外还有很多方法都是通过计算机来进行虚拟数据的分类,寻找数据之间存在的普遍规律性完成数据的特性分析从而进行进一步分类。

2大数据时代下数据挖掘技术的具体应用

数据挖掘技术的具体流程就是先通过对于海量数据的保存,然后就已有数据中进行分析、整理、选择、转换等,数据的准备工作是数据挖掘技术的前提,也是决定数据挖掘技术效率及质量的主要因素。在完成数据准备工作后进一步对数据进行挖掘,然后对数据进行评估,最后实现运用。因此,数据挖掘能够运用到很多方面。

2.1市场营销领域

市场营销其实就是数据挖掘技术最早运用的领域,通常根据客户的具体需求,进行客户分析,将不同的消费习惯和消费特点的客户进行简单的分类管理,以此来保证商品能够顺利销售,并提高个人销售的成功率和业绩。而销售的范围也从最初的超市购物扩展到了包括保险、银行、电信等各个方面。

2.2科学研究领域

科学研究与实验测试等都需要对数据进行关系分析为进一步的实验和总结失败做准备,而实验测试和科学研究产生的数据往往是巨大的,因此数据挖掘技术在科学研究领域也得以广泛运用。通常都是通过科学研究内容选择数据挖掘技术分析法进行计算来找到数据中存在的规律,实现数据挖掘的部分价值――科学知识的分析与运用。

2.3电信业领域

随着信息化时代的到来,电信产业也飞速发展起来,到目前为止,电信产业已经形成了一个巨大的网络信息载体,如何将其中信息数据进行整合就成为电信产业发展过程中的重要问题。而数据挖掘技术的运用则在一定程度上解决了这一问题,大量的数据通过数据挖掘技术得到了有效分类,并在这个过程中通过运算得出数据之间的关联性,运用规律进一步进行数据分类。

2.4教育教学领域

教学评价、教学资源、学生个人基本信息等组成了教育教学领域的数据库,利用数据挖掘技术来实现教学资源的优化配置,对学生的个人信息整理归档,从而保证教育教学领域中数据整理的良好运作。

3结语

综上所述,数据挖掘技术对于当今社会的发展有着不可替代的作用,而如何改善当下数据挖掘技术中存在的问题,进一步提高数据挖掘技术的质量和效率就成为了数据挖掘技术进步的方向。本文通过对于数据挖掘与数据挖掘技术的方法分析和大数据时代下数据挖掘技术的具体应用两个方面对于数据挖掘技术进行了简要的阐述和分析,相信在未来伴随着科学技术的进一步发展,数据挖掘技术也将更加强大。

第9篇:大数据时代读书心得

生活,工作以及思维的大变革

——读《大数据时代》有感及所思

读了《大数据时代》后,感觉到一个大变革的时代将要来临。虽然还不怎么明了到底要彻底改变哪些思维和操作方式,但显然作者想要“终结”或颠覆一些传统上作为我们思维和生存基本理论、方法和方式。在这样的想法面前,我的思想被强烈震撼,不禁战栗起来。

本书从思维、商业、管理三个方面阐述了在大数据时代在下的变革,这些变革涉及到我们生活的方方面面,几乎其影响程度可以与两次工业革命相媲美。作者在第一部分提出了三个比较令人震惊的观点,也就是大数据的精髓在于我们分析信息时的三个转变,这三个转变将改变我们的理解和组建社会的方法。并且作者将生活,工作思维的大变革和这几个方面紧紧联系在一起。

第一个转变是,在大数据时代,我们可以分析更多的数据,有时候甚至可以处理和某个特别现象相关的所有数据,而不再依赖于随机采样。也就是说样本等于总体;第二个转变是对研究数据不会追求精度,而且追求混杂性,小数据时代下,追求精确度是合理的,因为我们收集的数据很少,所以要越精确越好,包括如今仍然也在使用这种办法;但是在某些时代,尤其是在大数据时代背景下,快速获得一个大概轮廓和发展脉络,要比精确性重要得多,既然选择了整体性,肯定要忽视细节和确定性;第三个改变是不是因果关系而是相关关系,在大数据时代,我们更需要了解一个东西是什么,而不是为什么,要找到关联无,通过一个良好的关联物的相关关系可以帮助我们捕捉预测未来。

这三个方面是大数据时代所给我们带来的思维上的改变,所谓思路决定出路,思路有了创新,有了拓展,相应的社会也就会有很大的变化。紧接着第二部分作者从万事万物数据化和数据交叉复用的巨大价值两个方面,讲述驱动大数据战车在材质和智力方面向前滚动的最根本动力。第三部分则是阐述了大数据时代下的弊端以及在管理上的措施。个人认为本书的精髓部分是第一部分,第一部分的三个观点涉及的面很广,包括统计学、逻辑学、哲学等。后两个部分都是以第一部分这三个观点为基础展开阐述的。

这本书给我感触最深的就是这三个转变,或者说是三个观点,可以说是哲学上说的世界观,因为世界观决定方法论,所以这三个观点对传统看法的颠覆,就会导致各种变革的发生。首先是第一个,作者认为在抽样研究时期,由于研究条件的欠缺,只能以少量的数据获取最大的信息,而在大数据时代,我们可以获得海量的数据,抽样自然就失去它的意义了。放弃了随机分析法这种捷径,采用所有的数据。作者用大数据与乔布斯的癌症治疗例子说明了使用全部数据而非样本的意义,列举了日本“相扑”等来证明使用全体数据的重要性。这个观点足以引起统计学乃至社会文明的变革,因为统计抽样和几何学定理、万有引力一样被看做文明得以建立牢固的基石。我对这个观点还是比较认同的,如果真能收集到整体的数据而且分析数据的工具也足够先进,自然是全体数据研究得出的结果更令人信服。但是这个观点也过于绝对,就算是在大数据时代要想收集到全体数据还是不太可能实现的,因为收集全体数据要付出的代价有时会很大。比如说,你要检测食品中致癌物质是否超标,你不可能每一件食品你都检测一遍吧。

第二,要效率不要绝对的精确。作者说,执迷于精确性是信息缺乏时代和模拟时代的产物,只有5%的数据是结构化且能适用于传统数据库的。如果不接受混乱,剩下95%的非结构化数据都无法被利用。作者是基于数据不可能百分之百正确的考虑而做出这样的判断的,如果采用小数据一个数据的错误就会导致结

1 果的误差很大,但是如果数据足够多、数据足够杂那得出的结果就越靠近正确答案。大数据时代要求我们重新审视精确性的优劣,甚至还说到大数据不仅让我们不再期待精确性,也让我们无法实现精确性。谷歌翻译的成功很好地证明了这一点,谷歌的翻译系统不像Candide那样精确地翻译每一句话,它谷歌翻译之所以优于IBM的Candide系统并不是因为它拥有更好的算法机制,和微软的班科和布里尔一样,谷歌翻译增加了各种各样的数据,并且接受了有错误的数据。

而在阅读这本书时,发现这本书中争议最大的一个观点,不仅是读者,就算是本书的译者也在序言中明确地说到他不认同“相关关系比因果关系更重要”的观点。作者觉得相关关系对于预测一些事情已经足够了,不用花大力气去研究他们的因果关系。作者用林登的亚马逊推荐系统的成功,证实了大数据在分析相关性方面的优势以及在销售中获得的成功。沃尔玛也是充分利用并挖掘各类数据信息的代表,从啤酒和尿布的案例,以及作者举的有关蛋挞和飓风天气的案例,都说明了掌握了相关关系对于他们策略的帮助。一句话,知道是什么就够了,不用知道为什么。很明显作者所举的例子都是属于商业领域的,但是对于其他领域来说这个观点就值得商榷了。比如说,在科学研究领域,你需要知其然也需要知道其所以然,找到事件发生的原理。用文中的一个例子说明,乔布斯测出整个基因图谱来治疗癌症,但是你治疗癌症你必须知道癌症发病的原理,知道哪一段基因导致了这种疾病,不可能只是说收集各种数据,然后利用其相关性来判断哪里出现了问题。

过度依赖所带来的后果。也用《少数派的报告》这部电影来说明如果痴迷于数据会导致我们将生活在一个没有独立选择和自由意志的社会,如果一切变为现实,我们将被禁锢在大数据的可能性之中。所以书中提出了几种解决方法,一种是使用数据时征询数据所有个人的知晓和授权。第二个技术途径就是匿名化。毫无疑问,大数据将会给社会管理带来巨大的变革。

在这个信息爆炸的时代,大数据给人类社会的方方面面带来了巨大的变革,这是社会发展的潮流,不可逆转,我们只有顺应这种潮流,把握住大数据时代变革的思想,才能在时代潮流中成为佼佼者,在思维上思路上略高一筹,才能在行动中占得先机!

2

上一篇:党风廉政建设工作会议下一篇:汽车行业部门职责