太原兄弟连IT教育
强力师资,带你轻松玩转大数据
快速咨询兄弟连大数据全栈课程 让你破茧成蝶
数据量大 数据种类多 要求实时性强 主导气质无法掩盖
同时推动大数据Hadoop
引领大数据行业风潮
网站后台维护
大型项目必选开发语言
大数据处理
服务器开发
金融机构大数据应用
智能家居家电
银行管理系统
通用技术综合案例
搜狗搜索日志分析系统
新浪微博数据分析系统
网络流量流向统计项目
网上商城数据统计分析平台
覆盖大数据行业主流技术岗位,课程半年升级一次,紧跟市场与企业步伐
1.JavaSE;2.MySQL;3.JDBC;4.Linux;5.shell;6.HTML;7.CSS;8.JavaScript;9.JSP;10.Servlet
1.大数据概论;2.Hadoop框架;3.HDFS分布式文件系统;4.MapReduce计算模型;5.全真实训项目
1.Hive数据仓库;2.Sqoop ETL工具;3.Azkaban工作流引擎;4.Ooize;5.Impala;6.全真实训项目
Zookeeper分布式协调系统、HBase分布式数据库、Redis数据库、Storm实时数据处理平台
Scala、Spark、RDD、Streaming、 Mahout、MLlib、GraphX、ElasticSearch、Lucene
从搜狗产生的日志数据中能提取到有用的数据,分析每个用户行为,从而做出有利的决定。
在hadoop集群上,处理微博产生的数据得到所需的数据,对数据进行处理,挖掘用户的潜在价值
采集现网流量流向信息,根据这些原始信息检测账号是否存在异常,超过一定阈值则触发报警机制。
基于京东商城数据统计分析平台,进行离线计算和实时计算业务模块的开发,实现3个业务模块。
凝聚11年研发成果 浓缩成5个月实战课程 助力职场"薪"生涯
★ 来自主流高校和一线企业的骨灰级大咖授课。
★ 根据企业需求设计课程,并且定期更新,引入最新技术。
★ 配备业内先进开发服务器,可实时感受分布式开发和云计算等。
★ 16小时老师全程陪伴,不怕学不会。
★ 线上线下结合,可以无缝衔接。
★ 学员管理以人为本,不忘初心,致力培养眼界高、技术牛、做人好的职场员工。
课程与脱产班相同
面向零基础
的大数据小白
面向应有一定基础
他们将十余年实战经验倾囊相授,他们在兄弟连为你的职业发展保驾护航
毕业于北京大学,12年以上JAVA企业项目架构和开发经验。曾在二炮科技处、UPS科技、日本UCI科技等多家知名企业担任过项目经理和研发总监。
精通Java、C、C 等主流开发语言,5年以上开发经验,非常丰富的IT从业经验和教育心得,兄弟连金牌大数据讲师,曾担任达内课程总监级讲师。
原普开数据大数据架构师兼教学总监,新奥集团公司云数据平台项目首席架构师,京东万象大数据平台缔造人之一,二六三网络通信反垃圾邮件系统平台项目经理
学位:北航软件工程硕士
教学经验:16年软件架构开发经验
过往任职经历:
曾就职于东软、DNS等知名企业,新东方、达内前教学总监
特长:
精通JAVAEE/JAVA框架/oracle数据库,大数据大咖,知名企业培训大咖。
“我们不仅仅是老师,我们是学员的梦想守护者与职场引路人。”
兄弟连教育成立于2006年,现已是第13个年头,一直以来专注于IT技术培训,是国内专业的PHP/ LAMP技术专业培训学校。现已开设PHP、UI/UE、HTML5、Java/大数据、Linux/云计算、Python等众多学科,累计培养数万名学员。兄弟连已分别在北京、上海、广州、成都、杭州、南京、南宁、深圳、天津等地设立校区,每年有多名IT爱好者及从业人员受益于兄弟连的职业培训。
兄弟连,这条路虽历尽艰辛,但我们痴心不改。
一、逻辑思维能力强:如果你认为自己的逻辑思维能力很强,想通过学一门技术来获得高薪能力,那你不妨一试,很可能,这就是适合你的高薪之门。 二、数.....
根据2016年中国大数据产业峰会发布的数据,2015年我国大数据市场规模1692亿元,同比增长63.07%,处于快速发展期,预计2020年市场规模将达到1.....
目前各处都在讨论大数据前景如何好,大数据就业机会如何多,很多人都对大数据这个行业充满了向往。但是可能大多数人都不清楚大数据学出来后究竟能做什么?大数据行业.....
1、学科知识:从数据分析涉及到的专业知识点上看,主要是这些: (1)统计学:参数检验、非参检验、回归分析等 (2)数学:线性代数、.....
听说过“睡梦罗汉拳”么?
电影《武状元苏乞儿》中,周星驰在梦中得到老乞丐心法传授,学会了睡梦罗汉拳。
只是睡了一觉,醒来就武功天下第一。
边睡边学习,可能不少同学都YY过……真正做到能有几人?
没想到,现在AI已经学会了。
刚刚,两位人工智能界的大牛:Google Brain团队的David Ha(从高盛董事总经理任上转投AI研究),瑞士AI实验室的Jürgen Schmidhuber(被誉为LSTM之父),共同发布了最新的研究成果:World Models(世界模型)。
简而言之,他们教会了AI在梦里“修炼”。
AI智能体不仅仅能在它自己幻想出来的梦境中学习,还能把学到的技能用到实际应用中。
一众人工智能界同仁纷纷发来贺电。
还有人说他们俩搞的是现实版《盗梦空间》,并且P了一张电影海报图:把Ha和Schmidhuber头像换了上去……
这种神奇能力是怎么回事?
量子位结合两位大牛的论文,尝试解释一下。
在梦里开车
在梦境中学,在现实中用,可以说是高阶技能了,我们先看一个比较基础的:
在现实里学,到梦境中用。
David Ha和Schmidhuber让一个AI在真正的模拟环境中学会了开车,然后,把它放到了“梦境”里,我们来看看这个学习过程:
先在真实的模拟环境中学开车:
当然,上图是人类视角。在这个学习过程中,AI所看到的世界是这样的:
把训练好的AI智能体放到AI的梦境中,它还是一样在开车:
这个梦境是怎么来的?要讲清楚这个问题,量子位还得先简单介绍一下这项研究的方法。他们所构建的智能体分为三部分,观察周围世界的视觉模型、预测未来状态的记忆模型和负责行动的控制器。
负责做梦的主要力量,就是其中的记忆模型。他们所用的记忆模型是MDN-RNN,正这个神经网络,让Google Brain的SketchRNN,能预测出你还没画完的简笔画究竟是一只猫还是一朵花。
在开车过程中,记忆模型负责“幻想”出自己在开车的场景,根据当前状态生成出下一时间的概率分布,也就是环境的下一个状态,视觉模型负责将这个状态解码成图像。他们结合在一起生成的,就是我们开头所说的“世界模型”。
然后,模型中的控制器就可以在记忆模型生成出来的虚假环境中开车了。
在梦里学打Doom
做梦开车很简单,但两位大牛的研究显然不止于此。既然AI幻想出来的环境很接近真实,那理论上讲,他们这项研究的终极目的也是可以实现的:让AI做着梦学技能,再用到现实中。
这一次,他们用了VizDoom,一个专门供AI练习打Doom的平台。
“做梦”的主力,又是我们前面提到过的记忆模型。和赛车稍有不同的是,它现在不仅需要预测环境的下一状态,为了让这个虚拟环境尽量真实,同时还要预测AI智能体的下一状态是死是活。
这样,强化学习训练所需的信息就齐全了,梦境中的训练,GO!
梦境重现了真实环境中的必要元素,和真正的VizDoom有着一样的游戏逻辑、物理规则和(比较模糊的)3D图形,也和真实环境一样有会扔火球的怪物,AI智能体要学着躲避这些火球。
更cool的是,这个梦境可以增加一些不确定因素,比如说让火球飞得更没有规律。这样,梦中游戏就比真实环境更难。
在梦境中训练之后,AI就可以去真正的VizDoom中一试身手了:
AI在VizDoom中的表现相当不错,在连续100次测试中跑过了1100帧,比150帧的基准得分高出不少。
怎么做到的?
他们所用的方法,简单来说就是RNN和控制器的结合。
这项研究把智能体分为两类模型:大型的世界模型和小型的控制器模型,用这种方式来训练一个大型神经网络来解决强化学习问题。
具体来说,他们先训练一个大型的神经网络用无监督方式来学习智能体所在世界的模型,然后训练一个小型控制器使用这个世界模型来学习如何解决任务。
这样,控制器的训练算法只需要在很小的搜索空间中专注于信任度分配问题,而大型的世界模型又保障了整个智能体的能力和表达性。
这里的世界模型包括两部分,一个视觉模型(V),用来将观察到的高维信息编码成低维隐藏向量;一个是记忆RNN(M),用来借历史编码预测未来状态。控制器(C)借助V和M的表征来选择好的行动。
在我们上面讲到的开车、打Doom实验中,视觉模型V用了一个VAE,变分自编码器;记忆模型M用的是MDN-RNN,和谷歌大脑让你画简笔画的SketchRNN一样;控制器C是一个简单的单层线性模型。
把这三个模型组装在一起,就形成了这项研究中智能体从感知到决策的整个流程:
视觉模型V负责处理每个时间步上对环境的原始观察信息,然后将这些信息编码成隐藏向量zt,和记忆模型M在同一时间步上的隐藏状态ht串联起来,输入到控制器C,然后C输出行为向量at。
然后,M根据当前的zt和at,来更新自己的隐藏状态,生成下一步的ht+1。
这有什么用?
让AI会“做梦”,还能在“梦境”中学习,其实有很多实际用途。
比如说在教AI打游戏的时候,如果直接在实际环境里训练,就要浪费很多计算资源来处理每一帧图像中的游戏状态,或者计算那些和游戏并没有太大关系的物理规则。用这个“做梦”的方式,就可以在AI自己抽象并预测出来的环境中,不消耗那么多计算资源,一遍又一遍地训练它。
在这项研究中,他们还借助了神经科学的成果,主要感知神经元最初出于抑制状态,在接收到奖励之后才会释放,也就是说神经网络主要学习的是任务相关的特征。
将来,他们还打算给VAE加上非监督分割层,来提取更有用、可解释性更好的特征表示。
公司成立于2007年,总部设在北京,目前已在北京、上海、广州、深圳、南京、沈阳、杭州、成都、郑州、苏州、西安、石家庄等城市设立了教学中心,业务范围覆盖全国。
兄弟连以“让学员技术靠谱、做人更靠谱”为使命,传承极致的工匠精神,拥有来自北大、清华和BAT等知名校企的专兼职教师数百名。超前的产品研发、线上线下相结合的科学教学模式和严格的教务管理体系共同确保了教学质量,使数十万名学员、从业人员和IT爱好者受惠,为华为、阿里巴巴、腾讯、百度、联想、京东等国内7000多家企业输送数万名软件开发和网络营销人才。
2018年与中国人保共同推出“教育培训险”,兄弟连全日制学员参保并完成学习后,如果未能如约实现就业并满足理赔条件的,即可申请理赔。