课程目标

本课程是大数据技术在行业应用的案例剖析。通过本课程的学习,可以很好的了解大数据的实际应用场景和解决方案。

适用人群

大数据在行业中的应用,需要具备一定的大数据基础,或在自己的行业中有了解过大数据相关技术,需要具备一定的数据分析基础。

课程概述

本课程挑选了大数据在部分行业中的应用,结合我们身边的例子,从人力资源、、滴滴出行、架构、工业等方面案例都进行了相关的剖析,对后续大家在相关行业大数据应用起到了很好的借鉴作用。

一、工业大数据技术与实践

主题介绍:介绍工业大数据的背景、概念、关键技术挑战,以及“面向高端制造的大数据管理系统”国家重点研发计划团队在工业大数据关键技术上取得的初步进展,最后将介绍一些典型的工业大数据应用案例。

讲师介绍:王晨 清华大学 软件学院大数据中心总工程师

现担任清华大学工业大数据中心、软件学院大数据中心总工程师,北京工业大数据创新中心副主任。加入清华大学前担任IBM中国研究院主任研究员,数据管理技术研究部高级经理,IBM全球分析云研究战略负责人。他是中国计算机学会数据库专家委员会委员。

二、滴滴大数据应用

主题介绍:介绍滴滴的机器学习应用、包括体验建模、价格建模、司乘供需预测等项目的应用。主要是机器学习和具体应用结合的建模方法论,以及滴滴的机器学习应用发展进程、现有的成果、以及未来还要做那些事。

讲师介绍:韩冰 滴滴 研究院技术研究员

现任滴滴研究院技术研究员,负责滴滴定价和生态技术。曾在百度凤巢任职8年,任职期间作为算法架构师参与凤巢核心算法的开发和优化,有丰富的机器学习领域建模经验,曾获得最有价值百度人。

三、小数据到大数据之路

主题介绍:1.小数据到大数据(介绍本来生活数据仓库的演变:SQL Server到Hadoop生态): a)用SQL Server做数据仓库的优势。 b)什么样的问题导致了我们要狠下决心走向hadoop。主要会涉及SQL Server数据仓库实战技术,Hadoop实战技术。 2.大数据在CRM中的应用: a)介绍会员流失预测在精细化营销上的应用。 b)会员聚类分析的应用。主要会涉及预测算法从训练到应用的过程、聚类分析的关键要点。 3.大数据在竟品分析上的应用: a)如何通过挖掘商品评论数据来获知销量、销售额、以及用户满意度。 b)如何通过大数据探知竟争对手的运营策略。主要涉及Python 爬虫技术介绍、Python和大数据应用相结合的要点。

讲师介绍:范学蠡 本来生活网 BI总监

2014年加入本来生活网,现任本来生活网BI总监,组建了BI团队,建立了基于SQL Server的数据仓库和数据分析体系,现今又从SQL Server转向Hadoop体系,并在这基础上建立了分析型CRM、用户行为数据分析平台等BI应用。喜欢关注电商行业、大数据应用等。

四、基于大数据的查询意图识别及应用

主题介绍:当前的搜索广告主要基于关键字匹配的搜索模式。由于用户输入的查询往往较短,具有特征稀疏与表意不明确等特征,基于关键字匹配的搜索模式主要关注于字面匹配的广告,而忽略了对用户真实搜索意图的识别。在各类实际搜索应用中,查询意图识别一直是一个极为核心的研究问题。为了解决上百万细粒度的查询意图的挖掘与识别问题,搜狗搜索广告团队提出了一系列算法并将其实现于一个实际的线上系统——“星辰系统”中。该系统具有非常高的意图推断准确性与较高的覆盖率。

讲师介绍:叶祺 搜狗搜索广告研发部高级研究员

2011年博士研究生毕业于北京邮电大学计算机系,毕业后即加盟搜狗广告研发团队。在搜狗从事搜索广告相关策略研究多年,目前在搜狗负责搜索广告的召回与相关性研究的工作与主要策略技术支持。 对于搜索引擎广告中涉及的相关核心技术有较深的理解。在自然语言处理以及大规模数据挖掘的算法设计和实现方面,尤其是在实际系统的工程实践中算法的应用上有较丰富的经验。

五、人才大数据驱动的人力资源革新

主题介绍:“21世纪什么最贵?人才!”这句经典的电影台词道出了人才的重要性。随着互联网和移动APP的兴起,大部分企业和求职者的招聘求职过程都已经从线下转为线上。线上化的招聘活动不断产生海量的人才数据,例如简历、职位描述和求职招聘行为记录。以猎聘为例,每天我们可以收集到上亿条各种各样的数据。这构成了我们人才大数据的基础。有了这些数据之后,我们能够做哪些有价值的事情?我们将从大数据应用的角度出发,介绍猎聘如何运用机器学习和数据分析的方法进行职位推荐、人才推荐、职场社交推荐和行业人才趋势分析。同时,也将讨论人才大数据应用和研究的广阔未来发展空间和面临的种种挑战。

讲师介绍:单艺 猎聘网首席数据官

负责机器学习技术和产品研发、商业数据分析以及大数据基础设施建设。他的主要兴趣在于数据挖掘和分析。他具有15年的数据挖掘和系统研发经验。之前,他担任Omni-Dimension Inc(毕肯互动)和WPP Group/奥美ITOP 24/7 Networks的CTO职务,负责数据驱动的互联网广告优化技术和精准广告网络的研发;还曾经担任空中网悟空搜索副总裁和美国Yahoo!网页搜索资深工程师,从事大规模搜索技术和文本挖掘技术的研发。单艺毕业于清华大学和美国University of Arizona,获得了管理信息系统专业的学士和硕士学位。

六、腾讯大数据实时体系的架构和应用

主题介绍:介绍腾讯实时数据平台(TRC)实时接入,计算,存储的平台体系架构,如何利用可视化的IDE提升业务开发的效率,以及基于实时计算体系下的业务应用,例如:实时广告推荐,用户画像,监控等等

讲师介绍:张文郁 腾讯数据平台部 高级工程师

2010年加入腾讯负责分布式计算平台,集群调度的开发设计,现任数据平台部实时计算中心业务开发组组长,负责实时计算体系的建设 和业务推广,对分布式计算,流计算有丰富的应用开发经验。

七、宜信大数据金额欧诺个云平台实践

主题介绍:2014年全球最大的P2P公司,宜信提出建设开放的金融云生态系统。基于宜信9年来对普惠金融和财富管理的深刻理解,并借助大数据和云计算能力,提高金融数据的开放性和流动性,为客户提供个性化的金融服务,同时也使生态系统中的合作伙伴共享互联网金融带来的红利。这次分享会主要介绍宜信大数据金融云平台的第一个实践 -商通贷,作为一款低门槛,纯线上的电商贷款产品,推出以来受到了客户和合作伙伴的高度评价。这款产品中,我们借助大数据进行精准获客,借助创新的技术手段进行征信,借助大数据搜索引擎进行风控和反欺诈,借助我们的实时授信平台进行实时授信,并利用大数据进行贷后监管等,集中展示了宜信大数据金融云平台的能力和一些核心技术。

讲师介绍:郑华 宜信大数据创新中心研发总监

2007年毕业于清华大学电子工程系,获得学士,硕士学位。毕业后加入美国著名视频平台Hulu工作,是Hulu最早的员工之一。离开Hulu之前是Hulu算法和数据平台团队的负责人,带领团队从头搭建并全面负责Hulu的视频推荐系统,广告精准投放平台,用户智能平台,以及大数据处理平台等。2013年加入宜信大数据创新中心任研发总监,目前负责大数据处理平台,大数据风控搜索引擎,大数据实时授信平台以及商通贷业务等。

课程目录

1 第1章:工业大数据技术与实践
2 第2章:滴滴大数据应用
3 第3章:小数据到大数据之路
4 第4章:基于大数据的查询意图识别及应用
5 第5章:人才大数据驱动的人力资源革新
6 第6章:腾讯大数据实时体系的架构和应用
7 第7章:宜信大数据金额欧诺个云平台实践

课程评价

课程讲师

DTCC大会
  • 课程数
    59
  • 学生数
    7889
中国数据库技术大会(简称DTCC)是国内数据库及大数据领域专业的技术交流盛会。DTCC每年邀请百余位行业专家,就热点技术话题进行分享,为数据库人群、大数据从业人员、广大互联网人士及行业相关人士提供最具价值的交流平台。

最近学习用户 158人报名试学

  • 李惠2019

  • konggulanwu

  • 海纳百川666