微信复杂网络的挖掘及应用
微信是一种生活方式。海量的用户,每一个用户看作一个点,点与点之间由好友关系形成边,边与边的连接组成网络,庞大而复杂的网络是社交数据里的核心。如何挖掘微信复杂网络,并且应用到微信业务上去?在QCon北京2016上,微信技术架构部数据中心高级工程师凌国惠,为大家揭开了社交大数据的神秘面纱。
https://v.qq.com/txp/iframe/player.html?vid=a0311rje60r&width=500&height=375&auto=0
凌国惠,微信技术架构部数据中心高级工程师。2005 年中山大学毕业加入腾讯,从事后台与数据方面工作,目前专注在微信大数据挖掘与应用。一开始就接触海量数据,经历过腾讯数据的快速增长的烦恼,在大数据的挑战中不断成长。主导建设微信数据体系,尤其是微信数据金字塔,提供稳定、准确、易用的分层数据,成为微信离线分析与挖掘的基础;挖掘数据,建立各种模型,输出精准的微信用户画像,广泛应用于微信广告、征信、搜索、公众号等业务;研究复杂网络并应用,发挥社交数据的威力;喜欢算法,常以算法与大数据结合,对业务产生大价值为喜。
在公众号后台回复“微信”,即可下载幻灯片。
QCon 上海 2016 将于10月20~22日在上海宝华万豪酒店举行。
百度外卖高级研究员蒋凡,届时将分享《外卖物流配送的大数据创新实践》。
餐饮 O2O 行业连接线上线下的订餐需求,外卖平台在这里扮演的角色除了促进线上需求向线下转化,也包括达成订单的最后一公里任务——物流配送。高效的物流配送能力是决定外卖平台商业模式成败的关键,也是 O2O 经济区别于传统经济的根本,即运用大数据相关的云计算、深度学习和可视化技术提升行业效率,创造并满足新的民生需求。
本次分享将深入介绍百度外卖物流调度系统应用大数据技术,摸索业务规律的过程和创新实践经验。
携程基础大数据产品团队总监于磊,将分享《携程的推荐及智能化算法及架构体系实践》。
区别于一般电商公司,OTA(Online Travel Agent)公司的业务线繁多,各业务线的线上流程、商品数据、用户行为、用户需求和订单逻辑差异性极大,不同业务线,近似于完全不同的行业。但是同一般大型电商公司一样,OTA 的大数据营销平台也同时面对着公司跨繁多业务线的个性化推荐、进阶销售(up-selling)和交叉销售(cross-selling)的业务诉求。本次分享将介绍携程通用实时个性化推荐架构和算法体系设计方面的最新进展。
360 高级工程师 & 资深顾问魏自立,将分享《如何打造一个百万亿级的日志搜索引擎:Poseidon》。
Poseidon 系统是一个日志搜索平台,可以在百万亿条、100PB 大小的日志数据中快速分析和检索。360 公司是一个安全公司,在追踪 APT(高级持续威胁)事件,经常需要在海量的历史日志数据中检索某些信息,例如某个恶意样本在某个时间段内的活动情况。在 Poseidon 系统出现之前,都是写 Map/Reduce 计算任务在 hadoop 集群中做计算,一次任务所需的计算时间从数小时到数天不等,大大制约了 APT 事件的追踪效率。Poseidon 系统就是解决这个需求,能在数百万亿条规模的数据集中找出我们需要的数据,只需要花费几秒钟时间,大大提高工作效率;同时,数据不需要额外存储,节省了大量存储和计算资源。该系统可以应用于任何海量(从万亿到千万亿规模)的查询检索需求。
Twitter 架构师黄浩,Spotify 架构师 Iogr Maravić,南潮(ruff.io)架构师周爱民,宅米 CTO 李智慧,京东云平台资深架构师鲍永成,OneAPM 安全技术总监刘再耀,点融网 CTO 孔令欣,饿了么前端工程师陈涌(题叶)等技术专家都将在 QCon 上海 2016 做分享,更多信息,可点击“阅读原文”,访问大会网站。现在报名,可享 8 折优惠。