2022年3月14日
Spark 已经成为广告、报表以及推荐系统等大数据计算场景中首选系统,因效率高,易用以及通用性越来越得到大家的青睐,我自己最近半年在接触 spark 以及 spark streaming 之后,对 spark 技术的使用有一些自己的经验积累以及心得体会,在此分享给大家。本文依次从 spark 生态,原理,基本概念,spark streaming 原理及实践,还有 spark 调优以及环……
阅读全文
2022年3月14日
分享嘉宾:曲瑶 58同城 架构师 编辑整理:张磊 出品平台:DataFunTalk、AI启蒙者 导读: 随着大数据的快速发展,大数据应用已经融入各行各业。在很多场景中得到了商业化实践。今天和大家分享下58同城联盟广告平台架构及实践。主要包括:58联盟广告SSP媒体平台、投放平台、程序化创意等……
阅读全文
2022年3月14日
前言 最近,被推送了不少秒杀架构的文章,忙里偷闲自己也总结了一下互联网平台秒杀架构设计,当然也借鉴了不少同学的思路。俗话说,脱离案例讲架构都是耍流氓,最终使用SpringBoot模拟实现了部分秒杀场景,同时跟大家分享交流一下。 秒杀场景 秒杀场景无非就是多个用户在同时抢购一件或者多件商……
阅读全文
2022年3月14日
严选技术团队 导读:数据仓库,是我们数据工程师的无形产品,不同于可视化、交互型产品的评价体系,数据仓库的评价有其独特性。本文从概念-平台-规范的链路来介绍一下严选数据仓库,并介绍了严选数据仓库的评价体系。 数据为王的时代,数据量从最初的几十G,慢慢沉淀到几十T,甚至几十PB的量。数据……
阅读全文
2022年3月14日
图 片:视觉中国 来 源:正和岛(ID:zhenghedao) 一个公司想要平稳发展,必须要保证团队的凝聚力、战斗力!但是团队是由形形色色、能力各异的人组成。 人过一百,形形色色;人过一千,必有坏蛋。在团队里也是一样,总有那么几个“坏蛋”。所以这几类员工必须从团队里清理走,一个都不能留,否……
阅读全文
2022年3月14日
作者:Pratik Bhavsar 编译:ronghuaiyang 导读: 在NLP的面试中提问频率非常高的问题。 练习 NLP 是一回事,破解面试是另一回事。对 NLP 人员的面试与一般的数据科学非常不同。在短短几年内,由于迁移学习和新的语言模型,这些问题已经完全改变了。我个人经历过,随着时间的推移,NLP 面试变得……
阅读全文
2022年3月14日
大数据文摘出品 作者:陆奇 编辑:周素云 2019年5月18日,在YC中国举办的YC中国创业者见面会上,YC中国创始人及首席执行官,YC全球研究院院长陆奇进行了以“技术驱动创新带来的创业机遇”为主题的精彩分享。 陆奇曾任百度集团总裁兼首席运营官、微软全球执行副总裁、雅虎执行总裁,并获得卡……
阅读全文
2022年3月14日
严选技术团队 向量化在业界的运用越来越广,近期也有许多文章分享过相关的主题。严选于 18 年下半年开始探索向量化在搜索推荐场景中的运用,从最开始基于商品召回用户的任务到后续的搜索召回、搜索个性化排序、搜索底纹、搜索发现词、搜索建议词、跨类目推荐、推荐召回、多兴趣召回、通用排序、端智能重排……
阅读全文
2022年3月14日
杨林 郭同 海超等 美团技术团队 导读: 菜品是外卖交易过程的核心要素,对菜品的理解也是实现外卖供需匹配的重点。今天我们将一次推送三篇文章,系统地介绍了美团外卖美食知识图谱的构建和应用。《美团外卖美食知识图谱的迭代及应用》会介绍外卖知识图谱的体系全貌,包括菜品类目、标准菜品、美食基础属性和……
阅读全文
2022年3月14日
阅读原文 深入理解推荐系统:召回 深入理解 YouTube 推荐系统算法 深入理解推荐系统:排序 写在前面 作为【推荐系统】系列文章的第二篇,将以“召回”作为今天的主角,会从四个方面来介绍召回的不同算法方式,即基于内容的召回、协同过滤、基于 FM 模型召回和基于深度学习的方法。 一、背景介绍 召回是推荐系统的第一阶……
阅读全文