2022年3月15日
Apache Flink 是大数据领域非常流行的流批统一的计算引擎,数据湖是顺应云时代发展潮流的新型技术架构。那么当 Apache Flink 遇见数据湖时,会碰撞出什么样的火花呢?本次分享主要包括以下核心内容: 数据湖的相关背景介绍; 经典业务场景介绍; 为什么选择 Apache Iceberg; 如何通过 Flink+Iceberg 实现流式入湖 社区未来规划工作。 视频回……
阅读全文
2022年3月15日
欢迎关注本人公众号" 蘑菇先生学习记 “,会定期分享算法最新进展以及工作实践感悟。 上一篇分享了 KDD'21 | 淘宝搜索中语义向量检索技术,今天分享Facebook在KDD'21上发表的又一篇EBR文章: Que2Search: Fast and Accurate Query and Document Understanding for Search at Facebook 。两篇文章的风格差异巨大。Facebook延续了……
阅读全文
2022年3月15日
分享嘉宾:钟云云 58同城 数据架构师 编辑整理:李凯凯 出品平台:DataFunTalk、AI启蒙者 导读: 早在多年以前在Hadoop系列分布式计算与存储、消息中间件还没有成熟的时候,数据仓库主要基于Oracle的数仓建设。但随着时间的推移,传统数据仓库的数据计算与存储,已经无法很好地支……
阅读全文
2022年3月15日
原文地址: https://www.amazingkoala.com.cn/Lucene/gongjulei/2018/1209/24.html IntBlockPool 类 在索引阶段,使用 IntBlockPool 来存储 term(域值)的信息,在 MemoryIndex 中,使用此类对 term 在文档中的位置、payload 数据进行存储,它即 MemoryIndex 中的倒排表,它的数据就是用这个类的对象存储的。在介绍 IntBlockPool 类时,我们根据这个类在 MemoryIndex 中实际使用过程来讲解。 如何介绍 IntBlockPool 类 首先会贴出这个类中几个重要的方法,……
阅读全文
2022年3月15日
CS 的陋室 纠错是搜索引擎中一个非常有特色的模块,对用户输入的内容进行改写从而让用户得到正确的结果,有的时候也会带有一些惊喜度,所以纠错技术是一个搜索体验的加分项,近期突然对这块有兴趣,所以就了解了一下。 (学习周报本周停,学习内容都在这了) 纠错技术的背景 人非圣贤,孰能无过,别说是搜索……
阅读全文
2022年3月15日
在文章 索引文件的生成(三) 中我们介绍了在 Lucene 中生成跳表 SkipList 的流程,通过流程图的方法介绍了源码中的实现方式,而对于读取 SkipList 的内容,决定直接以例子的方式来介绍其读取过程,下文中出现的名词如果没有作出介绍,请先阅读文章 索引文件的生成(三)。 例子 直接给出一个生成后的跳表: 图 1: 在图 1 中,为了便……
阅读全文
2022年3月15日
作者 | 嵩华 阿里云云栖号 聚合模式是 DDD 的模式结构中较为难于理解的一个,也是 DDD 学习曲线中的一个关键障碍。合理地设计聚合,能清晰地表述业务一致性,也更容易带来清晰的实现,设计不合理的聚合,甚至在设计中没有聚合的概念,则相反。 聚合的概念并不复杂。本文希望能回到聚合的本质,对聚合的定义和实操……
阅读全文
2022年3月15日
前几日,罗永浩被限制消费令,再次引起了广泛的关注。而罗永浩则在微博上回应称,限制消费令已经取消,将努力工作尽快还债。 罗永浩自从锤子手机失败以来,就深陷债务危机。在今年罗永浩表示将利用自己强大的口才和粉丝团进军直播带货,进而想方设法的进行还债。 在 4 月 1 日愚人节当晚,罗永浩开启直播带……
阅读全文
2022年3月15日
背景 随着苏宁易购平台规模的飞速发展,平台的订单量呈现指数级的增长,存储容量已达 TB 级,订单量更是到了万亿级别,尤其在双 11 大促流量洪峰的场景下,面临两个挑战: 1、如何存储如此巨大的数据量 2、如何提供高并发、低延迟、多维度的检索服务 传统关系型数据库无法支撑多维度的模糊检索,为此,我们选……
阅读全文
2022年3月15日
来源:李翔 陈焕 志华等 美团技术团队 剧本杀作为爆发式增长的新兴业务,在商家上单、用户选购、供需匹配等方面存在不足,供给标准化能为用户、商家、平台三方创造价值,助力业务增长。 本文介绍了美团到店综合业务数据团队从0到1快速建设剧本杀供给标准化的过程及算法方案。我们将美团到店综合知识图谱(……
阅读全文