1.OneSearch: A Preliminary Exploration of the Unified End-to-End Generative Framework for E-commerce Search场景电商搜索核心创新点把RQ-Kmeans和OPQ结合起来23前者离散化层次的共性信息后者离散化独特的信息在这个场景上RQ-Kmeans比RQ-VAE效果好设计引入行为信息的微调任务优化embedding模型用margin不同行为用margin loss用llm打分然后用bge这个表征模型来对齐这个相关分数核心实体增强用NER识别实体并且用页面浏览量来排用qwen-vl识别相应的item的实体在推理时用这个方法来快速匹配query的实体Aho-CorasickAutomaton这些实体的候选已经预先用表征模型产生了embedding最后query和item的embedding是实体和原始的embedding的加权和user id从随机产生改为采用近期和历史item id的加权和的两个结果模型结构BART-B2.OneSug: The Unified End-to-End Generative Framework for E-commerce QuerySuggestion快手电商query补全对于prefix的输入产生其sid时要用一些强相关的query的表征来做语义补齐这个强相关通过聚类搜索来完成对prefix的embedding用强相关的query做池化之后加权和把dpo损失加了一个margin同时在正样本上加了一个sft的loss以防止模型丢失生成的能力把所有的负样本都和正样本来做dpo的损失以引入一些排序的能力3.OneRec模型结构Encoder-decoderdecoder的FFN换成MOERL在sft过程中按照一定概率采取dpo其中奖励模型用各个行为塔产生数据进行训练然后用这个训练出来的奖励模型区分正负样本对会话级别生成与逐点生成模型不同训练目标是一个完整的序列列表即一次性端到端生成一个完整的推荐列表5-10个item。定义了筛选高质量会话的几个关键标准 用户在当次推荐的会话中实际观看的短视频数量大于等于5个 。用户观看该会话的总时长超过了预设的阈值 。用户在该会话中产生了点赞、收藏或分享等互动行为 。线上服务会用beam search推理出多个会话列表但是展现给用户的可能需要结合奖励模型或者其它策略来评估展示哪个或者哪些候选4.OneLoc本地生活的推荐和用户兴趣和实时位置相关密切这篇文章主要解决两个问题1.充分利用地理信息用sid2.权衡多种优化目标用户与店铺的距离、GMV等商业目标对于利用地理信息提出了地理sid、在encoder中同时运用视频位置相似度和用户的实时位置、邻居提示词丰富用户周围语境信息对于多种优化目标设计RL的两种奖励即地理奖励和GMV奖励。最终在快手本地生活服务中推全任务根据用户交互序列和实时位置预测下一个交互视频分为encoder和decoder两部分第一部分对历史序列、历史位置和实时位置交互建模第二部分把周围的八个点的地理信息注入到表征中把实时位置和临近的点的地理信息通过crossnet整合为loc prompt作为decoder-only的输入部分规则奖励鼓励产生和user更近的item同时还有一个GMV打分模型给出的奖励信息5.OneLive用于快手直播推荐直播推荐和普通短视频图文等固定的内容推荐有动态性、实时性的难点关于动态性1.内容动态性主播内容在直播时变化固定的id无法覆盖直播流同时有不开播时段的id非法性2.用户行为动态性用户互动随着内容是时变化评论、送礼等关于实时性方案1.动态分词器 每隔一段时间滑动窗口提取实时内容经轻量mllm生成动态嵌入后池化融合多个窗口。 双塔结构融合作者侧信息静态属性实时内容与用户侧实时行为融入行为交互信号解决纯内容嵌入区分度低的问题。2.时间感知门控注意力 在Transformer中显式加入时间门控让模型感知直播阶段如“刚开播”vs“高潮期”强化id合理性同时把用户query的查询时间构造特征加在起始token上。3.高效解码器设计 顺序多任务预测将候选生成、点击率预估等统一为自回归任务而多个目标的前置块是共享参数的所以只用存一个kv。 QK归一化稳定训练并加速推理对QK状态在做注意力机制前加rmsnorm。4.统一多目标对齐 通过强化学习平衡用户互动、时长、留存等多目标。rl时抽取了部分query以sft损失稳定训练