规则圈选中所使用的画像标签数据是离线计算出来的，大部分在计算过程中剔除了很多明细信息，仅保留了最关键的画像内容，即某日某用户的标签值。...虽然画像数据是浓缩精简后的核心数据，但在很多人群圈选场景中依赖行为明细数据，比如运营人员希望找出2022-08-15 10:00:00到2022-08-15 12:00:00之间通过手机客户端点赞了某篇文章的用户...第一种使用Hive表导入，首先需要找到离线行为明细数据，然后将数据整理后写入到ClickHouse中；第二种直接消费实时行为数据并写入ClickHouse中，其圈选结果也更具时效性。...行为明细数据包含时间属性，可以计算出每一个用户按时间排序后的行为序列，基于该序列可以实现行为序列圈选。比如圈选出点赞文章后又分享文章的用户，找到收藏商品后最终购买了商品的用户。...在行为明细圈选时可以结合画像标签数据一起使用，比如找到在某时间段通过手机客户端点赞了某篇文章的北京市男性用户，可以直接关联画像宽表进行计算。
同时，通过规则客群的圈选能力实力客群的精细划分。用户数据分析：基于丰富的用户标签数据，CDP 平台提供用户画像洞察功能，支持实时效果评估和营销漏斗分析。...数据服务层则包括用户数据服务、客群圈选、营销策略、实时事件、 AB 实验和实时效果分析回收在内的全方位数据服务，满足各业务场景的数据需求。...随后，利用 Spark 作业将 DWS 层数据抽取到 Impala 中，进行离线的标签计算和客群的圈选。...DataX 工具，通过 Stream Load 方式将离线数据高效写入到 Doris 里。...客群圈选在架构 1.0 中，客群服务先生成动态 SQL，然后将其传输到 Impala 中进行客群圈选。完成圈选后，结果集需被重新读取回客群服务，并由其上传到对象存储中。
，它不仅仅是一个简单的 PDF 阅读工具，更是一个集 PDF 管理、Anki 卡片制作和视频笔记功能于一体的全能工具。...• Anki 最强辅助 • 复习计划管理 • 数据分析与进度跟踪 • 卡片优化建议 • 视频笔记神器 • 视频分段标记 • 实时笔记与截图 03、DevHub DevHub 是一款 macOS 平台的开发者工具箱...，集成了 50 多款常用的开发小工具，且不需要联网即可使用。...最重要的是，它不断更新，目标是集成超过 100 款实用工具，让开发者可以一站式解决各种问题。...而 DevHub 集合了这一切，无需跳转到多个不同的网站或工具，所有操作都可以在本地离线完成。这样不仅提升了开发效率，也确保了数据的安全性。
通过计算种子人群中每一个用户与其他非种子人群用户间的向量距离，找出距离每一个用户最近的TOP用户便可构建出目标人群。...借助画像数据对种子人群进行特征分析并找出其主要标签特征，比如种子人群标签特征趋向于：性别男、年龄30至40岁、兴趣爱好－军事，那么可以把非种子人群中的所有30-40岁之间爱好军事的男性用户圈选出来作为目标人群...目前也有利用社交网络进行人群LookALike的实践方案，通过好友关系找到种子人群中所有用户的几度好友并构建目标人群。挖掘人群是指定优化目标，借助算法能力找到满足要求的用户并构建人群。...以上示例都有具体的挖掘人群的优化目标：游戏下载量、充值金额、关注用户数，算法工程师根据该目标选择合适的模型进行人群挖掘。...人群挖掘的思路是先找到训练样本（种子人群），然后通过LookALike的思路扩展种子人群。该方式与人群LookALike不同的是，人群挖掘的结果中可以包含种子人群中的用户数据。
01、GOT-OCR2.0 GOT-OCR2.0 是一款开源强大的端到端 OCR 模型，不仅支持传统的场景文本和文档识别，还能处理乐谱、图表、甚至复杂的数学公式！...模型设计采用了一个集成的 vision encoder 和 decoder，能够同时处理多种类型的 OCR 输入，从而极大提高了信息传递的效率。...macOS 剪贴板管理工具，它能帮你记录剪贴板历史，并可以快速找到之前的剪贴板内容，快捷键操作，简单快捷。...3D 动画生成系统，它能够通过输入单一角色绘画生成高质量的 3D 动画，极大地简化了从 2D 图像到 3D 动画的制作流程。...• 预训练模型：提供了预训练好的模型，用户无需从头进行训练即可直接使用 • 多领域应用：动画制作、游戏开发、虚拟现实等 • 风格化生成：保持输入绘画的风格，将原画的艺术风格带入 3D 动画
业界画像功能技术选型 本节主要介绍业界在画像相关功能上的技术选型方案。目前业界数据层建设都依赖Hadoop体系下大数据工具及组件，服务层的区别主要在语言框架层面，最终提供服务的方式相同。...本节提到的技术选型主要偏重存储层涉及的画像引擎及画像分析相关技术方案，对应到功能层面上的人群圈选和画像分析功能。 阿里达摩盘是阿里妈妈广告投放平台，该平台可以进行人群圈选并应用于后续广告投放环节。...美团和滴滴的实现方案比较相似，在人群圈选中主要使用的是Elasticsearch和Spark引擎，Elasticsearch可以快速找到筛选逻辑比较简单的人群，当涉及复杂的圈选逻辑时可以降级为Spark...百度内部用户画像相关圈选和分析基本都是基于Doris实现的。知乎的画像圈选也借助了Doris，并把Spark作为一些特殊业务场景下人群圈选的计算引擎。...最近几年ClickHouse比较流行，今日头条DMP以及CDP均通过ClickHouse实现了人群圈选，借助ClickHouse的BitMap实现了人群圈选的提速；快手DMP在人群圈选场景下也借助ClickHouse
使用画像宽表圈人的逻辑是从明细数据中找到满足条件的用户并最终构建人群，而使用BitMap进行圈人会对用户进行预聚合，在人群圈选时直接使用聚合后的结果进行计算。...首先将指定标签值下的所有用户聚合后生成BitMap，然后基于这些BitMap执行交、并、差操作实现人群筛选。图5-8展示了基于宽表和BitMap进行人群圈选的功能示意图，两种方式最终产出的人群相同。...BitMap特殊的数据结构决定了其适合做用户聚合并应用到人群圈选场景下。...BitMap来支持人群圈选。...业界一般使用混合模式，优先通过BitMap进行人群创建，不适用的场景下兜底使用画像宽表进行人群圈选。采用混合模式要考虑对齐画像宽表和BitMap的标签时间，这增加了工程的实现复杂度。
明确了人群需求后，数据的流程主要包括： 数据源准备： 圈选目标人群所需要的标签数据从哪里来?...火车票订单、酒店订单、红包卡券数据 标签生产： 按照场景人群逻辑，清洗加工标签 人群圈选： 以标签为限定条件，从全量用户中过滤圈选出目标人群 用户触达： 将用户数据传输到营销通道，对用户进行触达 效果评估...人群画像的应用价值一是人群圈选过程中确定是否满足运营需求，二是事后效果分析时，不同特征用户进行对比分析。...CDP是属于数据中台的产品范畴，应该更聚焦于数据服务化能力的输出，因此，其自身没必要重复造轮子，搭建各种触达通道，主要和公司内部现有的营销工具充分对接，实现数据的顺畅流转以及效果分析即可。...算法标签生产流程提效，与机器学习平台联动，提升算法挖掘类标签的生产效率，在人群圈选上更多的发挥AI的价值。
本节主要介绍人群创建所依赖的画像宽表的生成方式。为什么要创建画像宽表？基于原始的标签数据表进行人群圈选有什么问题？如何生成画像宽表？针对这些问题本节会给出详细解答。...当用户圈选需求涉及任意N天的用户行为时，只能通过存储历史标签数据来解决。 支持跨时间的人群分析。...如果画像平台用户对于人群圈选的速度没有要求，直接基于Hive表进行计算是可行的。...ClickHouse是最近几年比较流行的大数据分析工具，面对百亿数据量级的分析需求可以实现秒级响应。...ClickHouse也比较擅长做宽表分析，基于这一特点可以把其作为Hive表的“缓存”使用，从而满足人群圈选和人群分析的提速。
二是分享自如的达芬奇·用户画像平台的建设实践，帮助大家从整到分地了解用户画像的建设过程，以及应有的功能模块； 三是介绍自如用户画像的实际营销应用案例，更好地将用户画像这个工具用起来。...平台为业务人员提供海量标签，支持快速圈选目标人群，同时提供精细化人群画像洞察能力，联动多渠道进行推送，并支持人群效果的数据查看，助力业务人员进行全链路用户运营。...人群圈选：通过人群圈选可进行精细化用户分层，而用户分层是个性化营销的基础。画像平台支持标签组合、分群组合以及 ID 数据上传 3 种方式，适应营销人员在不同场景下的圈选需求。...例如：圈选 “北京、近 7 天、找房行为次数>3 的用户” 给其推送了优惠券，监控其营销效果，可再次圈选对优惠券有点击行为的用户，对其发送使用提醒，或是给其赠送其他服务，从而实现更进一步细分人群的营销。...04 小结 本次分享到此结束，希望你通过本文的学习能了解，对于产品、运营、分析师、客服等各个角色掌握用户画像的重要性；并且掌握画像平台能力建设：标签体系、人群圈选、人群洞察、人群营销、营销效果、标准接口
用户分层运营的方式一是基于运营的业务经验，将运营场景抽象成标签规则进行人群圈选和触达营销，另一个就是利用算法模型进行人货场的智能匹配。这两种运营方式各有什么优劣势呢?...最近CDP平台新增了很多算法挖掘的标签，扩展了基于算法模型直接输出目标人群的场景，通过AB对比，算法圈选的目标人群的转化效果要好于运营基于经验、规则人工圈选的效果。...从上述案例可以看出，规则运营，需要具有具备良好的业务经验和一定的数据思维才能将目标用户识别条件标签化，主要特点如下： 优点 1.行动敏捷，明确运营场景以及人群圈选条件后，可以快速进行人群输出，是CDP平台运营可以自助圈选...3.实现成本低，按照规则的圈选或数据清洗，运营+平台工具或运营+数据开发需要人力成本以及计算成本都比算法模型要低很多。...2.基于模算法模型的人群圈选可以覆盖更多特征维度，用户分层能力更多样化、精细化。
圈选对军事感兴趣的人群并用于Push应用背景：运营人员每天会整理当前俄乌冲突热门事件并通过Push推送给对军事感兴趣的用户，刚开始主要通过手动的方式在画像平台创建人群，然后导入到Push平台进行推送。...应用方式：调研人员通过画像平台LBS人群圈选功能找到了几所高校附近出现过的用户，并结合用户年龄段等标签提高了用户圈选的精确度。生成人群之后，私信平台可以通过接口拉取人群数据并进行私信推送。...应用结果：通过LBS圈选出的学校附近用户大部分都是大学生，不仅可以实现精准的私信触达而且还减少了对无关用户的打扰，最终帮助调研人员顺利完成既定工作。...基于组合人群赠送优惠券应用背景：三八妇女节当天电商平台会给女性用户赠送商品优惠券，主要通过画像平台的规则圈选找出所有女性用户并构建人群，当用户位于人群中时则赠送优惠券。...应用方式：在画像平台上通过规则圈选创建女性用户人群A，通过文件导入的方式创建黑产用户人群B，通过组合人群的方式创建人群A与B的差集人群C。
1、人群创建 人群创建即找到满足条件的用户并构建人群，根据圈选方式的不同可以分为规则、导入、组合、行为明细圈选等多种方式。...基于规则圈选创建人群：画像平台底层存在大量的画像标签，可以直接基于标签间的交、并、差操作进行人群圈选，比如圈选出常住省是北京且性别为男性的用户；最近一个月送礼次数超过5次且爱好军事的用户；常住省是天津或者上海...规则人群圈选是一种最常见、简单且易理解的人群圈选方式，图2-6展示了规则人群圈选的功能示意图，可以基于已有属性和用户行为数据进行人群创建。...基于行为明细的人群圈选：行为圈选是基于用户的行为明细数据进行圈选，其数据粒度较细且与时间紧密相关，基于这一特点，可以实现行为次数统计和行为序列圈选。...上面是几种常见的人群圈选方式，但是不同场景下对于人群圈选方式的要求不同，下面再介绍两种特殊场景下的人群圈选方式。 人群LookALike：人群LookALike是借助算法能力实现人群的放大与缩小。
2.2.2 人群圈选：在构建人群圈选系统时，提供多样化的创建方式是满足不同业务需求的关键。...以下是对不同人群创建方式的分析和技术实现要点：规则和行为创建人群标签引擎：开发一个灵活的标签引擎，允许用户根据标签组合来定义人群。行为分析：集成用户行为分析工具，以识别符合特定行为模式的用户群体。...EQUAL=一个参数圈选场景DSL描述和sql生成:改造之后人群圈选平均耗时为30s左右，效率提升120%。...技术稳定性与性能得益于对算法和数据处理流程的不断优化,在人群圈选方面，成功率达到了99.9%，针对不同规模的数据集，圈选耗时如下：千万级人群：离线标签，在Clickhouse数据库的支持下，圈选耗时小于...自动化流程：开发自动化工具，简化标签定义和生成流程，提高效率。应用效果回收效果监测：建立监测机制，跟踪人群应用后的效果，为业务提供反馈。
规则圈选是按照指定条件从画像数据中找到满足要求的用户并沉淀为人群的一种常见的人群创建方式。所谓的规则就是条件的组合，比如北京市男性用户，最近一周平均在线时长介于2到10分钟之间的中老年用户。...人群创建引擎读取到规则人群配置信息后，首先判断是否适合通过BitMap实现人群圈选，如果适合，可以获取标签的BitMap在内存中进行交、并、差操作；不适合BitMap实现的可以兜底通过ClickHouse...画像宽表进行人群筛选，其实现逻辑是将人群圈选条件转变为SQL语句，借助ClickHouse引擎查询出所有满足条件的UserId并构建人群；当ClickHouse执行异常时会再次兜底从Hive表中筛选用户...，同理，人群圈选条件最终转换为Hive SQL语句并最终将执行结果构建为人群。...基于BitMap进行人群圈选主要分为两步，第一步是从ClickHouse中读取标签BitMap，第二步是在内存中进行BitMap的交并差运算，其实现语句如下所示。
合作方式：画像平台通过人群创建和人群判存等服务支持了该需求，电商服务团队需要提供商家圈选所需要的标签源数据。...商家主要通过规则圈选的方式找到满足条件的用户并配置优惠券，比如筛选出浏览过指定商品的高活跃女性用户，电商服务团队需要按业务需求明确标签范围并提供对应的标签源数据，所有标签通过画像平台标签管理模块进行注册并配置其支持人群圈选功能...优惠券发放平台借助画像平台元数据查询服务、人群创建服务和人群查询服务实现了规则圈选功能，商家可以直接通过可视化的功能创建人群并配置优惠券。...合作方式：画像平台通过人群分析、人群创建、实时画像分析等服务支持该需求，直播运营团队基于这些服务封装实现直播分析工具。...主播使用辅助工具可以快速了解直播动态，根据直播间实时数据变化及时调整直播策略。直播分析工具服务了大量的头部主播，用户使用反馈良好，后续可以推广给更大范围的直播用户使用。
计算规格来构建人群圈选引擎。...人群圈选前台系统：提供可视化的操作界面。运营同学选择筛选条件，保存为人群，用于分析或者发送PUSH。每一个人群，对应一个SQL存储。...闲鱼PUSH系统：从人群圈选前台系统中获取人群对应的where条件，再从实时计算层，分页获取用户列表，给用户发送PUSH。在实现过程中，我们重点解决了分页查询的性能问题。...人群圈选系统为闲鱼精细化用户运营提供了强有力的底层能力支撑。同时，圈选人群，也可以应用到其他的业务场景，比如首页焦点图定投等需要分层用户运营的场景，为闲鱼业务提供了很大的优化空间。...5、未来 人群圈选引擎中的用户数据，我们目前是T+1导入的。这是考虑到人群相关的指标，变化频率不是很快，且很多指标(比如用户标签)都是离线T+1计算的，因此T+1的数据更新频度是可以接受的。
产品需求是基于这张宽表可以实现人群圈选功能：用户通过可视化的页面选择标签并配置筛选条件，系统可以快速找到满足条件的用户并生成人群。...ClickHouse作为缓存随着人群创建数目的增加，完全基于Hive表圈选人群的问题逐渐暴露出来：当人群集中创建时其产出效率较低。...人群圈选的初衷是找到所有满足条件的用户，可以把用户筛选语句直接交由ClickHouse引擎执行。...如图9-7所示，人群圈选功能的实现已经从单纯的Hive查询转变为ClickHouse查询优先、失败后Hive兜底的方式，人群圈选速度提升明显，人群产出时间从几十分钟降低到几分钟。...图9-8展示了基于BitMap进行人群圈选的实现逻辑。本文节选自《用户画像：平台构建与业务实践》，转载请注明出处。
Mockplus Mockplus 是最好的原型设计工具之一。 http://www.mockplus.cn 简洁高效，是它的主要产品特点。 ...关注设计，而非工具，是它带给设计人员的理念。 Mockplus的主要价值是：在正式制作真实软件产品前，通过原型给大家一个产品的模型展示，而这个模型你可以通过非常简单快速的方式得到。...所以，Mockplus的适用人群是比较广的，只要你有产品（范围很广，可以是某网站，某功能，某个策划案，某个广告模型，某个创意等）模型的展示需要。...产品经理 Product Managers 原型设计应该是产品经理应该掌握的某项硬技能。Mockplus是原型设计最好的工具之一，同时不需要任何学习，就可以上手。...而在作品设计前期构思方面，可以利用原型工具创作，收集意见和灵感。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
云直播
