纠纷奇闻社交美文家庭
投稿投诉
家庭城市
爱好生活
创业男女
能力餐饮
美文职业
心理周易
母婴奇趣
两性技能
社交传统
新闻范文
工作个人
思考社会
作文职场
家居中考
兴趣安全
解密魅力
奇闻笑话
写作笔记
阅读企业
饮食时事
纠纷案例
初中历史
说说童话
乐趣治疗

浅谈人工智能产品设计:LDA主题模型

8月4日 楚倾云投稿
  LDA是一种无监督的算法,作用是从一份文档中提出文档的主题,以及主题中的词语。
  一、LDA模型简介
  LDA是LatentDirichletAllocation(潜在狄利克雷分配模型)的缩写,也是线性判别分析(LinearDiscriminantAnalysis)的简写。本文探讨的是第一种LatentDirichletAllocation(潜在狄利克雷分配模型)技术。LDA通俗的来讲就是一种主题抽取模型。它是一种无监督的算法,作用是从一份文档中提出文档的主题,以及主题中的词语。LDA模型应用范围很广,如我们熟知个性化推荐、商品标签、智能分类等等。
  有监督学习和无监督学习以及半监督学习的概念是比较容易理解的。这边就简单的提一下。
  我们知道,AI系统都可以抽象为如图所示的结构:
  我们训练AI,就是要得到一个模型。训练模型的方式有这么几种:
  有监督学习:即通过人工标注数据,机器从中学习得到模型,如分类、回归算法。
  无监督学习:机器直接通过海量的数据自主学习得到模型。,如聚类算法。
  半监督学习:机器通过少量的人工标注数据和海量的无标注数据学习得到模型。半监督学习的特点就是,用少数的人工标注数据就能得到一个不错的模型,随着模型的使用,产生的纠错数据又能反过来提升模型的精度,最终使得模型得到最优。
  回到我们要讲的LDA模型。根据场景的不同,数据的不同可以选择不同的方案。如定制化场景下,可以做有监督的学习,以达到较好的精度。如在toC的产品中,则使用半监督的学习方式可以让产品具有个性化推荐的能力。
  简单解析一下LDA模型的原理:
  在LDA模型中,文档是由词语组成主题,再由主题组成的文章。在主题中,有词语的一个概率分布,概率越高表示与主题的关联性越大。相对的,文档中有一个主题概率分布,概率越高代表与文档的相关性越高。LDA的简化公式如下:
  P(词语文档)P(词语主题)P(主题文档)
  LDA从词语在文档中的概率学习得出词语在主题中的概率分布以及主题在文档中的概率分布。
  从公式中我们就能够很清晰的看到,如何能够提升LDA模型的准确度再融合进算法中,从而提升产品的用户体验。
  关键点在于:
  提供词语主题的标注数据。
  提供主题文档的标注数据。
  二、LDA主题产品设计
  假设我们要做一款个性化信息流的产品,我们想运用LDA为文章打标签,并推送给具有相同标签的用户,从而实现个性化推荐,那我们要怎么做?
  其实标签就可以看成是LDA中的主题,融合AI的产品的设计如果能巧妙的让用户给你提供标注数据,这样的产品体验一定是优秀的。
  沿着这个思路,我们可以有这样的设计方案:
  可以先让用户选择标签,然后给用户推荐一些无监督学习标注出来的同标签的文章,手机用户的点击数据、停留时长、点赞、收藏等数据,再把这些数据转化为用户对这个文章的认可程度。如果用户认可程度高,就提升这篇文章的权重;如果认可程度低的,降权。再设计一个“不喜欢”的按钮,用户点击了也对文章进行降权。如果经过海量用户的使用,可以获得较为优质的数据,再利用这些数据进行训练,使得模型越来越精准。
  总结成一幅图就是:
投诉 评论

人工智能与设计(1):人工智能的发展和定义本文是主题为“人工智能与设计”系列文章的第一篇,主要讲述现在人工智能的基础知识,enjoy今年年初出于个人兴趣,我开始了对人工智能的研究。为了更好理解人工智能和设计的关系……搅动金融科技的人工智能,能否颠覆支付格局?人工智能加持下,金融科技三驾马车中的智能投顾、智能信贷已经在传统金融机构、互金领域大展拳脚,并某种程度上正在颠覆旧有格局。现在,支付这一架马车也不可避免地开始奔向人工智能的怀抱……具有超级智能的人工智能:不是人类灭亡的信号,而是人类黎明的到编者按:本文作者MaxVersace,他是深度学习神经网络软件公司Neurale的CEO,也是波士顿大学神经形态实验室的主管。在这篇文章中,他坚决反对“人工智能威胁论”,认为人……浅谈人工智能产品设计:LDA主题模型LDA是一种无监督的算法,作用是从一份文档中提出文档的主题,以及主题中的词语。一、LDA模型简介LDA是LatentDirichletAllocation(潜在狄利……人工智能的隐喻:对我们职业规划的威胁及启示人工智能会抢走我们的工作么?本文作者并未对AI技术算法进行深入的探讨,而是从宏观视角上为各位勾勒一幅AI的全景图。enjoy上周,DeepMind团队研发的新一代人工智能……捷豹发布2021款FPACE官图2021年上市售36万起【智车派新闻】日前,捷豹官方发布了一组2021款FPACE的官图。可以看到,新车在外观和内饰上均有明显的改进,而且换装了配有48V轻混系统的发动机。根据有关消息,该车将首先在英……奔驰官方试驾展示阿凡达概念车巨型透明座舱超科幻!【智车派新闻】今年年初,奔驰发布了一款阿凡达概念车奔驰VisionAVTR,现在这款阿凡达概念车的官方试驾展示来了。近日,丹麦《TopGear》主持人和奔驰首席设计师在一支视频……在线教育的新升级:智适应基于人工智能的个性化教学系统开门,机器人老师来了国庆几天,河南刚刚上演一幕新科技的大戏:计算机和人展开了为期四天的人机大战。这一次,对垒的双方不再是李世乭和阿尔法狗,而是教师和人工智能教学机器人准确……人工智能下的生存:成为Top1的人关于设计师如何才能“减少”人工智能对自身的影响,我想这其中需要有个前提,那就是你需要达到相关行业Top1的排名,这样你的工作才会具备创造的经济附加值,而不是低廉的可以被人工智能……人工智能时代需要产品经理回答的4个基本问题未来的产品,不再单纯为了解决某个具体的问题而生,而在于提升生活的品质。那些无需用户刻意学习、持续提升用户体验、尽可能主动帮助用户做除正确决策的产品功能,才是人工智能的真需求。……浅谈人工智能产品设计:情感分析情感分析是自然语言处理中的一项技术,也是文本挖掘中常用的方法。在产品中应用情感分析技术也不少见,例如新浪的舆情大数据平台运用情感分析对全网数据进行挖掘。另外在一些电商产品中,也……人工智能产品应用现状总览与未来思考一个很大、很难成品的题目,但是自己很喜欢这一块,并且硕士期间也在从事基于深度学习的目标检测与识别的研究,所以希望能在总结与思考之后有一定的收获和一个清晰的脉络。无法一览无余,但……
如何看待迅雷发布公告宣称玩客云是骗局这件事?编程到底难在哪里?看看普通人和程序员买苹果就知道qq邮箱为什么被称作腾讯的七星级产品?互联网协议终于开始向IP6过度:国务院等部门印发了IP6部署探测迅雷偷偷扫描自动上传数据为了嘛宝马X6新款车型曝光!HAMANN打造很有运动时尚感联通移动电信用户免费转新套餐攻略,附套餐对比有知情人称可能因牌照问题导致AcFun(A站)已三天无法打开近期各种矿币出现,所谓用的区块链技术一个浅显易懂的解释知识付费时代来了?继高晓松后老梁也推出自己的网络收费课程京东悄悄上线个“调货服务费”是什么鬼?宽带IP你不知道的秘密,不知道你被坑没有

友情链接:中准网聚热点快百科快传网快生活快软网快好知文好找美丽时装彩妆资讯历史明星乐活安卓数码常识驾车健康苹果问答网络发型电视车载室内电影游戏科学音乐整形