主题模型使用方法论文

模型就是你画图的时候显示出来的 黑色的背景 布局就是显示在打印纸上答应出来的效果AUTOCAD的布局是方便打印出图用的，图纸空间可以理解为覆盖在模型空间上的一层不透明的纸，需要从图纸空间看模型空间的内容，必须进行开“视口”操作，也就是“开窗”。图纸空间是一个二维空间，也就是在图纸空间绘制的对象虽然也有Z坐标，但是三维操作的一些相关命令在图纸空间不能使用，导致他所显示的特性跟二维空间相似。图纸空间主要的作用是用来出图的，就是把我们在模型空间绘制的图，在图纸空间进行调整、排版，这个过程称为“布局”是非常恰当的。“视口”则是在图纸空间这张“纸”上开的一个口子，这个口子的大小、形状可以随意使用（详见视图菜单下的视口项）。在视口里面对模型空间的图形进行缩放（ZOOM）、平移（PAN）、改变坐标系（UCS）等的操作，可以理解为拿着这张开有窗口的“纸”放在眼前，然后离模型空间的对象远或者近（等效ZOOM）、左右移动（等效PAN）、旋转（等效UCS）等操作，更形象的说，就是这些操作是针对图纸空间这张“纸”的，这就可以理解为什么在图纸空间进行若干操作，但是对模型空间没有影响的原因。如果不再希望改变布局，就需要“锁定视口”。注意使用诸如STRETCH、TRIM、MOVE、COPY等编辑命令对对象所作的修改，等效于直接在模型空间修改对象，有时为了使单张图纸的布局更加紧凑、美观就需要从图纸空间进入模型空间，进行适当的编辑操作。 熟练的使用图纸空间，需要配合几个方面的设置，也可能要改变自己以前绘图以及出图的习惯，不过我认为用这些去换来轻松的操作，是完全值得的。首先对在模型空间绘图有以下几个说明或者要求，如果做不到这几条，图纸空间对你来说依然是混乱的。1、最好严格按照1：1的方式绘图，这样不仅作图时方便，以后修改也方便，重要的是在使用图纸空间出图时更加灵活方便。2、明确自己在模型空间绘图所使用的单位，比如用毫米为单位，那么1米就要用1000个CAD单位，用厘米为单位，那么1米就要用100个CAD单位，需要说明的是，在CAD中设定的所谓的“绘图单位”是没有意义的，绘图的单位应该是在使用者心中，这也是CAD灵活的一个方面，因为这样在CAD中绘制一条长度为1的线段，可以代表任何一个单位长度。比如右图设置的“毫米”我们大可不必理会。详细使用方法你可以登陆： hi/%D3%BFil/blog/item/e7cc720fab1872ebaa64572a.html去看看，很详细的`

主题模型 是机器语言在自然语言处理中的一个应用，主要做的是无监督的任务。

一般情况下，如果我们拿到一篇文章，这篇文章是无标记的文章。我希望通过机器学习的相关算法，帮助我们得到文章的分类结果。这是我们的初衷。

之前提到过，在传统的聚类算法中，当我们的数据量足够大、特征非常多的时候， 我们的距离度量公式就相对得失去了某种意义。即高维的数据会面临维度爆炸的问题，高维空间里边边角角里的数据之间的距离就没有什么意思了。如果距离的度量失效，那么聚类算法的结果就会非常差。

因此，传统的无监督的算法在处理文本分类的时候就起不到很好的作用了。因为文本分类在特征处理的时候我们会使用词袋法和TF-IDF，这些方法基于我们的语料库生成一个当前文章的词向量，即根据单词在文章中出现的频率/频数，来决定词向量中每一个元素的大小。

相对而来，生成的词向量是比较稀疏的，因为一篇文章中不太可能包含语料库中的所有词组。这种情况下怎么办呢？ 我们引入了主题模型来解决这种距离度量失效的情况。 相对来说，这个结果可能会稍微的好一些。

但目前业界中，对主题模型的争议也比较大。很多人也认为主题模型的效果不太好。或者可以这么理解：模型再好，不如语料好。即， 优质的语料可以帮助提高文章分类的效果，不管你用的是什么模型。

根据 LSA模型 ，引申出了一个基于概率的模型PLSA， PLSA模型 本质上是一个生成式模型。

之前在聊统计学的时候，我们认为 统计学 是分两个学派的： 1、传统统计学的频率派； 2、贝叶斯学派。 实际上 频率派 在传统统计学中，我们认为其少了一个先验条件。 而 贝叶斯 认为世界上任何一件事情的发生都是由之前的某些事情来决定的。 所以贝叶斯要考虑很多先验条件。即 P(A|B) = P(A)×P(B|A)/P(B); 贝叶斯考虑A事件发生概率前，先要考虑其后验条件B；

LDA模型 是基于PLSA这个模型，在加入了一些先验的条件后得到的一个主题模型。

传统判断两个文档相似性的方法是通过查看两个文档共同出现的单词的多少，如TF-IDF等，这种方法没有考虑到文字背后的语义关联，可能在两个文档共同出现的单词很少甚至没有，但两个文档是相似的。

举个例子，有两个句子分别如下： “乔布斯离我们而去了。” “苹果价格会不会降？

实际上有生活常识的人都知道，一个公司的创始人去世后，意味着股价肯定会跌。所以上面两句话本质上在说苹果公司的事情，但这两句话中没有任何一个词是一样的。如果我们用传统的词袋法去分析，我们会发现两篇文章的相似度是0。 这种情况下我们得考虑主题模型。

主题模型 (Topic Model)是用来在一系列文档中发现 抽象主题 的一种统计模型。直观来讲，如果一篇文章有一个中心思想，那么一定存在一些特定词语会出现的比较频繁。比方说，如果现在一篇文章是在讲苹果公司的，那么“乔布斯”和“IPhone”等词语出现的频率会更高一些；如果现在一篇文章是在描述微软公司的，那么“Windows”和“Microsoft”等词语出现的频率会更高一些；但真实情况下，一篇文章中通常包含多种主题，而且每个主题所占的比例各不相同，比如一篇文章中10%和苹果公司有关，90%和微软公司有关，那么和微软有关的关键字出现的次数应该是苹果关键字出现次数的9倍。

主题模型就是一种自动分析每个文档，统计文档内词语，根据统计的信息判断当前文档包含哪些主题以及各个主题所占比例各为多少。

主题模型是对文本中隐含主题的一种建模方法，每个主题其实是词表上单词的概率分布；

主题模型是一种生成模型，一篇文章中每个词都是通过“以一定概率选择某个主题，并从这个主题中以一定概率选择某个词语”这样一个过程得到的；

模拟一个自由撰稿人的写作思路：

1、作者为写一篇文章构思了很多主题→以72%的概率选中了“苹果公司”为主题写文章→以0.23%的概率以“篮球”这个词开头写这篇文章。→以87%的概率以“Iphone”这个词为第二段的开头。

2、作者为写一篇文章构思了很多主题→以5%的概率选中了“篮球”为主题写文章→以90%的概率以“某个球星”这个词开头写这篇文章。→以0.035%的概率以“Iphone”这个词为第二段的开头。

分析 以我们对社会的认知，我们知道当以苹果公司为主题时写的文章，Iphone这个词出现的概率，会比以篮球为主题写文章时出现的概率高很多。反之在以篮球为主题写文章时，Iphone这个词可能就压根不会出现。

我们想对当前文章生成一个主题的时候，我们会从文章库中进行寻找。比如现在是NBA的休赛期，我们认为在新闻发布的文章库中，NBA的新闻出现的比较少。而当苹果开新的发布会时，我们认为新闻文章库中，苹果公司主题的文章会变多。

本质上我们刚刚构建的两个 自由撰稿人的写作思路 是一个贝叶斯网络。

结合上述这些基本概念我们来看下面的公式：

分析公式： 首先思考：P(词组，主题，文章) = P(w,t,d) 的联合概率如何求？

主题模型 克服了传统信息检索中文档相似度计算方法的缺点，并且能够在 海量的数据中找出文字间的语义主题 。主题模型在自然语言和给予文本的搜索上起到了重要的作用。

怎样才能生成主题？对文章的主题应该怎么分析？这是主题模型要解决的问题。

02 主题模型 - SVD矩阵分解、LSA模型