rZ7BcgRZYY4Z
一文了解Word2vec阐述训练流程 个性嵌入（PersonalityEmbeddings） 词嵌入（WordEmbeddings） 嵌入向量效果分析 语言模型 模型介绍 模型训练 Word2vec训练方法 CBOW方法 Skip-gram方法 CBOW方法与Skip-gram方法总结 重构训练方法 负采样 基于负采样的Skip-gram（SGNS） Word2vec的最终训练方法 附数百个中文Word2vec向量下载地址 Word2vec为什么不如BERT模型？ 在机器学习领域，嵌入（embeddings）的概念无疑是其中最令人兴奋的创新之一。想...
n-gram语言模型——文本生成源码 n-gram模型的基本原理 文本生成的步骤 1.准备和分词 2.构建n-gram模型 3.平滑技术的应用 4.生成文本 源码 在自然语言处理的领域中，n-gram语言模型是一种基础而强大的工具。它通过考虑词汇的序列来预测文本内容，从而有效地用于文本生成任务。这篇博客中将探讨如何利用n-gram模型，特别是在处理中文文本时，使用jieba进行分词和nltk库进行模型构建。 我在上一篇博客里讲解了n-gram的原理，参考：n-gram语言模型——句子概率分布计算与平滑。 n-gram模型的基本原理 n-gram模型基于一个简单的...
n-gram语言模型——句子概率分布计算与平滑 前言 语言模型 等价假设 n元语法 句子概率分布计算方式 数据平滑 Lidstone平滑(1-gram) Laplace平滑(1-gram) 附上两种平滑在1-gram下代码 Lidstone平滑与Laplace平滑(2-gram) 附上两种平滑在2-gram下代码 前言 语言模型（LanguageModel,LM）在自然语言处理（NLP）领域扮演着核心角色，特别是在统计模型驱动的汉语自动分词和句法分析等领域。目前，广泛采用的是N-gram语法模型，这种模型以其构建的简便性和直观性而著称，但同时也因数据稀疏性问题而不得不使用平...
【backward解决方案与原理】网络模型在梯度更新时出现变量版本号机制错误 报错详情 错误产生背景 原理 解决方案 RuntimeError:oneofthevariablesneededforgradientcomputationhasbeenmodifiedbyaninplaceoperation 报错详情 模型在backward时，发现如下报错： 即RuntimeError:oneofthevariablesneededforgradientcomputationhasbeenmodifiedbyaninplaceoperation。 其大概意思是说，当在计算...
👇👇一文详解Servlet看这篇就够了👇👇 Servlet是什么？是做什么的？ Servlet的运行示例 Servlet的的生命周期 Servlet的三种创建方式 Servlet进阶知识 Servlet是什么？是做什么的？ 😮首先，对我们编程者来说，Servlet就是我们写出来的Java类，只是我们需要按照Servlet规定的规范写。 😁其次，Servlet也是运行在Web服务器端的Java应用程序。 我们可以简化一下运行在Web服务器端的Java应用程序的理解：我们平常写的Java类，都是需要关键字new来实例化的。而正是由于Servlet是运行在服务器端，并...
【计算机网络】你真的懂学校的校园网吗？ 第一步：从了解本机的ip开始 ip地址 ip地址的分类 公用地址和私有地址 查看本机ip 第二步：向上追溯，查看宿舍的路由器 路由器 路由器的两个物理接口 路由器用到的协议 分析宿舍路由器 WAN口设置 第三步：总结 什么是默认网关 网络地址与广播地址 在数字时代，计算机网络已经成为了现代社会不可或缺的一部分。而对于大多数人来说，校园网是我们日常生活中接触最频繁的网络之一，它为学校的师生提供了信息传输、资源共享和互联互通的基础设施。但是，尽管我们每天都在使用校园网，很少有人真正深入了解它的工作原理、安...
论文信息 名称 内容 论文标题 PromptTuningforMulti-LabelTextClassification:HowtoLinkExercisestoKnowledgeConcept 论文地址 https://www.mdpi.com/2076-3417/12/20/10363 研究领域 NLP,文本分类,提示学习,多标签 提出模型 PTMLTC 来源 AppliedSciences 阅读摘要 如上图，思路很朴实无华。 普通MLM任务使用的损失函数是CrossEntropyLoss，它适用于单标签，代码如下： masked_l...
论文信息 名称 内容 论文标题 Labelpromptformulti-labeltextclassification 论文地址 https://link.springer.com/article/10.1007/s10489-022-03896-4 研究领域 NLP,文本分类,提示学习,多标签 提出模型 LP-MTC(LabelPromptMulti-labelTextClassificationmodel) 来源 AppliedIntelligence 阅读摘要 标签文本分类的关键问题之一是提取和利用标签之间的相关性，但直接建模标签之间的相关性...
Linux性能调优——内存篇 Linux内存的工作原理 内存映射的概念 虚存空间分布 内存分配与回收 分配 回收 内存查看与分析 查看内存使用情况 命令：free 命令：vmstat 命令：top 分析单个进程 命令：ps-p Linux内存的工作原理 内存映射的概念 大多数计算机用的主存都是动态随机访问内存(DRAM)，只有内核才可以直接访问物理内存。Linux内核给每个进程提供了一个独立的虚拟地址空间，并且这个地址空间是连续的。这样进程就可以很方便的访问内存(虚拟内存)。 虚拟地址空间的内部分为内核空间和用户空间两部分，不同字长的处理器地址空间...
Shell命令操作Linux文件系统 文件夹介绍 文件夹常规命令 文件夹权限控制⭐ 文件类型和权限 修改文件权限 移动、复制、删除文件夹 文件夹介绍 Linux文件系统是计算机操作系统中的一个关键组成部分，它用于管理和组织计算机上的数据和信息。先到根目录，然后打印当前目录下文件： cd/;ls 有一些比较常用的文件夹介绍如下： /bin——包含常见Linux用户命令，比如ls、sort、date和lchmod。 /home——包含分配给每个带有登录账号的普通用户的目录(root用户是一个例外，使用/root作为主目录)。 /lib——包含/bin和/s...
Linux中的apt与yum apt和yum区别 apt和yum执行流程 apt和yum区别 apt和yum是两种不同的包管理工具，用于在Linux操作系统中安装、升级和删除软件包。它们主要用于不同的Linux发行版。 命令 适用系统 apt Ubuntu、Debian yum CentOS、Redhat 也就是说，不同的系统有不同配套的包管理工具，最好什么样的系统用什么样的安装命令。 apt和yum执行流程 首先去/etc/中读取配置，然后把安装包下载到/bin/cache/中，最后安装到usr/中。
Shell命令管理进程 列出进程 ps命令 top命令 管理后台进程 启动后台进程 查看后台进程 jobs和ps的区别 停止进程 Linux除了是一种多用户操作系统之外，还是一种多任务系统。多任务意味着可以同时运行多个程序。Linux提供了相关的工具来列出运行中的进程,监视系统的使用情况以及在必要时停止(或杀死)进程。 可以通过一个Shell启动、暂停、停止或者杀死进程。此外，还可以将进程放置到后台以及带到前台。本篇详细介绍ps、top、kill、jobs以及其他用来列出和管理进程的命令。 列出进程 ps命令 ps（ProcessStatus）是一个常用的L...
Shell命令编辑与查找文件 编辑文件：使用vim或vi vim和vi的区别 vim和vi命令的使用流程 在编辑器里快速移动 查找文件 如今，Linux系统的大多数配置仍通过编辑纯文本文件来完成。甚至当使用图形工具处理配置文件时，也无法完全完成使用纯文本文件所完成的工作。其结果是有时还是需要使用一种文本编辑器来手工配置文件。同样，一些文档文件类型(比如HTML和XML)也是可以手工进行编辑的纯文本文件。 在成为成熟的程序员之前，需要学会使用一种纯文本编辑器。事实上，大多数专业的Linux服务器甚至没有提供图形界面，而仅使用非图形文本编辑器来编辑纯文本配置文件。 编辑...
Linux中的磁盘 整体摘要 Linux硬盘 查看磁盘分区 磁盘名称是怎么来的 磁盘名称对应的文件是什么 整体摘要 在Linux操作系统中，通常需要对某些分区进行特殊配置，以满足不同存储需求，例如交换区或LVM（逻辑卷管理）物理卷。磁盘扮演着永久存储器的角色，而RAM（随机存储器）和交换区则用于临时存储。当执行命令时，命令会从硬盘复制到RAM，以便计算机处理器（CPU）可以更快地访问。 与从硬盘读取数据相比，CPU可以更快地从RAM中读取数据。然而，磁盘通常比RAM大得多，而RAM的价格更高，而且在计算机重新启动时会被清空。可以将RAM和磁盘类比为办公设施，磁盘就像一个文...