1. NLP NLP四大任务 NLP预处理流程 语料库 通过不同的途径获取到了想要的语料库。 文本清洗 因为很多的语料数据是无法直接使用的，其中包含了大量的无用符号、特殊的文本结构。 分词 中文分词和英文分词有很大的不同，英文是使用空格作为分隔符，所以英文分词基本没有什么难度。而中文是字与字直接连接，中间没有任...

RNN RNN原理 数学表达式： \[\pmb h_t :=tanh(\pmb W_{xh}\pmb x_t+\pmb W_{hh}\pmb h_{t-1})\] 简化： \[{\pmb h}_t := \pmb f(\pmb x_t,\pmb h_{t-1})\] 电路图如下： 梯度爆炸与梯度消失 ...

BertModel解读 Hugging Face的transformers模块中BertModel主要组成： 基本模型和配置 BertModel BertConfig Tokenizer BertTokenizer BasicTokenizer Wordpie...

插件安装与配置 快捷键Ctrl+Shift+X打开扩展安装界面，安装插件 Python 安装完插件后，打开python文件会自动提示选择Python解析器。也可以通过Ctrl+Shift+P打开命令面板输入Select Interpreter来选择需要的解析器。 配置header模板 文件-首选项-用户代码-p...

修改字体样式和大小 pip install jupyterthemes #安装jupyterthemes jt -r #设置默认样式 然后在./jupyter/custom/custom.css修改文件内容如下： /*修改代码字体*/ pre.CodeMirror-line{font-size: 16px !important;font-f...

显示行数 /etc/vimrc(/etc/virc) 最后一行加入set number 移动光标 在vi命令模式下，vi提供了大量的移动命令，其中有一些是与less阅读器共享的，列举部分如下： 按键 移动光标 l or 右箭头 向右移动一个字符 h or...

Anaconda安装、升级、使用、镜像、激活环境 安装 bash Anaconda3-2019.07-Linux-x86_64.sh 升级 升级anaconda前需要升级conda conda update conda #基本升级 conda update anaconda #大的升级...

影音视频工具软件 视频下载和字幕制作 B站视频下载： you-get --format=dash-flv720 -o /Users/用户名/Vedio --playlist 网址URL #选择的视频格式为dash-flv720，保存的文件夹位置/Users/用户名/Vedio 视频下载 安装you-get 以下为必要依赖，需要单独安装，除非于Window...

git常用命令 git init : 代表初始化仓库，初始化一次即可 git clone : 从github克隆至本地，也可以git clone [地址] [本地目录] git remote add origin [地址] ： 添加一个远程仓库，origin 是给这个项目的远程仓库起的名字 git remote -v : 查看我们当前项目有哪些远程仓库可以执行命令 git ad...

数学相关LaTeX表达 表 1: 数学模式重音符 示例 代码 示例 代码 示例 代码 示例 代码 $\hat {a}$ \hat{a} $\check{a}$ \check{a} $\...