以牛客网《剑指Offer》题目为准,共66道
XLNet 原理解析
论文分析了以 ELMo/GPT 为代表的自回归语言模型与以 BERT 为代表的去噪自编码语言模型的不足,提出了结合 AR 与 AE 各自优点的乱序自回归语言模型,在多项 NLP 任务上达到了 SOTA。
论文:XLNet: Generalized Autoregressive Pretraining for Language Understanding
ERNIE/ERNIE 2.0 原理解析
ERNIE
ERNIE(Enhanced Representation through kNowledge IntEgration)是百度在 BERT 的基础上对模型进行了简单的改造,解决了 BERT 的一些弊端,达到了不错的效果。
论文:ERNIE: Enhanced Representation through Knowledge Integration
MySQL 入门(二)——事务
在数据库中,事务处理用来维护数据库的完整性,它保证成批的 MySQL 操作要么完全执行,要么完全不执行。在事务中,误操作之后能够及时的恢复,并保证在不同的 session
间的一致性。MySQL
中只有 InnoDB
引擎的表才支持事务。
BERT 原理解析
BERT(Bidirectional Encoder Representations from Transformers)是一个使用了 Transformer Encoder 的双向语言模型,类似于 GPT,BERT 也是一个两阶段模型,通过上游的无监督预训练,对下游的监督任务进行简单改造以微调参数。
论文:BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding
Linux 定时任务
Linux 增加自定义开机启动项
Linux 本身并没有提供添加开机启动的方法,但有时总是需要一些脚本或者代码开机启动,本文介绍两种方法,将自己的程序或者几行简单的代码添加为开机启动项,使其在后台自动执行。
关于 Linux 的启动,其实有一套严格的流程,请阅读Linux 的启动流程。
以下均以 CentOS7
系统为例,Ubuntu
会特殊说明。