一、概述
鱼与熊掌兼得：融合检索和生成的SimBERT模型：https://kexue.fm/archives/7427
SimBERTv2来了！融合检索和生成的RoFormer-Sim模型：https://kexue.fm/archives/8454
代码
v1：https://github.com/ZhuiyiTechnology/simbert/blob/master/simbert.py
v2：https://github.com/ZhuiyiTechnology/roformer-sim
二、代码说明
2.1 利用ulilm模型做seq2seq
从语言模型到Seq2Seq：Transformer如戏，全靠Mask：https://kexue.fm/archives/6933
2.2 seq2seq解读
https://kexue.fm/archives/5861
输入：X，Y[:-1]
输出：Y[1:]
2.3 beamsearch
