基于神经网络机器翻译的自然语言信息隐藏

摘要：

生成式自然语言信息隐藏在自然语言生成过程中嵌入秘密信息.目前主流的生成式自然语言隐藏方法采用一个简单的循环神经网络(Recurrent Neural Networks,RNN)或长短时记忆网络(Long Short-Term Memory,LSTM)进行载密文本的生成.这种方法生成的载密文本长度有限,且句子和句子之间没有语义关联.为了解决这个问题,提出了能够生成长句且句与句之间能保持语义关系的机器翻译隐写算法Seq2Seq-Stega.采用序列到序列(Sequence to Sequence,Seq2Seq)模型作为文本隐写的编码器和解码器,源语句的信息可以保证目标载密句的语义关联性.此外,根据每一时刻模型计算的单词概率分布,设计了候选池的选词策略,并引入了平衡源语句与目标句的贡献度的注意力超参数.通过实验比较了不同选词阈值和注意力参数下模型的隐藏容量和生成文本的质量.与其他3种生成式模型的对比实验表明,该算法能够保持长距离语义关联,并具有较好的抗隐写分析能力.

关键词：自然语言信息隐藏;文本生成;语义距离;自注意力机制;机器翻译

所属期刊栏目：48

分类号：G316(科学研究工作)

资助基金：国家自然科学基金;中国高校科学基金

在线出版日期：2021-11-22（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：557-564,584