GraphCodeBert:Pre-TrainngCodeRepresentionswithDataFlow 创新点:认为AST中有许多不必要的联系且仅是在语法层面,而DFG关注了语义层面:采用数据图流向【将程序中变量作为图的节点,将变量之间的数据流向作为边,mask掉部分边后再进行预测】 三个预训练任务:MLM、EP边预测(即创新点)、NA节点对齐【将NL中的变量与PL中的变量进行对齐训练】  标题 GraphCodeBert:用数据流进行预训练代码表示 会议/期刊 ICLR2021 作者 DayaGuo1∗,ShuoRen2∗,ShuaiLu3∗,Zhang...

关注 更多

空空如也 ~ ~

粉丝 更多

空空如也 ~ ~