基于注意力的仅解码器的序列转换神经网络

被引:0
专利类型
发明
申请号
CN201880075803.X
申请日
2018-10-29
公开(公告)号
CN111386537B
公开(公告)日
2024-08-13
发明(设计)人
诺姆·M·沙泽尔 卢卡什·米奇斯瓦夫·凯泽 艾蒂安·波特 穆罕默德·萨利赫 本·大卫·古德里奇 彼得·J·柳 瑞安·赛帕斯
申请人
谷歌有限责任公司
申请人地址
美国加利福尼亚州
IPC主分类号
G06N3/0455
IPC分类号
G06N3/047 G06N3/0464 G06N3/048 G06N3/084
代理机构
中原信达知识产权代理有限责任公司 11219
代理人
李宝泉;任庆威
法律状态
授权
国省代码
引用
下载
收藏
共 50 条
[1]
基于注意力的仅解码器的序列转换神经网络 [P]. 
诺姆·M·沙泽尔 ;
卢卡什·米奇斯瓦夫·凯泽 ;
艾蒂安·波特 ;
穆罕默德·萨利赫 ;
本·大卫·古德里奇 ;
彼得·J·柳 ;
瑞安·赛帕斯 .
美国专利 :CN119005252A ,2024-11-22
[2]
基于注意力的仅解码器的序列转换神经网络 [P]. 
诺姆·M·沙泽尔 ;
卢卡什·米奇斯瓦夫·凯泽 ;
艾蒂安·波特 ;
穆罕默德·萨利赫 ;
本·大卫·古德里奇 ;
彼得·J·柳 ;
瑞安·赛帕斯 .
中国专利 :CN111386537A ,2020-07-07
[3]
基于注意力的仅解码器的序列转换神经网络 [P]. 
诺姆·M·沙泽尔 ;
卢卡什·米奇斯瓦夫·凯泽 ;
艾蒂安·波特 ;
穆罕默德·萨利赫 ;
本·大卫·古德里奇 ;
彼得·J·柳 ;
瑞安·赛帕斯 .
美国专利 :CN119005251A ,2024-11-22
[4]
基于注意力的序列转换神经网络 [P]. 
N.M.沙泽尔 ;
A.N.戈梅兹 ;
L.M.凯瑟 ;
J.D.乌兹科雷特 ;
L.O.琼斯 ;
N.J.帕马 ;
I.波洛苏金 ;
A.T.瓦斯瓦尼 .
中国专利 :CN110192206A ,2019-08-30
[5]
具有仅解码器语言模型的多模态神经网络 [P]. 
郭唯诚 ;
安东尼·雅各布·皮耶尔乔瓦尼 ;
大勋·金 ;
罗曦杨 ;
本杰明·詹姆斯·凯纳 ;
阿比吉特·奥加勒 ;
崔颖惟 ;
阿内利亚·安格洛瓦 .
美国专利 :CN120937017A ,2025-11-11
[6]
具有稀疏注意力机制的注意力神经网络 [P]. 
乔舒亚·蒂莫西·安斯理 ;
圣地亚哥·翁塔尼翁 ;
菲利普·范 ;
曼齐尔·查希尔 ;
古鲁·古鲁甘内什 ;
库马尔·阿维纳瓦·杜贝 ;
阿姆尔·艾哈迈德 .
中国专利 :CN115552417A ,2022-12-30
[7]
稀疏注意力神经网络 [P]. 
阿坎克沙·乔杜里 ;
阿夫罗兹·莫希丁 ;
亨里克·米查列夫斯基 ;
约尼·米卡·卡内尔瓦 ;
卢卡斯·米奇斯瓦夫·凯泽 ;
塞巴斯蒂安·达留什·雅什丘尔 ;
沃伊切赫·加耶夫斯基 .
美国专利 :CN114492759B ,2025-09-26
[8]
稀疏注意力神经网络 [P]. 
阿坎克沙·乔杜里 ;
阿夫罗兹·莫希丁 ;
亨里克·米查列夫斯基 ;
约尼·米卡·卡内尔瓦 ;
卢卡斯·米奇斯瓦夫·凯泽 ;
塞巴斯蒂安·达留什·雅什丘尔 ;
沃伊切赫·加耶夫斯基 .
中国专利 :CN114492759A ,2022-05-13
[9]
具有门控注意力单元的注意力神经网络 [P]. 
刘寒骁 ;
华惟哲 ;
戴自航 ;
国·V·勒 .
美国专利 :CN118679484A ,2024-09-20
[10]
基于注意力的神经网络 [P]. 
G·V·德米尔吉 ;
T·J·阿瑟顿 ;
E·J·L·尚普 ;
C·迪基奇 .
英国专利 :CN120688547A ,2025-09-23