研究人員推手語轉(zhuǎn)文字AI翻譯器 幫助聽障人士正常交流
IT之家 5 月 25 日消息，巴塞羅那超級計(jì)算中心（BSC）和加泰羅尼亞理工大學(xué)（UPC）的研究人員開發(fā)了一種將手語翻譯成文本的新工具，以給予聽覺障礙者更多包容性和可及性。該工具利用人工智能技術(shù)，包括自我注意機(jī)制和更快的吞吐量，以更準(zhǔn)確地理解手語者的姿勢并產(chǎn)生準(zhǔn)確的文字轉(zhuǎn)寫。
(資料圖片)
圖源 Arxiv
該工具基于 How2Sign 數(shù)據(jù)集，這是一個公開可用的大規(guī)模、多模態(tài)和多視圖數(shù)據(jù)集，包括 80 小時的美國手語教學(xué)視頻和相應(yīng)的英語文字記錄。該數(shù)據(jù)集由 BSC 和 UPC 發(fā)布，用于訓(xùn)練模型，以便將手語轉(zhuǎn)換為文本。研究人員使用膨脹式三維網(wǎng)絡(luò)（I3D）對數(shù)據(jù)進(jìn)行預(yù)處理，這是一種視頻提取方法，可以對視頻進(jìn)行三維過濾，直接從視頻中獲取時空信息。并使用了一個轉(zhuǎn)化器式的機(jī)器學(xué)習(xí)模型，與 ChatGPT 等其他人工智能工具背后的模型類似。
圖源論文《Sign Language Translation from Instructional Videos》
該研究的主要作者 Laia Tarrés 表示：“我們開發(fā)的新工具是以前發(fā)布的名為 How2Sign 的出版物的延伸，在那里，訓(xùn)練模型所需的數(shù)據(jù)被公布。利用這些已經(jīng)可用的數(shù)據(jù)，我們開發(fā)了一個新的開源軟件，能夠?qū)W習(xí)視頻和文本之間的映射?！?/p>
圖源 Pexels
研究人員發(fā)現(xiàn)，他們的模型能夠產(chǎn)生有意義的翻譯，但仍存在改進(jìn)的空間。該工具尚處于實(shí)驗(yàn)階段，研究人員將繼續(xù)努力，以創(chuàng)建一個能夠與無聽力損失者使用的技術(shù)相媲美的工具。
Laia Tarrés 同時表示：“這個自動手語翻譯的開放工具是對關(guān)注無障礙環(huán)境的科學(xué)界的寶貴貢獻(xiàn)，它的發(fā)表代表了向?yàn)樗腥藙?chuàng)造更具包容性和無障礙的技術(shù)邁出的重要一步。”
關(guān)鍵詞：
研究人員推手語轉(zhuǎn)文字AI翻譯器 幫助聽障人士正常交流
2023-05-26 08:47:25 
文化和旅游部推出10條長江主題國家級旅游線路
2023-05-26 08:00:22 
不及物動詞和及物動詞的區(qū)別和聯(lián)系_不及物動詞和及物動詞的區(qū)別
2023-05-26 06:55:11 
有需求趕緊買！SSD和內(nèi)存已經(jīng)開始漲價了 今日視點(diǎn)
2023-05-26 06:53:41 
每日速讀!英偉達(dá)股價暴漲：下季度營收預(yù)計(jì)超110億美元
2023-05-26 06:51:24 
新寶馬5系來了：前臉激進(jìn) 電動版本來了 今熱點(diǎn)
2023-05-26 06:42:57 
微信開發(fā)新功能被吐槽：QQ十年前就有了 最新資訊
2023-05-26 06:36:02 
亞馬遜海外特惠：買12900K送傲騰！ 環(huán)球訊息
2023-05-26 06:35:41 
今日最新更新內(nèi)容 985畢業(yè)生大量涌入縣城 為獲得公務(wù)員名額有人埋頭苦讀-頭條
2023-05-26 06:13:42 
關(guān)注：熱門中概股多數(shù)下跌 網(wǎng)易有道跌超14% 小鵬汽車3日累跌15%
2023-05-26 04:53:18 
今日熱訊：碧翠絲·布萊梅（關(guān)于碧翠絲·布萊梅介紹）
2023-05-26 03:56:57 
有機(jī)光導(dǎo)纖維（關(guān)于有機(jī)光導(dǎo)纖維介紹）_今熱點(diǎn)
2023-05-26 03:06:36
四川規(guī)范校外培訓(xùn) 消息
2023-05-26 02:06:11 
北京密云區(qū)舉辦急救操作技能大賽
2023-05-26 01:42:50 
建筑工程質(zhì)量控制與管理
2023-05-26 00:50:27 
當(dāng)前快看：芬尼-史密斯：知道球隊(duì)擁有什么 但我們無法預(yù)測最終的結(jié)果
2023-05-26 00:29:17 
20年前的河南狀元何碧玉，14歲以750分考進(jìn)清華，現(xiàn)狀如何？-環(huán)球簡訊
2023-05-25 23:54:12 
今頭條！保利發(fā)展四只合計(jì)60.30億公司債券將于6月1日付息
2023-05-25 22:58:41 
摩托羅拉Razr 40 Ultra配置曝光：6.9 英寸165Hz內(nèi)屏、3.6英寸副屏
2023-05-25 22:52:48 
【全球新要聞】藍(lán)寶石RX 7600顯卡首測 1080p小甜品
2023-05-25 22:47:08 
北京麥當(dāng)勞推出“六一”主題快閃店
2023-05-25 21:27:21 
每日短訊：百隆東方(601339.SH)子公司簽署《房屋征收補(bǔ)償安置協(xié)議》 合計(jì)補(bǔ)償款1.21億元
2023-05-25 21:01:05 
環(huán)球今亮點(diǎn)！兩大巨頭“開戰(zhàn)”，股價雙雙跳水，長城汽車大跌6%
2023-05-25 20:15:41 
2023天津高考各科試題及答案解析匯總 各科目真題試卷
2023-05-25 19:00:17 
周末近郊游 艾草采摘正當(dāng)時
2023-05-25 18:56:53 
塌陷地上長出致富“金草” 環(huán)球新視野
2023-05-25 18:52:45 
河南寶豐縣41萬畝小麥長勢喜人 豐收在望
2023-05-25 18:50:32 
英特爾Agilex 7 FPGA R-Tile現(xiàn)已量產(chǎn)，為CPU提供行業(yè)領(lǐng)先帶寬_即時看
2023-05-25 18:47:32 
原相3395，4K屏顯超跑升級！雷柏VT960PRO屏顯雙模無線RGB游戲鼠標(biāo)上市|熱點(diǎn)在線
2023-05-25 18:47:13 
龜山鎮(zhèn)塆長論壇第一期開講
2023-05-25 18:42:17 
兼職在家打電話日賺200元？上海警方成功搗毀一特大話務(wù)引流黑灰產(chǎn)團(tuán)伙 焦點(diǎn)快看
2023-05-25 18:39:05 
返鄉(xiāng)創(chuàng)業(yè) 大有可為|看點(diǎn)
2023-05-25 18:37:01 
今日播報!超強(qiáng)補(bǔ)貼｜購買SGS金標(biāo)認(rèn)證車型新5008，可享萬元補(bǔ)貼，不容錯過
2023-05-25 17:53:55 
碰瓷女明星？直播賣貨用上了AI換臉
2023-05-25 17:48:04 
Windows11將原生支持rar
2023-05-25 17:46:15 
努比亞Z50 Ultra攝影師版官宣：31日發(fā)布 4799元
2023-05-25 17:45:14 
快資訊丨C位出道! YOGA Book 9i 翻轉(zhuǎn)雙屏打造靈感生活新標(biāo)桿
2023-05-25 17:42:39 
環(huán)球新資訊：2499起 小米Civi 3發(fā)布：首發(fā)天璣8200-Ultra
2023-05-25 17:33:51 
俄國防部：俄軍艦在黑海遭烏無人駕駛快艇襲擊
2023-05-25 17:31:27 
創(chuàng)新顛覆行業(yè)，洗衣機(jī)產(chǎn)品形態(tài)將迎來重大變革_天天精選
2023-05-25 16:57:27
vivo S17系列定檔5月31日 首創(chuàng)粒子水墨工藝輕薄好手感_焦點(diǎn)資訊
2023-05-25 16:54:54
全球熱文：高通和微軟在Microsoft Build開發(fā)者大會上攜手 推動終端側(cè)AI規(guī)?；瘮U(kuò)展
2023-05-25 16:49:49 
天天視訊！內(nèi)存SSD價格要翻盤？
2023-05-25 16:34:19 
海拉爾蚌埠杭州3個氣象站入選世界氣象組織百年氣象站 全球要聞
2023-05-25 16:02:42 
中沙6000公里的貿(mào)易線路，埃捷國際物流（AJEX）已“輕車熟路”
2023-05-25 16:00:31 
F5 2023科技趨勢線上峰會開幕 讓更好的數(shù)字世界融入生活
2023-05-25 15:45:01 
2499元起！小米Civi 3發(fā)布：全球首發(fā)天璣8200-Ultra
2023-05-25 15:42:29 
最美小米手機(jī)！小米Civi 3發(fā)布：首發(fā)天璣8200-Ultra，2499元起
2023-05-25 15:40:25 
4060Ti喜迎破發(fā)直接九折！
2023-05-25 15:39:55 
1億個理由告訴你：今年618買3C數(shù)碼產(chǎn)品還要選京東
2023-05-25 15:35:22 
化學(xué)式編輯軟件 化學(xué)式編輯器 環(huán)球資訊
2023-05-25 15:09:25 
每日速讀!AMD 3D V-Cache有什么用？戰(zhàn)未來的游戲神U竟然是他！
2023-05-25 14:51:25 
華為 MateBook 14S / 16S 2023 筆記本開售，6599 元起
2023-05-25 14:44:24 
cat6e是幾類網(wǎng)線_cat6e是超6類網(wǎng)線嗎
2023-05-25 14:41:58 
華為舉辦2023創(chuàng)新數(shù)據(jù)基礎(chǔ)設(shè)施論壇，加速全球數(shù)據(jù)生產(chǎn)力躍升-實(shí)時焦點(diǎn)
2023-05-25 13:56:47 
全球觀速訊丨強(qiáng)化監(jiān)督確保送電“不落一戶、不漏一人”
2023-05-25 13:54:03
天天看熱訊：健身比賽激發(fā)職工健身熱
2023-05-25 13:51:59 
葡萄迎豐收 村民笑開顏|全球短訊
2023-05-25 13:51:05 
全球快報:農(nóng)發(fā)行甘肅省分行推進(jìn)業(yè)務(wù)“四合一”促高質(zhì)量發(fā)展
2023-05-25 13:51:00 
4799元！魅族20 PRO京東20周年紀(jì)念款發(fā)布：曙光銀頂配、印有特殊Logo 全球新資訊
2023-05-25 13:50:16 
關(guān)于梅艷芳母親破產(chǎn)是怎么回事 梅艷芳母親破產(chǎn)真相曝光的相關(guān)信息
2023-05-25 13:49:46 
華為發(fā)布2023奧林帕斯懸紅，產(chǎn)學(xué)研攜手推進(jìn)數(shù)據(jù)存儲創(chuàng)新
2023-05-25 13:49:31 
訂單農(nóng)業(yè)生成農(nóng)企雙贏“密碼”
2023-05-25 13:39:13 
TCL華星閃耀SID2023會場，OLED/MLED多項(xiàng)創(chuàng)新顯示技術(shù)領(lǐng)先全球-全球今頭條
2023-05-25 13:35:46 
售價超1400元！蘋果天價旅行保溫杯上架、可定位_當(dāng)前視點(diǎn)
2023-05-25 13:35:37 
焦點(diǎn)關(guān)注：黑龍江省雙鴨山市：聚焦農(nóng)貿(mào)市場整治，助力推進(jìn)文明城市創(chuàng)建
2023-05-25 13:22:51
iPhone 14 Pro系列京東618便宜了：6499元起省了1800元
2023-05-25 12:47:04
微信新增鎖定功能怎么用，已在所有客戶端上線，解鎖方法來了 前沿?zé)狳c(diǎn)
2023-05-25 12:40:18 
今頭條！史低價！游戲神器12490F僅1178元
2023-05-25 12:39:59 
iQOO Pad預(yù)售：2389元起 天璣9000+旗艦
2023-05-25 12:39:34 
京東 618 省錢速通攻略：國產(chǎn) 2T 固態(tài) 409 元，紅米直降1000元-世界焦點(diǎn)
2023-05-25 12:36:48 
世界觀熱點(diǎn)：教育部預(yù)警：堅(jiān)決防范遏制學(xué)生溺水事件發(fā)生
2023-05-25 12:08:12
天天快資訊：富士X-S20正式發(fā)布 京東參與預(yù)售送價值千元好禮
2023-05-25 11:53:57 
天天新消息丨iOS 17要來了！WWDC23正式官宣
2023-05-25 11:51:12 國際商標(biāo)協(xié)會(INTA) 第145屆年會在新加坡舉辦
2023-05-25 11:50:13
史詩級功能來了！Win11支持應(yīng)用程序云備份-全球獨(dú)家
2023-05-25 11:46:30 
英特爾推動生態(tài)大融合 為中國用戶帶來PC創(chuàng)新新體驗(yàn)
2023-05-25 11:41:38
OPPO Find X3 geek bench 4.2單核跑分4280分-天天時快訊
2023-05-25 11:20:48 
環(huán)球熱頭條丨驍龍8 Gen2直屏旗艦！真我GT Neo6曝光
2023-05-25 10:47:03 
青島即墨：“幸?；ā遍_滿山鄉(xiāng)
2023-05-25 10:42:01
【世界聚看點(diǎn)】3199元起！英偉達(dá)RTX 4060 Ti 8G顯卡開賣：公版秒光
2023-05-25 10:33:54 
重磅！珠峰科考“成績單”來了！ 焦點(diǎn)訊息
2023-05-25 10:17:45
朱婷不隨中國女排 征戰(zhàn)世界聯(lián)賽
2023-05-25 09:29:34 
【環(huán)球聚看點(diǎn)】中國平安捐資援建蓄洪區(qū)易地搬遷小學(xué)
2023-05-25 08:52:18 
天天熱點(diǎn)評！打造新型網(wǎng)點(diǎn)服務(wù)市民
2023-05-25 08:49:40 
“銀發(fā)安全守護(hù)”讓老人老有所護(hù)
2023-05-25 08:49:17 
人保壽險發(fā)行120億元補(bǔ)充債券-世界播資訊
2023-05-25 08:49:11
助企搶占發(fā)展先機(jī)_世界快播
2023-05-25 08:46:34 
手握保單 心里不慌-環(huán)球今日報
2023-05-25 08:44:56 
記者觀察：為中小養(yǎng)殖戶搭建“避風(fēng)港”
2023-05-25 08:41:00 
觀熱點(diǎn)：科創(chuàng)金改開先河
2023-05-25 08:36:45 
www2baiducom百度官網(wǎng) www2baiducom 新要聞
2023-05-25 08:29:18 
同方股份：5月24日融資買入5399.42萬元，融資融券余額14.51億元
2023-05-25 07:37:19
交銀康聯(lián)人壽保險有限公司官網(wǎng)_交銀康聯(lián) 聚看點(diǎn)
2023-05-25 07:04:04 
SSD要全面漲價！沒買硬盤的趕緊買
2023-05-25 06:57:44
焦點(diǎn)速看：淚流滿面！Win11終于內(nèi)置RAR格式支持了
2023-05-25 06:56:52 
熱門看點(diǎn)：《英雄聯(lián)盟》衍生游戲來了：售價108元
2023-05-25 06:44:20 
在線觀點(diǎn)：便攜商務(wù)投影如何滿足用戶痛點(diǎn)
2023-05-25 06:41:22 
環(huán)球聯(lián)手AI推出助眠音樂
2023-05-25 06:35:22
新手怎樣學(xué)會買化妝品_需要考慮質(zhì)量嗎
2023-05-25 05:43:58 
相關(guān)新聞