活動摘要
從 Seq2seq 到 Transformer
議程簡介:
深度學習在自然語言處理領域上的發展非常迅速,從Google提出word2vec以來,各種研究皆以word2vec為基礎進行研究,尤其是在Neural Machine Translation(NMT)領域更是兵家必爭之地,一個優秀的翻譯模型意味著該模型能夠了解人類的翻譯邏輯。
這是一堂關於從Seq2seq到Transformer演進的分享,從中你可以了解到這些模型是如何克服先前模型的缺點。
主題介紹:
-
Seq2seq
-
Seq2seq with attention mechanism
-
Transformer
Seq2seq with attention mechanism以及Transformer皆會提供程式碼範例。
延伸補充:
-
BERT
-
XLNet
推薦閱讀:
活動時程:
-
09:30~10:00 報到
-
10:00~11:00 分享
-
11:00~12:00 Q&A
講者
康文瑋
來自天天騎山豬的世外桃源—台南,非常喜歡運動,曾參與過橄欖球、划龍舟、馬拉松、拔河等等運動,也是一個無可救藥的貓奴,平時喜歡研究並實現自然語言處理的最新進展,諸如GLUE Benchmark、RACE上的百家爭鳴。
要收費嗎?
本次演講不收費。
注意:入場方式
由於會場有門禁管制,在報到時間內,會有志工在一樓幫忙引導至會場,如果不小心遲到的會眾,需要在一樓櫃檯留下姓名及手機後,領取一張卡片然後搭電梯至 7F 會場,上樓後再把卡片交給志工。
主辦者:Taichung.py
Taichung.py
我們是一群台中Python程式語言的愛好者,希望在台中可以跟Python同好分享Python有關的訊息或活動,以及相關的技術或知識。
活動相關討論,歡迎加入:Taichung.py FB 社團
events: http://taichung-py.kktix.cc/
協辦單位:微程式 -- 夢森林
由微程式所提供中部優質交流的場域空間,偕同相關產業的夥伴以跨領域技術交流為目的,以知識傳遞 | 交流互動 | 價值創造為核心出發,共同打造中部深具影響力的科技服務交流生態圈。
Facebook::https://www.facebook.com/dreamforest.org