從 Seq2seq 到 Transformer

活動摘要

從 Seq2seq 到 Transformer

議程簡介:

深度學習在自然語言處理領域上的發展非常迅速,從Google提出word2vec以來,各種研究皆以word2vec為基礎進行研究,尤其是在Neural Machine Translation(NMT)領域更是兵家必爭之地,一個優秀的翻譯模型意味著該模型能夠了解人類的翻譯邏輯。

這是一堂關於從Seq2seq到Transformer演進的分享,從中你可以了解到這些模型是如何克服先前模型的缺點

主題介紹:

  1. Seq2seq

  2. Seq2seq with attention mechanism

  3. Transformer

Seq2seq with attention mechanism以及Transformer皆會提供程式碼範例。

延伸補充:

  1. BERT

  2. XLNet

推薦閱讀:

  1. Attention Mechanism

  2. XLNet

 

活動時程:

  • 09:30~10:00 報到

  • 10:00~11:00 分享

  • 11:00~12:00 Q&A

 

講者

康文瑋

來自天天騎山豬的世外桃源—台南,非常喜歡運動,曾參與過橄欖球、划龍舟、馬拉松、拔河等等運動,也是一個無可救藥的貓奴,平時喜歡研究並實現自然語言處理的最新進展,諸如GLUE BenchmarkRACE上的百家爭鳴。

 

要收費嗎?

本次演講不收費。

 

注意:入場方式

由於會場有門禁管制,在報到時間內,會有志工在一樓幫忙引導至會場,如果不小心遲到的會眾,需要在一樓櫃檯留下姓名及手機後,領取一張卡片然後搭電梯至 7F 會場,上樓後再把卡片交給志工。

 

主辦者:Taichung.py 

Taichung.py

我們是一群台中Python程式語言的愛好者,希望在台中可以跟Python同好分享Python有關的訊息或活動,以及相關的技術或知識。

活動相關討論,歡迎加入:Taichung.py FB 社團

events: http://taichung-py.kktix.cc/

 

協辦單位:微程式 -- 夢森林

由微程式所提供中部優質交流的場域空間,偕同相關產業的夥伴以跨領域技術交流為目的,以知識傳遞 | 交流互動 | 價值創造為核心出發,共同打造中部深具影響力的科技服務交流生態圈。

Facebook:https://www.facebook.com/dreamforest.org

 

夢森林 / 台中市市政路402號7樓 (請換取感應卡後右側電梯上樓)

Event Tickets

Ticket Type Sale Period Price
一般票

2019/10/15 17:00(+0800) ~ 2019/10/26 09:00(+0800) End of Sale
  • Free
Next Step