練功的課程已經結束，我們要開始闖蕩江湖了。關於自然語言處理，近年來最重大是OpenAI於2020年6月11日所推出的GPT-3，"GPT-3的神經網路包含1750億個神經，為全世界參數最多的神經網路模型"，而下圖我引述李宏毅教授對於GPT-3的簡介文件中的一頁：
關於GPT-3的強大，推薦可以看這部影片，裡面有GPT-3的實測，除了廣為人知的文章生成，另外還有聊天問答，且聊天的人物還可以設定個性!?此外具有2019年以前的知識…
而在影片中也提到用GPT-3做的Copilot可以幫忙程式碼補全，這篇文章作者認為可以節省4成時間!
那為什麼標題是GPT-2，因為GPT-3對我來說就像李宏毅教授所說的"來自暗黑大陸"遙不可及 ，而GPT-2已經有大神提供的開源資源，而且還是用在中文的。讓我們繼續看下去...
iThome鐵人賽
看影片追技術