Transformer語言模型如何催生生成式AI的發展？
Answer
Transformer 模型與生成式 AI 的發展
Transformer 語言模型是生成式 AI 發展的基石。台灣大學名譽教授陳良基指出，Google 團隊於 2017 年 6 月提出的 Transformer 模型，揭示了生成式 AI 的雛形。直到 2022 年 ChatGPT 問世後，生成式 AI 才開始有實際應用。這表示生成式 AI 的發展仍處於早期階段。
2025 年 AI 發展趨勢：Agentic AI
隨著 ChatGPT 問世，全球企業紛紛投入 AI 發展。NVIDIA 執行長黃仁勳預測，2025 年將會是 Agentic AI（AI 代理）爆發的年份。在這樣的背景下，台灣應如何利用半導體發展的基礎，加速趕上 AI 的時代，成為重要的課題。
生成式 AI 的挑戰與目標
台灣人工智慧實驗室創辦人杜奕瑾表示，2024 年生成式 AI 的發展面臨三大困境：耗能、訓練成本高昂，以及數據隱私挑戰。以 ChatGPT-4 為例，其最新版本的訓練成本約為 4,100 萬至 7,800 萬美元之間，Meta 則使用超過 1.6 萬張 H100 GPU 訓練其新模型。因此，2025 年生成式 AI 的目標是「謹言慎行」，在解決上述挑戰的同時，確保 AI 的發展更具效率與可靠性。
觀看原始文章國際大型語言模型應用技術觀測- 科技新知
2017年Google提出Transformer模型架構論文，並於2018年推出基於Transformer的BERT模型，帶動後續大型語言模型與生成式AI的快速發展中取得先機。
生成式AI 是什麼？4大模型類型、運作方式與實際應用解析
生成式AI （generative AI）是一種人工智慧（AI）技術，可以通过深度学习來快速創造圖像、文字、音樂等内容。
Generative AI exists because of the transformer
The LLM is underpinned by a scientific development known as the transformer model, made by Google researchers in 2017.
Generative AI with LLMs Certification | NVIDIA
Building Transformer-Based Natural Language Processing Applications · Core Machine Learning and AI Knowledge · Software Development · Experimentation · Data...
你想知道哪些？AI來解答
Transformer 模型首次提出於何時？
ChatGPT 的出現標誌著生成式 AI 的什麼轉變？
黃仁勳預測 2025 年 AI 發展的關鍵趨勢是什麼？
台灣在 AI 時代發展上，應如何利用其半導體優勢？
生成式 AI 在 2024 年面臨的關鍵挑戰有哪些？
你覺得這篇文章有幫助嗎？
有幫助
沒幫助
回報問題
1
0
0
分享給好友
