這是我看過最好的一篇GPT-3 科普文章。到現在還看不懂GPT-3的，建議好好讀：

本文來自量子位微信公眾號
…………………………………………

火爆全球的GPT-3，到底憑什麼砸大家飯碗？

GPT-3是指第三代生成式預訓練Transformer，它由三藩市AI公司OpenAI開發。該程式歷經數年的發展，最近在AI文本生成領域內掀起了一波的創新浪潮。

從許多方面來看，這些進步與自2012年以來AI影像處理的飛躍相似。

電腦視覺技術促進了、無人駕駛汽車到面部識別、無人機的發展。因此，有理由認為GPT-3及其同類產品的新功能可能會產生類似的深遠影響。

與所有深度學習系統一樣，GPT-3也是資料模式。它在龐大的文本集上進行了訓練，並根據統計規律進行了挖掘。

重要的是，此過程中無需人工干預，程式在沒有任何指導的情況下查找，然後將其用於完成文本提示。

▌海量訓練數據

GPT-3的與眾不同之處在於它的運行規模和完成一系列令人難以置信的任務。

第一版GPT於2018年發佈，包含1.17億個參數。2019年發佈的GPT-2包含15億個參數。

相比之下，GPT-3擁有1750億個參數，比其前身多100倍，比之前最大的同類NLP模型要多10倍。

GPT-3的訓練資料集也十分龐大。整個英語維琪百科（約600萬個詞條）僅占其訓練數據的0.6％。

訓練資料的其他部分來自數位化書籍和各種網頁連結。不僅包括新聞文章、食譜和詩歌之類的內容，還包括程式碼、科幻小說、宗教預言等各種你可以想像到的任何文字。

上傳到互聯網的文本類型都可能成為其訓練資料，其中還包括不良內容。比如偽科學、陰謀論、種族主義等等。這些內容也會投喂給AI。

這種不可置信的深度和複雜性使輸出也具有複雜性，從而讓GPT-3成為一種非常靈活的工具。

在過去的幾周中，OpenAI通過向AI社區的成員提供GPT-3商業API，鼓勵了這些實驗。這導致大量新的用法出現。

下面是人們使用GPT-3創建的一小部分示例：

▌GPT-3能做什麼

1、基於問題的搜尋引擎：就像Google，鍵入問題，GPT-3會將定向到相關的維琪百科URL作為答案。

2、與歷史人物交談的聊天機器人：由於GPT-3接受過許多數位化書籍的訓練，因此它吸收了大量與特定哲學家相關的知識。這意味著你可以啟動GPT-3，使其像哲學家羅素一樣講話。

3、僅需幾個樣本，即可解決語言和語法難題。

4、基於文本描述的代碼生成：用簡單的文字描述你選擇的設計項目或頁面配置，GPT-3會彈出相關代碼。

5、回答醫療問題：來自英國的一名醫學生使用GPT-3回答了醫療保健問題。該程式不僅給出了正確答案，還正確解釋了潛在的生物學機制。

6、基於文本的探險遊戲。

7、文本的風格遷移：以某種格式編寫的輸入文本，GPT-3可以將其更改為另一種格式。

8、編寫吉他曲譜：這意味著GPT-3可以自行生成音樂。

9、寫創意小說。

10、自動完成圖像：這項工作是由GPT-2和OpenAI團隊完成的。它表明可以在圖元而不是單詞上訓練相同的基本GPT體系結構，從而使其可以像在文字上一樣實現視覺資料自動完成任務。

但是，所有這些樣本都需要一些上下文，以便更好地理解它們。而令人印象深刻的是，GPT-3沒有接受過完成任何特定任務的訓練。
常見的語言模型（包括GPT-2）需要完成基礎訓練，然後再微調以執行特定任務。

但是GPT-3不需要微調。在語法難題中，它只需要一些所需輸出類型的樣本（稱為“少量學習”）。

GPT-3是如此龐大，以至於所有這些不同功能都可以在其中實現。用戶只需要輸入正確的提示就可以調教好它。

但是網上傳出的內容存在另一個問題：這些都是精心挑選的樣本，生成結果肯定不止一個。必然有炒作因素。

正如AI研究人員Delip Rao在一篇針對GPT-3的炒作解構文章中指出的那樣，該軟體的許多早期演示來自矽谷企業家，他們渴望宣傳該技術的潛力並忽略其陷阱，因為他們關注AI帶來的新創業公司。

的確，瘋狂的鼓吹情緒變得如此強烈，以至於OpenAI CEO本人都發Twitter說：GPT-3被過度宣傳了。

▌GPT-3也會犯低級錯誤

儘管GPT-3可以編寫代碼，但我們很難判斷其總體用途。它是淩亂的代碼嗎，這樣的代碼會為人類開發人員帶來更多問題嗎？

沒有詳細的測試很難說，但是我們知道GPT-3在其他方面會犯嚴重錯誤。

當用戶和GPT-3創造的“約伯斯”交談時，詢問他現在何處，這個“約伯斯”回答：“我在加州庫比蒂諾的蘋果總部內。”這是一個連貫的答案，但很難說是一個值得信賴的答案。

在回答瑣事問題或基本數學問題時，也可以看到GPT-3犯了類似的錯誤。例如，不能正確回答100萬前的數是多少（回答是99萬）。

但是，我們很難權衡這些錯誤的重要性和普遍性。

如何判斷這個可以幾乎回答所有問題的程式的準確性？如何創建GPT-3的“知識”的系統地圖，然後如何對其進行標記？

儘管GPT-3經常會產生錯誤，但更加艱巨的挑戰是，通常可以通過微調所輸入的文本來解決這些問題。

用GPT-3創造出小說的研究人員Branwen指出，“抽樣可以證明知識的存在，但不能證明知識的缺失”，可以通過微調提示來修復GPT-3輸出中的許多錯誤。

在一個錯誤的示範中，詢問GPT-3：“哪個更重，一個烤麵包機或一支鉛筆？” 它回答說：“鉛筆比烤麵包機重。”

但是Branwen指出，如果你在問這個問題之前給機器投喂某些提示，告訴它水壺比貓重，海洋比塵土重，它會給出正確的回應。

這可能是一個棘手的過程，但是它表明GPT-3可以擁有正確的答案，如果你知道怎麼調教它。

Branwen認為，這種微調最終可能會最終成為一種編碼範例。就像程式設計語言使用專用語法的編碼更加流暢一樣，未來我們可能完全放棄這些程式設計語言，而僅使用自然語言程式設計。從業人員可以通過思考程式的弱點並相應地調整提示，來從程式中得出正確的回應。

GPT-3的錯誤引起了另一個問題：該程式不可信的性質是否會破壞其整體實用性？

現在人們已經嘗試了GPT-3各種用途：從創建客服機器人，到自動內容審核。但是答案內容的錯誤可能回給商業公司帶來嚴重後果。

沒有人原因創建一個偶爾侮辱客戶的客服機器人。如果沒有辦法知道答案是否可靠，我們也不敢拿GPT-3作為教育工具。

▌專業人士評價

一位匿名的在Google資深AI研究人員說，他們認為GPT-3僅能自動完成一些瑣碎任務，較小、更便宜的AI程式也可以做到，而且程式的絕對不可靠性最終會破壞其商用。

這位研究人員指出，如果沒有很多複雜的工程調試，GPT-3還不夠真正使用。

AI研究人員Julian Togelius說：“ GPT-3的表現常常像是一個聰明的學生，沒有讀完書，試圖通過廢話，比如一些眾所周知的事實和一些直率的謊言交織在一起，讓它看起來像是一種流暢的敘述。”

另一個嚴重的問題是GPT-3的輸出存在偏見。英偉達的AI專家Anima Anandkumar教授指出，GPT-3在部分程度上接受了Reddit過濾後的資料的訓練，並且根據此資料構建的模型產生的文本有“令人震驚地偏向性”。

在GPT-2的輸出中，如果要求完成下列句子時，模型會產生各種歧視性言論：“ 黑人（皮條客工作了15年）”、“ 那個女人（以Hariya為名做妓女）”。
參考連結：
https://www.theverge.com/21346343/gpt-3-explainer-openai-examples-errors-agi-potential

以真實世界的範例學習所有關於基本的 Python ，到進階 Python 以及 TKINTER 與 DJANGO 。

從這 49.5 小時的課程，你會學到

✅ 學習程式設計的基礎知識
✅ 學習 Python 程式設計語言
✅ 學習 Django & Bootstrap 框架
✅ 為真實世界的 Python 程式編寫程式碼
✅ 用 Python Django 建立一個真實世界的網站
✅ 學習使用 TKInter 建立 UI
✅ 建立和執行真實世界以文字為基礎的 RPG 遊戲

https://softnshare.com/python-django-tkinter-complete-bund…/

--課程已於 2020 年 2 月更新--

以真實世界的範例學習所有關於基本的 Python ，到進階的 Python 以及 TKINTER 與 DJANGO 。

從這 49.5 小時的課程，你會學到

✅學習程式設計的基礎知識
✅學習 Python 程式設計語言
✅學習 Django & Bootstrap 框架
✅為真實世界的 Python 程式編寫程式碼
✅用 Python Django 建立一個真實世界的網站
✅學習使用 TKInter 建立 UI
✅建立和執行真實世界以文字為基礎的 RPG 遊戲

https://softnshare.com/python-django-tkinter-complete-bundle-advance/

EXCEL VBA與資料庫(進階97)第8單元大樂透下載重點回顧與改用IE物件&用IE抓取TD標籤中的資料與改為抓取東吳網站資料&觀測站資料下載重點與工作表分割&批次將工作表轉存為工作簿&轉換細節說明與刪除檔案&增加FileDialog取得路徑與判斷資料夾是否為空&判斷目錄是否存在與轉為PDF檔&合併回單一活頁簿與FileDialog使用)

上課內容：
01_大樂透下載重點回顧與改用IE物件
02_改用IE抓取大樂透資料程式說明
03_用IE抓取TD標籤中的資料與改為抓取東吳網站資料
04_修改用東吳推廣部網站抓取資料與觀測站資料下載
05_觀測站資料下載重點與工作表分割
06_批次將工作表轉存為工作簿
07_轉換細節說明與刪除檔案
08_增加FileDialog取得路徑與判斷資料夾是否為空
09_判斷目錄是否存在與轉為PDF檔
10_合併回單一活頁簿與FileDialog使用

完整影音
http://goo.gl/aQTMFS

教學論壇：
https://groups.google.com/forum/#!forum/scu_excel_vba2_97

與前幾期的課程雖然用的是相同的範例，但最大的不同在：
1.除了解說建函數公式，並將之轉成自訂函數，把複雜的公式變簡單。
2.如何將複雜的公式變成簡單的按鈕，按下按鈕就自動完成工作。

內容主要分成：
第1單元_大數據輸入自動化與R語言的比較說明
第2單元_大數據表單與資料庫
第3單元_大數據工作表合併與匯出資料庫
第4單元_EXCEL當資料庫與查詢系統建立
第5單元_批次查詢與雲端與網路下載資料
第6單元_工作表排序(大到小、筆畫、清單)
第7單元_工作表處理(顯示、顏色、複製與刪除)、活頁簿與檔案處理(工作表分割與合併活頁簿)
第8單元_表格與圖表處理(自動繪製圖表)、圖案處理(快速匯入圖片到EXCEL)

有講義與範例和完成的畫面公式與程式碼，
只要按照每周的順序學習，學會EXCEL VBA自動化絕非難事，
優點：
1.可非線性學習：可按照自己最不熟的部分多次學習。
2.可反覆學習：有疑問可以多次聽講，保證學的會。
3.可攜帶學習：只要有瀏覽器就可以播放SWF檔，MAC電腦也沒問題。

上課參考用書：
看！就是比你早下班－50個ExcelVBA高手問題解決法
作者：楊玉文 出版社：松崗
Excel VBA一點都不難：一鍵搞定所有報表
作者：?Excel Home
出版社：博碩

課程理念:
1.以循序漸進的方式, 透過詳細的說明和實用的Excel VBA範例, 逐步了解整個 VBA 的架構與輪廓,進而學習 VBA 變數、函式及邏輯的觀念, 即使沒有任何程式設計基礎, 也能自己親手撰寫 VBA 程序來提昇工作效率, 晉身職場 Excel 高手！ 2.進而解說EXCEL與資料庫的結合，將EXCEL當成資料庫來使用，結合函數、VBA等更深入的功能，讓資料處理和分析的應用更上層樓。 3.將結合GOOGLE雲端試算表，教您如何將EXCEL函數雲端化與網路化。

更多EXCEL VBA連結：
01_EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
02_EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524

吳老師 2016/12/6

EXCEL,VBA,函數東吳進修推廣部,EXCEL,VBA,函數,程式設計,線上教學,excel,vba,教學,excel,vba指令教學,vba範例教學excel,,excel,vba教學視頻,excel函數教學,excel函數說明,excel函數應用

淡江資工Android證照專班(1)

想快速學會APP設計與開發，建議可以先從JAVA先聽完並練習，
再學習光碟19，之後銜接光碟21進階或光碟14比較偏證照考試。

光碟24_從JAVA入門到智慧型手機設計 目錄 http://goo.gl/1XOOG
光碟30_JAVA7物件導向(2013) 艾鍗學院96小時上課 目錄： http://goo.gl/Wjbjo9
光碟31_智慧型手機入門(2013) 勞工大學48小時上課 目錄：http://goo.gl/qMTc9E
光碟32_淡江資工Android證照解題(2013) 淡江資工40小時上課 目錄：http://goo.gl/q1eQkr

想快速學會APP設計與開發，建議可以先從光碟24--30--31--32

完整教學影音DVD分享申請
http://terry55wu.blogspot.tw/p/dvd.html

Android 教學研習心得分享懶人包：
http://terry55wu.blogspot.com/p/android.html

智慧型手機(Android)設計入門總整理
http://terry55wu.blogspot.tw/p/android_5.html

Android論壇：
https://groups.google.com/group/android_bisic?hl=zh-TW

偶然機會，因在設計教學超過十年經驗，從VB教到VB.NET，從ASP教到ASP.NET，
從.NET再教到 JAVA程式設計，進而教到 Google Android，
一路在各大補教與勞大、文大推廣教育部與湜憶電腦接連開課，
暑期受淡江大學資工系之邀，擔任了Google Android程式開發的講師，
半個月下來有些許感受，撰寫成文，以茲紀錄。

二、系上積極：
這次的Google Android2課程是淡江資工系老師們用心規劃的結果，在暑假期間，
把同學找來上課實屬不異，原本以為是系上強迫參加，經詢問同學才知道都是自願學習這樣課程，
而學生只需要繳交600元的TQC+Google Android2證照報名費與1000元押金即可，並不得無故缺課，
否則不退回押金。系上的用心是課以看的見，除了提早在全國之前開辦Google Android2課程外，
也率先引進Google Android2認證，希望讓學生不只學會 Google Android2，更要考試同過並取得認證才行，
這樣大大提升學生畢業後的就業能力，以職場目前對Google Android2工程師的求才若渴，
相信如果認真學習 Google Android2的學生，完全不用擔心工作問題，若取得TQC+Google Android2證照，
在找工作面試上一點有很大的助益。

三、課程安排：
由於大部分的同學都沒有學過 Google Android2的程式開發，因此學習的進度自然要做些調整，
因此在課程的安排上，以實例上機練習為主，理論為輔。課程設計流程：
1.開發環境快速設定。
2.ECLIPSE環境介紹。
3.基本元件的使用範例設計。
4.進階元件的使用範例設計。
5.TQC+Google Android2第一類題目解說。
6.TQC+Google Android2第二類題目解說。
7.TQC+Google Android2第三類題目解說。

雖說想將TQC+的三類題目講解完畢，但無奈課程時間只有30小時，
講完進階元件後時間所剩無幾，最後只能講到TQC+Google Android2第二類，之後的題目就用網路補充，
把後面未講完的程式碼放在雲端空間，讓同學自行練習。

結論：
淡江資工系系上對學生未來課程規劃是相當積極，學生的學習動機也不算太差，
程度上雖有兩極化趨勢，但只要原因還是在課程時數不足，造成學習無法全面所致。
因此，TQC+的題目設計對目前的資工系學生來說，由於Google Android2程式開發素養不足而感覺偏難，
但隨智慧型手機程式開發風氣漸漸提升，大家的程度也變的更好，
屆時試題難度也漸趨與合理化，Google Android2證照將不再高不可攀，我也大膽預估，
TQC+Google Android2將成為資訊相關科系畢業前必備的一張基本證照。

淡江資工Andriod程式開發第2天上課

前面課程很輕鬆得讓大家能快速建置ANDROID開發環境，
並全盤有系統的學習ANDROID開發流程：
1.如何建立專案
2.如何設計界面，IDE工具使用與XML檔案的修改
3.如何輕鬆撰寫程式的流程：1.宣告 2.連結 3.傾聽 4.執行

有條不紊的設計程式，讓設計程式變成一種樂趣。
並隨時講解 ECLIPSE設計工具的使用秘笈，讓開發程式更有效率。
之後也將融入 TQC+Android2行動裝置開發證照，
除了讓學習更有目標，也能在未來就業求職得到更大的支持，
目前TQC+Android2行動裝置開發證照已與宏達電等大廠簽訂人力合約，
屆時能使找工作更順利。
並期望能在之後的課程輔導學生取得證照，
已目前對智慧型手機開發工程式的供不應求的情形來看，
學會Android並取得證照，要找到相關工作應不成問題。
教的 Google Andriod 程式開發課程，感覺還蠻有成就感的，
應淡江大學資工系邀請，教大學生Google Andriod 程式開發課程，
將會融入Andriod證照，讓學生學完也能考到證照。

吳老師 100/8/2

新書上架：《 10天做好APP【實作進化版】：Corona SDK跨平台遊戲開發攻略，不懂程式也沒差》
容易上手、進入無門檻：程式碼全面解析，讓沒有寫過程式的人，跟著學也會懂。
公開範例原碼：完全解析熱門APP遊戲程式碼，讓你邊玩邊輕鬆學習。
實機測試與上架：真正雙平台！一步一步教導將APP上架至iPhone和Androi­d平台。

歡迎大家來參考一下，博客來書籍連結： http://www.books.com.tw/products/0010649556