阿里巴巴 AI 「看圖回答」 測驗擊敗微軟、臉書、特斯拉，準確率還首次超越人類！

陳宜伶
2021-08-25

看圖回答問題是人類生活及溝通的基本條件，但是對 AI 來說卻是一項高難度任務。

阿里巴巴達摩學院打造出來的 AI 語言模型 AliceMind，幾天前首度打破圖像問答（VQA）世界紀錄，答題準確率甚至超越人類基準，並且擊敗同樣有參加挑戰的微軟、FB 隊伍，象徵達摩學院的人工智慧技術邁出關鍵一步。

VQA 挑戰是什麼？

圖像問答（Visual Question Answering）挑戰的緣起，是因為國際電腦視覺與技術辨識大會 （Conference on Computer Vision and Pattern Recognition，CVPR）希望鼓勵企業攻克 AI 多模態機器學習（MultiModal Machine Learning）的難題，因此從 2015 年開辦 VQA 挑戰賽，吸引來自世界各地的網路企業、科研單位參賽。

今年的 VQA 挑戰賽和往年一樣，題庫包含了超過 25 萬張真實照片，總共有 110 萬道題目。這些題目會考驗 AI 是否能辨別圖像，比如說在一張人群的照片中算出有幾個兒童、或是在圖片中辨認出書桌上的車鑰匙，進而推測房間主人是有車的。

VQA 技術已經被廣泛導入阿里巴巴平台，像是它的 AI 客服機器人「小蜜」（Alime）就已經被淘寶、天貓商家等電商平台採用。消費者輸入問題後，AI 客服會根據商品資訊和顧客問題給出答案。

另一方面，VQA 技術不僅能運用在電商，還可用於醫學圖像辨識，以及電動車的智慧駕駛分析。

阿里巴巴的 AI 模型為何成績能夠超越人類？

這幾年人工智慧（AI）逐漸滲透到各行業，也推動更多科技革命，AI 技術逐漸成為企業數位轉型、對抗疫情，並讓經濟重返正軌的重要力量。

由阿里巴巴達摩學院打造的 AI 深度語言模型系統 AliceMind 在這次的 VQA 測驗中，答題準確率拿到 81.26%，首次超越了人類答題的準確率 80.83% ，更讓馬雲投資的達摩學院在 AI 發展上取得重大進展。

AliceMind 採用了多種專有技術，包括多樣化的視覺表示（diverse visual representations）、「多模態」預訓練語言模型（multimodal pretrained language models）、「跨模態」語義融合和對齊技術（ adaptive cross-modal semantic fusion and alignment technology）。這些技術不僅可以讓阿里巴巴的 AI 理解問題並分析圖像，還可以讓 AI 用近似人類的語感回答問題。

阿里巴巴達摩院自然語言處理（NLP）負責人 Si Luo 表示：「這代表我們在『機器學習』領域又取得了一個重要里程碑，AliceMind 在視覺與文本的『多模態』理解及推理上，測試分數媲美人類認知水準，彰顯了我們研發 AI 的努力成效。」

打造出這款 AI 模型的達摩學院是什麼來歷？

2017 年，馬雲認為阿里巴巴應該要把眼光放遠，致力解決未來世界經濟、社會等問題，在此願景下成立了研究單位「達摩學院」（ DAMO Academy），號稱要在 3 年投入超過 1000 億人民幣，將重點放在基礎科學和顛覆式技術創新研究上。

Si Luo 表示，人工智慧分為運算智慧、感知智慧、認知智慧及創造智慧 4 個層次。這次 AliceMind 參與的 VQA 測試內容屬於認知智慧部份。

負責人也補充說，這不代表有一天我們會被機器人取代，反而這些智慧機器可以用來輔助我們的日常工作和生活，因此人們可以很專注在他們擅長的創作上。

資料來源：https://buzzorange.com/techorange/2021/08/25/vqa-ai-alibaba/

W2 2021/4/28(星期三)
早安，今天的午餐是義大利餃，
本來是想做成白醬，
但怕鮮奶和起司的白醬料理燜著容易酸敗，
所以做了白醬當早餐，紅醬當午餐。

繼續寫稿分享經驗，今天寫實的內容，會讓你們看到我作為母親失敗的一面，很醜陋，但我還是要寫出來，希望你們不要跟我一樣，升學主義其實是一面照妖鏡，讓我原型畢露😭。

陽陽升學記（四）

「私校！真的不能開玩笑」

雖然我們一開始就決定讓女兒讀公校，但女兒對私立學校一直有著憧憬，媽媽我這個愚婦也想做個測試，想想女兒在校成績還不錯，如果去報考私校獎學金，不知道會有什麼樣的結果？？想看看女兒是否有競爭力，還是其實只是在學校厲害，在校外就是被甩尾？（千萬千萬不要學我，這是一個負面教材，我到現在還在後悔，請繼續看下去）

我們在經過多方面詢問之後，報考了兩家附近的私立學校，一間是離家近，口碑不錯，但獎學金通常給的不高，大約50%，所以就算考上最高獎學金，去讀的機率也不大，但還是想給女兒增加經驗值，就報了。（稱學校D）

學校E：是基督教學校，主校區的風評很不錯,評鑑分數也很優，近幾年在我們家附近開設了分校，因為是新學校，所以網路上還沒有評鑑分數，新聞報導這是當地最豪華富麗的學校，各項設備都相當新穎。透過友人的朋友分享孩子在該校就讀的經驗談，聽起來是校風蠻平和，師生友善的學校，該校的獎學金最高額度可以發放到100% ，雖然我們不曾肖想100%獎學金，但想看看能爭取到多少？這個學校我們除了參加學術獎學金考試，還報考了音樂獎學金，雖然音樂獎學金的報考資格是要小提琴通過三級以上，陽陽目前只拿到二級檢定證書，練完三級，正在準備四級檢定考試。所以我們只能上呈二級檢定證書，反正只在參加，不在得獎。

報考私立學校，大人的心裡是去考個經驗值，可是小孩卻非常認真而渴望（女兒一開始沒有表現出來，我們也不知道），尤其是那所學校E，自從他去考試，學校免費提供的橡皮擦，聽說一個要五元澳幣，輕輕一擦就乾淨，而且還不會有橡皮擦屑，他就覺得這個學校是他的第一志願。而且校長和老師都非常和善，讓他的第一場考試一點也不緊張，他好愛這個學校。這個學校的試題是綜合考題，學校自己的題庫，考智力測驗（General Ability）和數學，英文，科學等綜合考題。

至於學校D，從報到開始，到監考老師都是結屎臉，氣氛整個很凝重，陽陽說他沒想讀這個學校。該校考試的題庫是採取ACER 系統的試題。（各大系統的考題這個部分解釋起來很複雜，而且我也很混亂沒搞清楚，所以請朋友們自行搜尋資料喔），女兒說這個系統和他們學校考試的系統是一樣的，所以考試題型他很熟悉。這個學校上學期考完到現在都還沒放榜，但許多人趨之若鶩，還在苦等消息。

考完試之後大約三週左右，我們幾乎同時收到了學校E的音樂考試，和校長的面試通知，在經過協調後，我們先約了音樂考試，幾天後再約校長面試。音樂考試那天，陽陽帶了小提琴，長號和鼓棒，但主要還是以小提琴為主，有兩個主考官，笑容滿面詢問女兒希望父母在現場，還是離開，女兒希望我們離開，他要單獨面對，於是我們被請到了外面，但仍然可以聽到女兒的演奏，老師請他演奏了三級檢定的琴譜之一，再請他演奏一首四級檢定的琴譜，最後又拿出一首她從沒演奏過的曲子，請他即席演奏，那首曲子她表現得真好，真是好，我在外面聽到先問老杯：「這是你女兒演奏的嗎？他沒有拉過這首曲子啊？還是老師在示範？」圈圈往裡面一看說：「是姐姐在拉」，接著，我們以為這樣就可以打包回家，誰知道竟然還有面談，這一環是我們完全沒有準備的，老師問了一些問題，大家可以參考：
「音樂獎學金對你的意義是什麼？」
「如果你拿到這個獎學金，你會為我們學校帶來什麼好的示範？」
「如果你沒有拿到音樂獎學金，你還會來讀我們學校嗎？」

這些問題，除了第三題由老杯回答，「沒有獎學金，就不來讀」當然不是這麼直白，但白話文就是這樣的意思。
其他問題陽陽幾乎都是幾個單字回答，甚至稱不上是句子，最多就是片語，也就是表現無可圈，無可點，一塌糊塗。就這樣大家有點沮喪的離開了學校，是我們沒有做好準備，想說平常心，結果太平常，就顯得沒有用心。我想，算了，反正也沒有認真覺得可以讀到私立學校。

回到家，晚餐後，女兒主動要求我協助他準備和校長的面試，他說他想好好表現在下一次面試，她表現出了得失心和企圖心，但其實我比較希望他能考上公立A學校，所以我便立下一個不可能的任務說：「除非你拿100%的獎學金，不然我們經濟上沒有辦法支持你讀這個學校。」女兒點頭說他知道，雖然今天表現不好，但他還是想做最後的努力，看看結果會在哪裏！

於是我開始參考網路上大家分享的面試考題，集結彙整之後，和她做練習，基本上都是他自己思考答案，有些她答非所問的問題，再跟他解釋這個題目主要的問的是什麼方向，請她重新思考，或是她有遺漏的地方，再提醒補充，等我跟她練完之後，老杯再跟她正式演練，主要讓她可以放鬆心情，不會腦筋空白，有準備就不緊張。

終於到了和校長面試那一天，下了幾天的傾盆大雨，學校E校區淹水，全面停課，但教職員有上班，面試照常進行，由老杯陪著女兒一起前往參加。

校長見面之後，只寒暄了幾句話，準備的面試全部沒有派上用場，就直接拿出了信封，並恭喜陽陽獲得100%的全額獎學金，而且一次給7~12年級共6年免學費，並誇讚他在學術考試成績的表現優異，同時音樂造詣上也獲得主考老師很高的評價，學校今年一共頒發兩個100%的獎學金，她就是其中之一。 當然校長還Bala bala的說著一入學就免費提供全新的IPAD，九年級就提供全新的蘋果電腦，兩年更新一部，畢業可以用很低的價格購回，還有九年級墨爾本的旅行.....等等各種誘因，說得陽陽歡喜不已，然後轉身又鼓勵老杯馬上簽名繳費$370，接受這個獎學金，還好老杯有把理智帶出門，說要回家和老婆討論，並且擇日參觀學校後再做決定，校長更厲害，當場請秘書敲時間，他說要親自帶看學校。（真的超積極延攬陽陽入校）

回家的路上，女兒就打電話報喜了，我真是非常引以為傲，在電話那頭尖叫出聲，原來我女兒這麼優秀，竟然能得到全額獎學金，我也是當下決定讓他去讀了。晚餐，吃了女兒要求的麥當勞慶祝，弟弟也沾了光，大家喜悅的討論著，只有陽陽很平靜，沒有一點驕傲之情，只說他心裡放下一塊大石頭，吃過晚餐，照樣默默進房寫功課，然後看自己喜歡的書籍和畫圖。

晚餐後，我才開始拿起獎學金的通知函仔細的閱讀，這個全額獎學金，原來並不是完全免費入學，你還是得付學雜費，書本費，還有那不知道金額多少的九年級墨爾本之旅的旅費，算一算，我們一年至少還得拿出3000澳幣來支付（其他中間會延伸什麼費用還不知道）。三千澳幣，不是大問題，問題是他有一個條款是，如果你在中途轉學，你必須歸還全額的學費，意思就是能進不能出。如果女兒讀的不開心，我們沒有經濟能力讓他轉學，只能讓他忍耐讀完，又或者萬一科學家那天想轉換工作，要離開這個城市，那就是得付一筆贖身費，這是一個冒險，我們夫妻不敢也不想冒這個險。
另外還有一個原因是，這個學校講求資源公平分配，所以對於學科比較好的學生，並沒有提供其他的資源做課程延伸教學，當然我們可以尊重，但這並不適合陽陽，因為她是遇強則強的孩子，沒有挑戰性時，她就會成了一個偷懶然後過度自信，而疏於學習的人。（覺得什麼都很簡單，什麼他都會了）

本來想隔天再跟女兒說，但是長痛不如短痛，還是把他叫到房裡來，我和老杯跟她分析，然後告訴她：「對不起，我們沒有能力準備一筆錢讓你後悔。」，她說：「我去讀一定不會後悔」，但是他了解「其實3000元一年，對家裡也是一筆開銷，我們可能會因此犧牲掉旅行的經費，減少外食的確幸，讓省吃儉用的父母更省吃儉用，所以他願意放棄。」老杯聽完，低著頭驀然離開，在房門關上的那一霎那，女兒抱著我嚎啕哭了，從來沒有看他哭得這麼傷心，這麼聲嘶力竭的放聲哭泣，我也跟著哭了。老杯在門外自責自己能力不足，遠遠的走到外面花園，希望能夠離女兒的哭聲遠一點，可是依舊這麼心痛。這個獎學金帶來的喜悅，也不過是三個小時的時間，接著就是無限的遺憾。我們經濟小康，我們並不窮困，但是面對私立學校，即使在孩子爭取到全額獎學金之後，我們仍然無力輕鬆負擔。而且我們還有第二個孩子，萬一圈圈也考上這個學校，聽說不管孩子再優秀，學校也不可能給同一家孩子兩個全額獎學金的名額，如果一個拿全額獎學金，另一個最多也是50%，那麼幾年後，要給圈圈讀，還是不給讀？

我後悔，我笨蛋，為什麼不調查清楚，全額獎學金並不是0付費，為什麼資訊不清不楚就讓女兒報考？為什麼不相信他的能力？既然不讓她讀，為什麼還要報考？做什麼測試，為什麼要拿女兒的成績來測試？為什麼開了條件卻不能屢行承諾？我氣得想打自己，我是一個很壞很失敗的媽媽。是我讓女兒這麼小就要去承受現實殘酷而帶來的遺憾。

請你們一定要以此借鏡，不要像我一樣，這麼糟糕。不要用這樣的方式去測試孩子的能力，來，你們一人罵我一句，我都接受。

未完。待續。

【2020中國記者節： 二十萬記者通過「習思想」考試】

▫️報導全文：https://pse.is/38jmr2
▫️報導英文版：https://pse.is/39hmch

▪️🇨🇳全年發放20.5萬張中國記者證 史上最多

「有我們在！祖國，請放心！」

2020年11月8日，在一場由中宣部、中央網信辦、國家廣電總局、中國記協聯合主辦的中國記者節慶祝大會上，十三位獲得優秀中國記者獎之一的孫偉帥，站在全景大紅色的布幕前，慷慨激昂地宣示「記錄偉大中國故事」的決心，獲得滿堂掌聲。

一個半小時的中國記者節特別節目，最後在央視主持人向記者同行的喊話聲中結束：

「朋友們，讓我們更緊密團結在以習近平同志為核心的黨中央周圍…...實現中華民族偉大復興的中國夢。」

—

中國官方在2019年底要求記者需要通過以習近平發言為主的「#学习强国」考試。

本台根據國家新聞出版署的公開數據統計，截至2020年10月30日，共有20.5萬的中國記者通過「習思想」考試，拿到一本護照大小、紅底鑲金字的中國新聞記者證。

自2010年有中國官方公開記錄以來，平均每年發放兩萬多張記者證，僅在2015年全面換發時有達到十二萬張的紀錄。

對於此次記者證的大規模發放，曾參與創辦《南方都市報》及《新京報》的資深中國媒體人 #程益中 說，這顯示了中國官方宣傳口達到自信的高峰，相反，跟中國新聞的自由與活躍度，「一點關係也沒有」。

「（中國政府）自信在終端（記者）及信息的控制上，已經到了完全掌控的狀態。」程益中告訴本台，「而有記者證，控制起來更簡單了。」

程益中說自己在中國做媒體的幾十年來，從來沒拿過、也不想拿官方頒給的記者證。「我拒絕學那個東西（馬克思主義新聞理論），我也不會去參加那個考試，就是很荒謬的一件事。 」


▪️📸中國記者工作新准則：「團結在黨和習近平周圍」

根據國家新聞出版署的公告，中國記者證限期五年，一年一審。記者證需要有掛靠的、被政府認證的新聞單位，每個新聞單位也有一定的配額。

對於在美國念完新聞碩士，回到中國中央級媒體工作的90後小李來說，參與記者證考試卻是一個迫不得已的職業發展需求。

「我就還是覺得特別搞（笑）。」小李談著自己被單位安排考試，他跟著同事們下載「學習強國」的app，刷著圍繞習近平宣傳指示的題庫。他也很快發現這些在中國作記者要接受思想訓練，跟他在西方新聞理念中讀到的很不一樣。

小李展示著手機截屏，復述著一道道考題：

習近平總書記強調，新聞輿論工作最基本的堅持是什麼？，答案是「黨對新聞輿論工作的領導」；習近平強調，新聞輿論的基本方針是什麼？答案是「團結穩定、正面宣傳」；網絡空間應該是？答案是「黨凝聚共識的新空間。」

「整個（學習強國）培訓、考試是在黨的宣傳框架下的，要你（記者）清楚新聞媒體是黨的工具，不是公器，是黨的。」另一位在中國央級媒體工作已超過十年的80後記者吳先生在2014年也參與過記者證考試，他說，與新的考試對比，主題從過去圍繞「馬克思新聞理論」，轉變到「習思想」。

「現在很多黨媒其實也不留真正的記者了，就是留編輯部門，統一從中央級的媒體，摘一些信息來發佈。信息成為一個更高度集中化的統一生產過程，下面只是轉發跟包裝。」

吳先生感嘆記者們消逝與轉行，「這也是這幾年很多我認識的媒體同行都去了產業界......因為( 新聞工作)已經沒有意義。」

小李及吳先生因為安全原因，不用全名受訪。

▪️何以至此？💃🏻

在美國奧克蘭大學新聞系任教的蘇巧寧說，這種中國特色的新聞理念跟西方最大的不同在於：記者與當權者的關係。

「在真正的民主社會，新聞會被視為要站在當權者的對立面，作為一個批判和監督功能存在；一旦（記者）成為當權者擦脂抹粉的工具，他其實就失去了存在的意義。」

程益中在2003年領導《南方都市報》期間，因強調民眾的知情權，率先報導孫志剛案件和揭露中國肺炎SARS的疫情真相，一度被以莫須有的罪名逮捕入獄超過半年。他說，中國的新聞環境自那時候開始，搭配著網絡防火長城的搭建，開始有了巨大的改變。

在另一位中國資深媒體人溫雲超看來，習近平在2016年喊出「黨媒姓黨」，更是一個標誌性事件。

2020年，美國的非營利組織保護記者協會的數據顯示，中國是全球監禁記者人數最多的國家；無國界記者組織的年度新聞自由指數報告中，中國在全球排名倒數第四，僅高於朝鮮等獨裁國家。這份報告還提到，如果中國的新聞記者有自由報導的權利，新冠全球大流行是可以避免的，或者至少不會像現在這樣慘烈。

「雖然可能不存在，但我還是希望中國能走向新聞自由、言論自由的一天。」已經在2016年移居美國的程益中對仍在崗位上堅持的中國記者表示敬佩。他說希望這些記者能在養家活口、不受到不公待遇的情況下，能守住至少「不給老百姓洗腦、不作假新聞」的新聞尊嚴。

「如果中國沒有走向新聞自由和言論自由，我認為中國是絕對不會走向改革、或是我們希望的民主化道路。」程益中說。

延伸閱讀:

▫️中國如何嚴格控管美國大選資訊？:
https://pse.is/38pbsz

▫️題庫：
https://pse.is/387ssx

——

Latest: In 2020, Chinese authorities have issued a record high amount of “press passes” to more than 205,000 chinese journalists.

These journalists have passed a test grading their understanding of Xi Jinping thought, and “Marxist journalistic ideals.”

On Journalist's Day in China, I spoke with some veteran journalists about their experiences.