无码中文字幕色专区_91av俱乐部_无码人妻h动漫_26uuu成人_91九色丨porny丨国产jk_青青视频在线播放_国内自拍第二页_国产又粗又长又爽又黄的视频_色哟哟免费网站_久久出品必属精品_a级黄色一级片_99日在线视频

中國自動化學會專家咨詢工作委員會指定宣傳媒體
新聞詳情

從AlphaGo 人機大戰談起

http://www.moduwu.com 2016-05-25 13:58 來源:祈飛科技

最近Google DeepMind 公司的AlphaGo與李世石的人機大戰引起了全球新聞媒體和公眾對于人工智能的高度關注,其影響力遠遠超出了圍棋領域。

QQ截圖20160525140007

DeepMind 是一家什么樣的公司

DeepMind 是一家英國的人工智能公司,2014年1月被Google以5億英鎊收購。該公司在人工智能方面最有名的成果當首推2013年提出的DQN(Deep Q Network,一種深度學習和強化學習相結合的深度強化學習算法模型),在只有原始像素和游戲系統的打分作為輸入的情況下,人工智能系統成功的通過38天的自學習掌握了Atari游戲,到目前為止在至少49種Atari 2600 游戲上達到甚至超過了人類頂級玩家的水平。其成果先后發表在NIPS和Nature上,在人工智能領域引起震動。目前DeepMind除了AlphaGo外,還有健康醫療項目。

計算機圍棋與人工智能

國際象棋較容易設計局面評價函數(以擒王為目的,不同棋子有不同的權重),變化和搜索的深度相對有限,可采用Alpha-Beta剪枝算法進行有效搜索。IBM的“深藍”在1997年就擊敗了卡斯帕羅夫。

而圍棋的變化總數極大,宋代沈括在夢溪筆談中提到的算法結果為3的361次方,即“連書‘萬字’四十三”(棋盤19x19, 每個點都有黑子,白子,空白三種可能)。最近美國普林斯頓大學的研究人員計算出精確的合法棋局總數為2.08x10的170次方,這個數值比宇宙中的基本粒子總數還要多。并且圍棋很難建立明確的局面評價函數,同時局面評價函數又及其不平滑。這兩點導致簡單的暴力搜索在圍棋上不適用。

在深度學習引入計算機圍棋領域前,最好的結果是基于蒙特卡洛樹搜索(MCTS)的UCT算法。通俗的說就是計算機進行大量的模擬對局,隨機走子直到對局結束,根據勝率統計決定當前局面的最佳選擇。這樣就避開了局面評價函數的建立。然而人類對局時對于當前局面的棋形是有“棋感”的,這種“棋感”很大程度上幫助棋手評估局面并判斷預測重點的行棋選擇,即相當于快速有效的減小了搜索空間。這種“棋感”所對應的特征選取和模式識別讓人自然的聯系起近年來在AI領域如日中天的深度學習技術。這次的AlphaGo實際上是整合了MCTS,深度學習和強化學習三項技術。

深度學習是在傳統神經網絡基礎上的發展,其主要特征之一是網絡層數相比傳統淺層(受制于計算能力,數據量以及BP算法的梯度衰減等原因,一般為3層)神經網絡增多,模型復雜度大大提高,故有更強的非線性表達能力。

深度學習的最大優勢之一是無監督的特征學習,傳統的機器學習面臨的一個最大問題就是特征的人工設計和選取,深度學習則能通過大量數據學習出有效的抽象特征表達。

深度學習的出現和蓬勃發展有其內部和外部因素的推動。內因就是包括前述的網絡模型(如DNN,DCNN,SAE,RBM,DBN等)的改進,以及訓練算法的改進。外部因素包括海量數據(防止過擬合,并且可以使用無標簽數據)的獲得和高性能計算的發展。自2006年Hinton提出深度學習的概念后尤其是2012年在ImageNet上獲得巨大突破以來,以深度卷積神經網絡為代表的深度學習以催枯拉朽之勢橫掃計算機視覺、語音識別、自然語言處理等領域。在互聯網加大數據的時代背景下,已成為處理非結構化數據的一大利器。

強化學習(Reinforcement Learning)是一個目標驅動的連續決策過程。即學習怎樣根據當前的狀態決定動作,以最大化所獲得的回報信號。學習算法并未被告知如何執行動作,而是通過試驗去發現怎樣選擇動作以獲得最大的回報,這個回報是對動作好壞的評價。通常情況下,動作不僅獲得當前即時的回報,而且會影響下一個狀態乃至所有后續狀態的回報。

強化學習的最終目的是決策過程中整體的回報函數期望最大化。通過試錯進行搜索以及延時的回報是強化學習的兩個最顯著的特征。強化學習已在包括機器人控制,通信,金融,博弈等在內的眾多領域獲得成功應用。

回到計算機圍棋上,AlphaGo 通過深度卷積神經網絡的訓練,建立了行棋策略網絡(Policy Network)和價值網絡(Value Network)。訓練數據集采用了十數萬的人類棋譜,形成3千萬的局面數據作為輸入。AlphaGo通過策略網絡決定行棋判斷(著棋點可按分值排序),通過價值網絡進行局面判斷。有趣的是,AlphaGo還能通過大量的自我對弈(對弈的行棋法則是根據策略網絡決定的),根據對弈結果,應用強化學習獲得更新的策略網絡和價值網絡。這就是所謂AlphaGo通過雙手互博而得到自主學習能力。根據DeepMind 的CEO Demise Hassabis 透露,他們下一步還有一個更大膽的計劃,即不需要任何人類棋譜的輸入,單純由“BetaGo” 通過自我對弈和強化學習,獲得更優的行棋網絡模型。這是因為人類的圍棋下法未必是最優的,利用它訓練出的初始化行棋網絡模型有可能陷入到局部極值。

策略網絡使得AlphaGo只需針對少數有價值的可能著棋點進行蒙特卡洛樹搜索,即有效的減少了蒙特卡洛樹搜索的寬度。而價值網絡使得蒙特卡洛樹搜索時的模擬對弈在局面估值達到一定閾值后即停止,無需進行至終局。這就有效的減少了蒙特卡洛樹搜索的深度。蒙特卡洛樹搜索、深度學習和強化學習的有效結合使得AlphaGo獲得了空前的成功。

人機大戰后的思考

首先對于圍棋界,不禁讓人反思當今職業圍棋是否太過功利,太拘泥于勝負而過分糾纏于邊角的變化而缺乏創新?在AlphaGo橫空出世前一年仙逝的吳清源大師在晚年提出的“二十一世紀的圍棋”,其精神實質就如同AlphaGo所展示給我們的,是一種整體圍棋。盡管離“圍棋之神”還有不小的距離,AlphaGo 作為超人類的圍棋存在,也有助于我們去探索一系列真相:黑棋的先著效率如何?目前的貼目是否合理?圍棋的實質是什么?取消座子還棋頭真的是一種進步嗎?以九三分投、大飛守角為代表的快速打散局面的中國古棋“八卦”布局在座子還棋頭規則下是否合理?“當湖十局”的質量到底如何?中國古棋圣黃龍士、范西屏、施襄夏與日本古棋圣道策、丈和、秀策相比誰更強?

此次的人機大戰也讓我們看到了資本的力量和一個成功的商業營銷案例。相較于FaceBook在計算機圍棋項目“Dark Forest”上投入的寥寥兩人,DeepMind 在Nature上的論文就有署名作者20人,其中兩位并列第一作者David Silver 和Aja Huang更是在博士、博士后階段有10余年的計算機圍棋經驗。AlphaGo 使用了1202個CPU和176個GPU于分布式計算,展現了Google強大的工程能力。人機大戰前Google更是做足了保密工作,事實上其內部評測人機大戰用的V18版本可讓去年10月份擊敗歐洲冠軍樊麾二段的版本四子,Elo等級分在4000分之上,遠超李世石的3530和目前世界排名第一的柯潔的3630分。人機大戰進一步展現了Google在人工智能方面的全球引領者的企業形象,最終讓Google的股票市值增加愈400億美元。

人工智能已在包括機器人、通信、互聯網、商業智能、保險、金融、健康醫療等眾多領域融入到我們的生活中并正在改變著我們的生活。例如IBM的Watson作為認知計算系統的代表,應用了先進的自然語言處理,信息檢索,知識表達,自動推理和機器學習技術。其代表性產品包括著名的自動問答系統DeepQA以及和MSK合作的腫瘤治療系統。

事實上我國傳統醫學的“表象學”走的也是類似神經網絡這條路,在當時的技術條件下,無法對多數疾病的發病機理做出科學的分析判斷,于是把人視作一個黑盒子的復雜系統,輸入是脈搏等各種體征,輸出是判斷得到的疾病類別。老中醫某種意義上相當于通過大量的訓練數據,訓練得到類似神經網絡的人體疾病判斷模型,因而能對疾病進行判斷。

在現代條件下,對于復雜的人體系統,也難以在細胞層面、分子層面對各種病癥進行科學解釋。幸運的是,通過如CT、MRI、PET、血液分析等種種醫療儀器設備,更多科學的體征數據可以獲得。學習訓練用的數學模型更加復雜,優化算法更加科學,人工智能系統更加具備在高緯數據空間發掘有意義的數據模式的能力。包括深度學習、強化學習在內的各種人工智能技術也廣泛應用于機器人對環境的自主感知、自主決策、各種動作運動控制、人機交互,無人機飛行和姿態控制,自動無人駕駛等領域。

結束語

我們也應看到,目前人工智能的發展尚處在初級階段,距離人類有思維意識的真正意義上的智能還有很長的路要走。清代棋圣范西屏在其畢生著述《桃花泉弈譜》自序中寫道,“勛生今之時,為今之弈,后此者,又安知其不愈出愈奇”。在當今知識大爆炸、技術大變革的風云時代,我們更應有積極的心態來迎接、學習、應用、創新新技術。

作為人工智能機器人系統方案商,深圳市祈飛科技有限公司正積極應對挑戰,在不斷突破自我,創新科技,專注于人工智能的研發。祈飛機器人以祈飛研究院為核心技術研發主體,下設人工智能、圖像視覺、多維感知、控制系統、精密機械實驗室等,持續在人工智能機器人系統主體應用領域進行研發投入,以祈飛智能機器人制造為集團供應鏈保障中心,以全球營銷隊伍為市場先鋒,全力打造技術研發、智能制造、平臺網絡多維度創新型人工智能企業。

QQ截圖20160525140022

祈飛科技園

相信,隨著人工智能技術的不斷發展,人工智能化市場必將成為祈飛科技絢麗的舞臺。

版權所有 工控網 Copyright?2025 Gkong.com, All Rights Reserved
无码中文字幕色专区_91av俱乐部_无码人妻h动漫_26uuu成人_91九色丨porny丨国产jk_青青视频在线播放_国内自拍第二页_国产又粗又长又爽又黄的视频_色哟哟免费网站_久久出品必属精品_a级黄色一级片_99日在线视频
亚洲老女人av| 操人视频免费看| 一区二区三区国产好的精华液| 国产九九九九九| 今天免费高清在线观看国语| 亚洲第一天堂久久| 午夜久久久精品| 红桃av在线播放| 日本人体一区二区| 日韩免费在线观看av| 日本黄网站色大片免费观看| 黄瓜视频免费观看在线观看www| 日本人视频jizz页码69| 久久久精品麻豆| 成人黄色一区二区| 最近免费中文字幕中文高清百度| 国产精品97在线| 99久久久无码国产精品6| www.com毛片| 精品视频无码一区二区三区| 久久精品.com| 午夜视频在线瓜伦| 999精彩视频| 日韩精品视频一二三| 一个色综合久久| 在线一区二区不卡| 国产又大又长又粗又黄| 91精品国产毛片武则天| av网站大全免费| 日韩中文字幕在线视频观看| 女人喷潮完整视频| 少妇人妻互换不带套| 奇米影音第四色| 亚洲网中文字幕| 97在线免费视频观看| 九一国产精品视频| 大香煮伊手机一区| 九九热精品在线播放| 波多野结衣免费观看| 国产传媒久久久| 看av免费毛片手机播放| 亚洲免费av一区二区三区| 亚洲精品免费一区亚洲精品免费精品一区 | 国产裸体免费无遮挡| 狠狠躁狠狠躁视频专区| 色男人天堂av| av高清在线免费观看| 欧美xxxxx在线视频| 17c国产在线| 996这里只有精品| 亚洲欧洲日产国码无码久久99| 人妻丰满熟妇av无码区app| 午夜一区二区视频| 丁香六月激情网| 久久精品免费网站| 香蕉视频xxx| 欧美 日韩 国产在线观看| 9久久婷婷国产综合精品性色| 一级片黄色免费| 男人日女人逼逼| 免费成年人高清视频| 日韩xxxx视频| 亚洲污视频在线观看| 国产一区二区三区在线免费| 日韩欧美黄色大片| 欧美 亚洲 视频| 丁香婷婷激情网| 黄色小视频大全| 成人一区二区三| 国产香蕉一区二区三区| 91看片就是不一样| 国产精品igao激情视频| 91日韩视频在线观看| 搞av.com| 在线成人免费av| 日韩精品免费播放| 国产曰肥老太婆无遮挡| 久久久精品高清| 黄色国产精品视频| 在线观看17c| 亚洲精品久久久久久宅男| 欧美日韩成人免费视频| 超碰在线免费av| 成人黄色一区二区| 日韩精品综合在线| 午夜精品免费看| caopor在线视频| 精品久久久久久无码中文野结衣| 国内国产精品天干天干| 欧美黄色免费影院| 成年人视频网站免费| 亚洲欧美日韩网站| 一道本视频在线观看| 男人日女人逼逼| 欧美黄色免费网址| 一区中文字幕在线观看| 欧美成年人视频在线观看| 日韩在线xxx| a√天堂在线观看| 日本人体一区二区| www.亚洲成人网| 亚洲综合激情五月| 亚洲av无日韩毛片久久| 91制片厂毛片| 91激情视频在线| 激情婷婷综合网| 欧美日韩中文在线视频| 精品视频免费在线播放| 国产一二三区在线播放| 红桃一区二区三区| 天堂av在线中文| 好吊色这里只有精品| 亚洲美女自拍偷拍| 中文字幕黄色大片| 日韩一区二区三区不卡视频| 成人一区二区三| 久久久久久久久久福利| 亚洲爆乳无码专区| 人妻熟女一二三区夜夜爱| 日韩av片在线看| 亚洲精品乱码久久久久久自慰 | 无颜之月在线看| 乱熟女高潮一区二区在线| 影音先锋成人资源网站| 欧洲金发美女大战黑人| 欧美另类videosbestsex日本| 美女av免费观看| 欧美国产视频一区| 国产免费裸体视频| 精品视频在线观看一区| 日韩av一二三四区| 国产精品欧美激情在线观看| 久久九九国产视频| 邪恶网站在线观看| 成年人网站av| 九九久久九九久久| 青草青青在线视频| 国产a级一级片| 我要看一级黄色大片| 日本高清久久久| 丰满女人性猛交| 精品国产av无码一区二区三区| 国产 日韩 亚洲 欧美| 黄色国产精品视频| 亚洲精品午夜在线观看| 亚洲制服中文字幕| 91国在线高清视频| 好吊妞无缓冲视频观看| 亚洲男人天堂色| 亚洲视频在线不卡| 久久国产午夜精品理论片最新版本| 3d动漫一区二区三区| 搡女人真爽免费午夜网站| 中文字幕资源在线观看| 日本aa在线观看| 凹凸日日摸日日碰夜夜爽1| 三上悠亚在线一区| 乱熟女高潮一区二区在线| 国产中文字幕免费观看| 天天影视色综合| 亚洲精品久久久久久久蜜桃臀| 日本a级片免费观看| 中日韩av在线播放| 97干在线视频| 国产嫩草在线观看| www.69av| 国产免费人做人爱午夜视频| 热这里只有精品| 欧美网站免费观看| 免费网站在线观看黄| 国内精品在线观看视频| 玖玖爱视频在线| 天堂…中文在线最新版在线| 在线观看国产福利| 青青青国产在线观看| 99九九99九九九99九他书对| 久久久久久免费看| 午夜免费看毛片| 丝袜人妻一区二区三区| 午夜视频在线网站| aa在线免费观看| 国产又粗又爽又黄的视频| 国产麻花豆剧传媒精品mv在线| 三级黄色片免费看| 久久久久久久久久久免费视频| 色乱码一区二区三区熟女| 日韩视频在线免费看| www.男人天堂网| gai在线观看免费高清| 欧美不卡在线播放| 永久免费在线看片视频| 日本美女高潮视频| 久草视频国产在线| 一级黄色片在线免费观看| 日韩中文字幕三区| 成人小视频在线观看免费| 日韩av一卡二卡三卡| 91黄色小网站| 日韩中字在线观看| 97超碰人人爱|