小恐龍的案例
Python代碼制作"恐龍跳一跳"小游戲
相關(guān)文件
關(guān)注公眾號(hào)：Python學(xué)習(xí)指南，回復(fù)“恐龍跳一跳”即可獲取
環(huán)境搭建
安裝Python并添加到環(huán)境變量，pip安裝需要的相關(guān)模塊即可。
原理介紹
游戲規(guī)則簡(jiǎn)介：
玩家通過(guò)空格鍵控制一只小恐龍的前進(jìn)方式，當(dāng)小恐龍觸碰到植物或者飛龍時(shí)，游戲結(jié)束。小恐龍躲避的植物和飛龍?jiān)蕉啵梅衷礁摺?逐步實(shí)現(xiàn)：
Step1：定義精靈類(lèi)
為了方便實(shí)現(xiàn)小恐龍和植物以及飛龍之間的碰撞檢測(cè)，我們先定義一些精靈類(lèi)，包括：
① 植物類(lèi)
其中，move函數(shù)的作用為使隨機(jī)生成的植物不斷地左移，來(lái)實(shí)現(xiàn)小恐龍不斷右移的效果。
② 飛龍類(lèi)
飛龍類(lèi)的定義要略微復(fù)雜一些，因?yàn)槿绻覀兿胱岋w龍飛起來(lái)更逼真一些，就必須每隔一段很小的時(shí)間，就對(duì)飛龍的狀態(tài)進(jìn)行轉(zhuǎn)換。具體而言，飛龍的飛行狀態(tài)有兩種，即翅膀向上和翅膀向下：
我們需要做的就是每隔很短的一段時(shí)間，就讓飛龍的翅膀由其中一種姿勢(shì)轉(zhuǎn)為另外一種姿勢(shì)。
③ 小恐龍類(lèi)
小恐龍類(lèi)的定義與飛龍類(lèi)類(lèi)似，只不過(guò)狀態(tài)要更加豐富一些，并且通過(guò)勻加速直線公式模擬恐龍的跳躍和下降的動(dòng)作。
Step2：定義場(chǎng)景類(lèi)
我們需要定義一個(gè)簡(jiǎn)單的場(chǎng)景類(lèi)(道路和云等場(chǎng)景)，來(lái)使我們的游戲效果更加逼真：
這里唯一需要注意的就是場(chǎng)景的左移速度應(yīng)當(dāng)與植物類(lèi)一致(畢竟它們理論上都應(yīng)當(dāng)是相對(duì)靜止的)，并且需要三張場(chǎng)景圖同時(shí)左移來(lái)保證畫(huà)面的連續(xù)性。
Step3：游戲主循環(huán)
先初始化，內(nèi)容包括加載游戲素材文件、實(shí)例化之前定義的精靈類(lèi)和場(chǎng)景類(lèi)、定義一些必要的常量和用戶事件等：
然后就可以進(jìn)入游戲主循環(huán)了：
主循環(huán)主要包括四個(gè)功能，一是事件檢測(cè)；二是不斷地產(chǎn)生、移動(dòng)并畫(huà)出相應(yīng)的場(chǎng)景和精靈類(lèi)；三是碰撞檢測(cè)；四是統(tǒng)計(jì)并顯示當(dāng)前分?jǐn)?shù)。
All Done！
展開(kāi) 自動(dòng)玩Chrome瀏覽器的小恐龍游戲
關(guān)注公眾號(hào)：Python學(xué)習(xí)指南，回復(fù)“小恐龍游戲2”獲取源碼
環(huán)境搭建
安裝Python并添加到環(huán)境變量，pip安裝需要的相關(guān)模塊即可。
原理簡(jiǎn)介
T-Rex Rush是谷歌瀏覽器里自帶的一個(gè)彩蛋小游戲，電腦斷網(wǎng)的時(shí)候按下空格鍵就可以觸發(fā)。或者直接訪問(wèn)如下鏈接也可以：
https://chromedino.com/
大概長(zhǎng)這個(gè)樣子：
玩法很簡(jiǎn)單，玩家通過(guò)操縱空格鍵來(lái)控制小恐龍跳躍或者不跳躍，從而躲避路上的障礙物。當(dāng)小恐龍不小心撞到障礙物時(shí)，游戲結(jié)束。
今天給大家用Python代碼，遺傳算法訓(xùn)一波龍~
當(dāng)前離小恐龍最近的障礙物與小恐龍的水平距離;
當(dāng)前離小恐龍最近的障礙物離地面的高度;
當(dāng)前離小恐龍最近的障礙物的寬度;
當(dāng)前離小恐龍最近的障礙物的高度;
小恐龍水平方向上的奔跑速度.
Chrome暗藏的“恐龍跳一跳”，AI玩得比你還溜
拿兒童學(xué)步來(lái)舉例，如果小朋友努力邁出第一步，就會(huì)獲得父母的鼓勵(lì)——可能是鼓掌叫好，也可能是一塊糖；但如果小朋友堅(jiān)決不肯學(xué)習(xí)走路，那父母就不會(huì)給他糖吃了。強(qiáng)化學(xué)習(xí)就是依照這類(lèi)激勵(lì)行為而設(shè)置的。
而在這個(gè)游戲中，對(duì)我們的AI小恐龍來(lái)說(shuō)，強(qiáng)化學(xué)習(xí)需要讓他在無(wú)監(jiān)督的情況下，先認(rèn)識(shí)到做出不同動(dòng)作的結(jié)果，并且以獲得高分為最高激勵(lì)。
一個(gè)典型的強(qiáng)化學(xué)習(xí)閉環(huán)
Ravi Munde用Q-learning模擬了一個(gè)特殊函數(shù)，這個(gè)函數(shù)驅(qū)動(dòng)AI在不同狀況下做出正確的選擇。
Q-learning是強(qiáng)化學(xué)習(xí)的一種無(wú)模型實(shí)現(xiàn)，根據(jù)Q值對(duì)每個(gè)狀態(tài)進(jìn)行判斷此時(shí)如果采取行動(dòng)，能獲得怎樣的獎(jiǎng)勵(lì)。一個(gè)樣本Q表讓我們了解數(shù)據(jù)的結(jié)構(gòu)。在恐龍跑酷游戲中，狀態(tài)是當(dāng)前的游戲截圖，能采取的行動(dòng)是跳或不跳[0,1]。
一個(gè)樣本Q表
Ravi Munde決定用深度神經(jīng)網(wǎng)絡(luò)來(lái)決定小恐龍何時(shí)起跳，而且要在最簡(jiǎn)單的強(qiáng)化學(xué)習(xí)實(shí)現(xiàn)基礎(chǔ)上，引入不同參數(shù)來(lái)輔助它。
缺乏已標(biāo)記的數(shù)據(jù)讓強(qiáng)化學(xué)習(xí)非常不穩(wěn)定。為了獲得適用于這個(gè)游戲的數(shù)據(jù)，Munde小哥決定，先讓小恐龍自己瞎跳幾千次，把每個(gè)動(dòng)作的反饋記下來(lái)，然后從數(shù)據(jù)中隨機(jī)挑選一些來(lái)訓(xùn)練模型。
但之后，Munde小哥發(fā)現(xiàn)，他訓(xùn)練了一個(gè)倔強(qiáng)的模型。模型堅(jiān)定地認(rèn)為，跳一定比不跳好。所以，為了讓模型在訓(xùn)練時(shí)能在跳與不跳之間多嘗試一下，他引入了一個(gè)函數(shù)?來(lái)決定行動(dòng)的隨機(jī)性，然后再逐漸減小它的值來(lái)削減隨機(jī)性，最終讓模型去選擇最有可能獲得獎(jiǎng)勵(lì)的行動(dòng)。
贊譽(yù)分布（Credit Assignment）問(wèn)題可能會(huì)讓模型陷入混亂——目前獲得的獎(jiǎng)勵(lì)究竟來(lái)自于過(guò)去的哪個(gè)行為呢？在恐龍跑酷游戲中，小恐龍跳到半空中后無(wú)法再次跳躍，但模型可能會(huì)在恐龍處于半空中時(shí)發(fā)出跳躍指令，這種情況就讓恐龍非常容易砸到仙人掌上。
展開(kāi) 
活用Word編號(hào)這一功能，就能實(shí)現(xiàn)標(biāo)題、圖名、表名、公式、參考文獻(xiàn)的自動(dòng)編號(hào)（附懶人模板文件） ￥9.9
方法：安裝插件“小恐龍公文排版助手”，官網(wǎng)：https://gw.xkonglong.com
GE Digital 終于解散了 | Predix獨(dú)立門(mén)戶
雖然只有700人，但客戶群并不小，除了400個(gè)企業(yè)級(jí)客戶，還有近1000個(gè)中小企業(yè)客戶。它的軟件每天安排近100萬(wàn)名現(xiàn)場(chǎng)服務(wù)專(zhuān)業(yè)人員。這將對(duì)ServiceMax進(jìn)行有力的阻擊。
再見(jiàn) 大招牌
GE的Predix曾經(jīng)給工業(yè)界無(wú)數(shù)的溫暖。它像黑暗中突然劃空而出的照明彈，激發(fā)了很多的人的憧憬。工業(yè)互聯(lián)網(wǎng)突然成為一個(gè)炙手可熱的市場(chǎng)，工業(yè)界很久沒(méi)有這么熱鬧過(guò)了。即使是些泡沫，那也是有營(yíng)養(yǎng)的泡沫吧。
在ServiceMax被出售給銀湖（Silver Lake）基金后，GE只保留10%的股權(quán)。GE Digital的大部分收入也就被剝離出去。而帶給Predix的新嫁妝是12億美元。對(duì)于一個(gè)初創(chuàng)公司而言，這已經(jīng)是含著金湯匙出生了——如果暫時(shí)忘掉GE前CEO Immelt那些誓言，如果GE可以心平氣和地重新開(kāi)始。
此次GE重組，仍然面臨著新小恐龍的挑戰(zhàn)。C3IoT加強(qiáng)了軟件攻勢(shì)，而一直就以挑戰(zhàn)Predix為己任的Uptake在有GE前高管相助，又拿下了全球最大的設(shè)備故障庫(kù)，早已擺脫創(chuàng)始人最早做團(tuán)購(gòu)網(wǎng)站GroupOn的氣質(zhì)，這個(gè)公司渾身上下充滿了工業(yè)金屬的味道，而且是純粹數(shù)據(jù)分析基因。這都意味著“新來(lái)乍到”的GE Predix自然會(huì)受到全新的圍堵。
它的手里，還有一些自動(dòng)化系統(tǒng)的好牌。新的物聯(lián)網(wǎng)公司，將推出的產(chǎn)品包括Predix、資產(chǎn)績(jī)效管理、自動(dòng)化軟件（如SCADA等）、制造執(zhí)行系統(tǒng)MES、運(yùn)營(yíng)績(jī)效管理以及GE電力數(shù)字和電網(wǎng)軟件。
展開(kāi) 化學(xué)紀(jì)錄片大盤(pán)點(diǎn)！科學(xué)迷寒假必看系列 ！
宇宙正在擴(kuò)張(1924–1929)、宇宙微波背景輻射(1964)、行星繞行其他恒星(1995–2004)、伽瑪射線爆發(fā) (1969–1997)、宇宙加速膨脹(1998–2000)
2.生物學(xué)
微生物(1674)、細(xì)胞核(1831)、有絲分裂(1977)、細(xì)胞分化(1879)、克氏循環(huán)(1937)、線粒體(19世紀(jì)晚期至今)、神經(jīng)傳導(dǎo)(18世紀(jì)晚期至今)、荷爾蒙(1903)、光合作用(1770)、生物的多樣性(1935)
3.物理學(xué)
落體定律(1604)、萬(wàn)有引力定律(1666)、熱力第二定律(1824–1850)、電磁學(xué) (1807–1873)、狹義相對(duì)論(1905)、質(zhì)能互換定律(1905)、量子論(1900–1935)、光的本質(zhì)(1704–1905)、中子 (1935)、超導(dǎo)體(1911–1986)、夸克(1962)、核能量(1666–1957)
4.地球科學(xué)
外核(1906)、內(nèi)核(1930)、大陸漂移(1911)、海底擴(kuò)張(1950–1960)、板塊學(xué)說(shuō) (1960)、對(duì)流層和平流層(1890)、宇宙輻射(1911)、磁場(chǎng)倒轉(zhuǎn)(1906)、周期性冰河時(shí)期(1930)、全球變暖(20世紀(jì)晚期)、地質(zhì)變動(dòng)(1830)、放射性定年法(1907)
5.生命科學(xué)(起源與進(jìn)化)
恐龍因小行星撞擊滅絕
展開(kāi) 