熱絲化學氣相沉積系統(tǒng) 787     

 0

本申請公開了一種熱絲化學氣相沉積系統(tǒng)，屬于金剛石薄膜制備領域，其包括氣相沉積裝置、熱輻射測溫儀和安裝支架，氣相沉積裝置包括反應腔室、熱絲架以及襯底，反應腔室上開設有觀察窗，熱輻射測溫儀的探頭發(fā)射的輻射線透過觀察窗照射于反應腔室內(nèi)，安裝支架包括連接桿、球頭桿和轉(zhuǎn)動座，連接桿的一端連接反應腔室，另一端連接球頭桿一端的球體，轉(zhuǎn)動座的一端形成中空腔體，球體轉(zhuǎn)動地設置在中空腔體內(nèi)，轉(zhuǎn)動座的另一端連接熱輻射測溫儀，從而熱輻射測溫儀的探頭能夠繞著球體的球心在球體的周面上轉(zhuǎn)動，實現(xiàn)輻射線在反應腔室內(nèi)移動，方便使用者測量襯底表面和熱絲架的熱絲表面的各個位置的溫度，減小了測溫盲區(qū)。

對戰(zhàn)游戲中強化學習模型的訓練方法及裝置 871     

 0

本申請?zhí)峁┮环N對戰(zhàn)游戲中強化學習模型的訓練方法及裝置，屬于計算機技術領域，涉及人工智能和計算機視覺技術。方法包括：獲取目標對戰(zhàn)模型以及所述目標對戰(zhàn)模型的相近對手模型，所述相近對手模型為與所述目標對戰(zhàn)模型的等級評分之差小于評分閾值的歷史對戰(zhàn)模型，所述等級評分用于評價模型的對戰(zhàn)能力；基于對戰(zhàn)雙方的對戰(zhàn)狀態(tài)特征，分別確定所述目標對戰(zhàn)模型的預測操作以及所述相近對手模型的預測操作；利用所述目標對戰(zhàn)模型以及所述相近對手模型分別控制對戰(zhàn)雙方執(zhí)行預測操作以進行對戰(zhàn)；確定對戰(zhàn)中所述目標對戰(zhàn)模型的操作價值；基于所述對戰(zhàn)狀態(tài)特征、所述預測操作以及所述操作價值訓練所述目標對戰(zhàn)模型。

動水腐蝕水化學實驗系統(tǒng) 1023     

 0

本發(fā)明提供了一種動水腐蝕水化學實驗系統(tǒng)，包括回路，沿水流方向，該回路中設有除氧水箱、主泵、回熱器、預熱器、測試區(qū)、換熱器和壓力調(diào)節(jié)系統(tǒng)，回熱器包括殼程和位于殼程內(nèi)的管程，主泵將除氧水箱的水經(jīng)管程輸送至預熱器，進水經(jīng)預熱器處理后流向測試區(qū)，測試區(qū)流出的水經(jīng)殼程流入換熱器，經(jīng)換熱器處理后的水流向壓力調(diào)節(jié)系統(tǒng)，壓力調(diào)節(jié)系統(tǒng)包括相連接的第一電動調(diào)節(jié)閥和若干串聯(lián)的孔板，每個孔板對應設有第一截止閥，且每個第一截止閥與對應的孔板并聯(lián)設置。本申請借助壓力調(diào)節(jié)系統(tǒng)實現(xiàn)該回路中壓力的無級調(diào)節(jié)，可準確調(diào)節(jié)試驗回路中的壓力，且調(diào)節(jié)范圍廣及調(diào)節(jié)精度高，有效保證了該系統(tǒng)的熱工水力參數(shù)穩(wěn)定和安全，從而能開展長周期腐蝕實驗。

基于低沖擊雨水設施的市政道路化學品泄漏應急處置系統(tǒng) 1097     

 0

提供一種基于低沖擊雨水設施的市政道路化學品泄漏應急處置系統(tǒng)，包括隔油沉淀池、生物滯留池、水質(zhì)在線監(jiān)測裝置、控制單元和排液泵；隔油沉淀池的進液口與雨水和/或事故水入口連通，出液口與生物滯留池的進液口連通，靠近其進液口處設有第一溢流管，中部位置設有第一擋板，靠近其出液口的位置設有與排液泵連接的第一排液管；生物滯留池內(nèi)靠近其進液口的位置設有第二溢流管，出液口與排液泵通過第二排液管連通；水質(zhì)在線監(jiān)測裝置設置在隔油沉淀池的進液口與雨水和/或事故水入口之間；控制單元與水質(zhì)在線監(jiān)測裝置和排液泵通信連接。本系統(tǒng)可以在收集處理雨水徑流的同時又在事故期間充分利用系統(tǒng)存儲和處理事故水。

非破壞快速檢測復合肥中多種元素組分含量的方法 696     

 0

本發(fā)明公開一種非破壞快速檢測復合肥料中多種元素組分的方法。是對復合肥標準樣品中待測元素建立對應于其常規(guī)化學分析含量數(shù)據(jù)與該標樣的近紅外光譜分析數(shù)據(jù)相關聯(lián)的數(shù)學模型,利用該數(shù)學模型和采集的未知樣近紅外光譜來檢測復合肥中待測元素組分的含量。使用本發(fā)明的方法用于復合肥料定量分析時,樣品不用處理,亦不需要化學試劑,1-2分鐘內(nèi)就可測出一個樣品中幾種成分,操作簡便,穩(wěn)定性好,與化學法在同一個精度水平上。

化學藥液自動恒溫裝置 1071     

 0

本實用新型公開了一種化學藥液自動恒溫裝置，包括儲液槽、熱交換盤管、緩存槽、熱水循環(huán)泵、即時加熱器、循環(huán)管路、溫度傳感器以及PLC控制系統(tǒng)，所述溫度傳感器和熱交換盤管位于儲液槽中，所述溫度傳感器、熱水循環(huán)泵、即時加熱器分別與PLC控制系統(tǒng)連接，熱交換盤管通過循環(huán)管路與緩存槽連通，熱交換盤管與緩存槽之間設置有熱水循環(huán)泵、即時加熱器。本實用新型的化學藥液在無需人工監(jiān)測，人工切換閥門的情況下，實現(xiàn)自動溫度監(jiān)控，并通過溫度感應器反饋到PLC控制系統(tǒng)自動切換循環(huán)管路中不同閥門的打開與關閉，控制熱交換盤管中冷熱水的切換，熱交換速度快，控溫精準，藥液溫度均勻，保證整個工藝的完整性，提高工藝效率。

含氯廢水化學需氧量初篩方法 842     

 0

一種含氯廢水化學需氧量(COD)初篩方法，其特征在于，包括下列步驟：(1)建立初篩體系，并建立不同COD的溶液按初篩體系反應后，COD與吸光值關系的標準曲線；(2)確定氯離子在初篩體系下的COD貢獻率；(3)待測樣品按初篩體系反應后，按吸光值用標準曲線計算出含氯COD；(4)測試氯離子濃度后，按氯離子的COD貢獻率得到氯離子轉(zhuǎn)化COD；(5)含氯COD減去氯離子轉(zhuǎn)化COD，即得待測樣品在初篩體系下的COD，再用初篩體系下樣品的轉(zhuǎn)化率校正系數(shù)校正，即得待測樣品的COD范圍。該方法具有快速、低消耗、便于實現(xiàn)自動化的優(yōu)點。

雜散電流引起混凝土鋼筋電化學銹蝕的模擬裝置和方法 805     

 0

本發(fā)明公開了一種雜散電流引起混凝土鋼筋電化學銹蝕的模擬裝置和方法。模擬裝置包括電源、恒電位儀、裝有電解液的液槽、浸在電解液中的參比電極，輔助陽極和試樣，試樣采用預埋有鋼筋的混凝土塊，電源包括信號發(fā)生器和雙極性直流電源，信號發(fā)生器產(chǎn)生的雜散電流模擬信號傳輸給雙極性直流電源，雙極性直流電源的電壓信號輸出端接恒電位儀的信號輸入端；恒電位儀的參比電極接口接參比電極，工作電極接口接試樣上的鋼筋，輔助陽極接口接輔助陽極。本發(fā)明可以在實驗室條件下實現(xiàn)地鐵隧道鋼筋混凝土結構中鋼筋受雜散電流影響而產(chǎn)生的電化學銹蝕的模擬測試，此方法可以用于雜散電流引起鋼筋的腐蝕機理研究。

光化學除去氧氣來保護光敏劑的三重激發(fā)態(tài)的介質(zhì)以及方法和應用 784     

 0

本發(fā)明提供一種光化學除去氧氣來保護光敏劑的三重激發(fā)態(tài)的介質(zhì)及其方法和應用，所述介質(zhì)為聚乙烯吡咯烷酮。所述方法為：將PVP、光敏劑與溶劑混合，靜置形成凝膠，使用激發(fā)光照射所述凝膠。所述方法能夠簡單有效的方法去保護磷光不被空氣中的氧氣猝滅，并且將其應用在光物理和光化學過程的觀察和測試試驗、光刻或三重態(tài)?三重態(tài)湮滅光子上轉(zhuǎn)換等方面。

酒精溶液濃度檢測裝置 632     

 0

本實用新型涉及酒精濃度檢測技術領域，提供一種酒精溶液濃度檢測裝置，包括：恒溫容器和酒精檢測機構，恒溫容器包括恒溫水槽和置于恒溫水槽內(nèi)的酒精容器；酒精檢測機構包括主控模塊、酒精檢測模塊、第一溫度檢測單元和加熱模塊，酒精檢測模塊包括與主控模塊電連接的酒精分析單元和與酒精分析單元電連接的酒精電化學傳感器，酒精電化學傳感器置于酒精容器內(nèi)；第一溫度檢測單元與主控模塊電連接且伸入酒精容器內(nèi)；加熱模塊包括與主控模塊電連接的加熱管，加熱管伸入恒溫水槽內(nèi)，使用上述酒精溶液濃度檢測裝置對酒精溶液進行濃度檢測時，不涉及專業(yè)技能，操作簡單便捷，而且整個檢測過程只耗費了少量電能、水及酒精溶液，檢測成本較低。

便于裝卸的高溫化學反應溫度傳感器 1050     

 0

本實用新型提供的一種便于裝卸的高溫化學反應溫度傳感器，包括由感溫端和連接端一體成型的封裝部、感溫元件、測溫導線和卡盤，所述連接端的端面向感溫端凹陷形成感溫腔室，所述感溫元件設在所述感溫腔室內(nèi)，所述測溫導線的一端和所述感溫元件連接，所述測溫導線的另一端延伸出所述感溫腔室外，所述封裝部的感溫端穿過所述卡盤的內(nèi)徑若干長度后和所述卡盤連接的結構。通過所述卡盤可與待測溫設備快速安裝和拆卸，本實用新型具有結構簡單和方便拆卸的優(yōu)點。

化學氣相沉積氣體導流機構 1019     

 0

一種化學氣相沉積氣體導流機構，涉及化學氣相沉積設備技術領域，包括布氣筒、上蓋、進氣管、支撐件、安裝板、安裝管、安裝柱和分流罩；布氣筒為底端封閉的圓筒結構，布氣筒底部均勻設置有多個出氣孔；上蓋設置在布氣筒上端；進氣管設置在上蓋上，進氣管與布氣筒連通，進氣管位于上蓋中部；支撐件設置在布氣筒內(nèi)壁上，支撐件為上下開口且中空的圓臺結構，支撐件上均勻設置有多個第一通孔；安裝板設在支撐件上端面，安裝板上設置有多個第二通孔；安裝管設置在安裝板上，安裝管位于進氣管下方；安裝柱卡接在安裝管內(nèi)；分流罩設置在安裝柱上端。本實用新型使得膜厚測試更為簡單方便，制作成本低，降低了氣流大小不均勻?qū)怏w沉積膜厚度造成的影響。

兩通，三通的手動氣動化學柱塞閥 705     

 0

本實用新型涉及閥門技術領域，具體涉及兩通，三通的手動氣動化學柱塞閥，包括閥體，所述閥體中安裝有閥芯，所述閥體上開設有進液口和出液口，所述閥芯的上部穿出所述閥體連接有轉(zhuǎn)向裝置。與現(xiàn)有技術相比，本實用新型所提供的一種兩通，三通的手動氣動化學柱塞閥，結構合理，制造簡單，可根據(jù)需要選擇手動或氣動方式帶動閥芯相對閥體運動，并通過密封圈保持旋轉(zhuǎn)時的封閉性，可輕易達到5萬次開關保壓測試(在10bar壓力下都可使用)；進液口與出液口之間采用多流體通道，增加流體介質(zhì)的通流面積，進而降低流體介質(zhì)通過柱塞閥時的流動阻力，從而可以減輕流體介質(zhì)在流經(jīng)該柱塞閥過程中的能量損失。

基于強化學習的業(yè)務分配方法、裝置、設備及存儲介質(zhì) 745     

 0

本發(fā)明涉及人工智能技術領域，提供一種基于強化學習的業(yè)務分配方法、裝置、設備及存儲介質(zhì)，用于提高業(yè)務分配的準確性。基于強化學習的業(yè)務分配方法包括：對基于多個參與端的機構私密數(shù)據(jù)的特征向量信息進行選擇概率預測得到選擇概率；通過選擇概率對特征向量信息進行采樣得到采樣梯度信息；根據(jù)采樣梯度信息，對預置業(yè)務評估聯(lián)邦模型的模型參數(shù)進行更新，得到更新聯(lián)邦評估模型，并通過更新聯(lián)邦評估模型計算獎勵值；通過預置評估器和獎勵值，對特征向量信息進行價值評估，得到參與者貢獻度；根據(jù)參與者貢獻度，對多個參與端進行業(yè)務分配，得到參與者業(yè)務分配信息。此外，本發(fā)明還涉及區(qū)塊鏈技術，機構私密數(shù)據(jù)可存儲于區(qū)塊鏈中。

基于注意力模型和深度強化學習的無人車行駛決策方法 919     

 0

本發(fā)明公開了一種基于注意力模型和深度強化學習的無人車行駛決策方法通過構建感知模塊和決策模塊完成無人車行駛決策任務，具體為：通過搭建自注意力模型和長短時記憶網(wǎng)絡對感知模塊進行建模，然后通過自動編碼器模型對感知模塊進行訓練；利用卷積網(wǎng)絡和全連接網(wǎng)絡搭建決策模塊，所述決策模塊基于深度確定性策略算法。利用感知模塊對觀測數(shù)據(jù)進行降維，再利用深度強化學習決策模塊進行策略學習，并通過引入優(yōu)先經(jīng)驗回放的方法，提高數(shù)據(jù)樣本的利用率，從而提高算法的訓練速度。本發(fā)明方法通過在自動駕駛環(huán)境中進行模型訓練后，可以在復雜的道路環(huán)境中安全行駛，并根據(jù)環(huán)境的變化制定合理的駕駛策略。

雜散電流引起鋼質(zhì)埋地管道電化學銹蝕的模擬裝置和方法 708     

 0

本發(fā)明公開了一種雜散電流引起鋼質(zhì)埋地管道電化學銹蝕的模擬裝置和方法。模擬裝置包括電源、恒電位儀、參比電極，輔助陽極、鋼管和裝有土壤的容器，參比電極，輔助陽極和鋼管埋在土壤中，電源包括信號發(fā)生器和雙極性直流電源，信號發(fā)生器產(chǎn)生的雜散電流模擬信號傳輸給雙極性直流電源，雙極性直流電源的電壓信號輸出端接恒電位儀的信號輸入端；恒電位儀的參比電極接口接參比電極，工作電極接口接鋼管，輔助陽極接口接輔助陽極。本發(fā)明可以在實驗室條件下實現(xiàn)鋼質(zhì)埋地管道受雜散電流影響而產(chǎn)生的電化學銹蝕的模擬；利用測試到的雜散電流的時程數(shù)據(jù)，通過高速雙極性直流電源產(chǎn)生雜散電流，真實、高精度地再現(xiàn)鐵路沿線土壤中鋼質(zhì)埋地管道銹蝕過程。

自動控制電流、電壓及時間的化學拋光設備及其方法 966     

 0

本發(fā)明提供了一種自動控制電流、電壓及時間的化學拋光設備，包括電流?電壓傳感器、電壓控制器、計算機、電源和電解槽，所述電解槽內(nèi)設有電解液、陰極和作為陽極的工件，所述陰極和工件分別置于所述電解液中并對應設置，所述工件與所述電源的陽極連接，所述電源的陰極串聯(lián)所述電流?電壓傳感器、電壓控制器后與所述陰極連接，所述電流?電壓傳感器的輸出端與所述計算機連接。本發(fā)明還提供了一種自動控制電流、電壓及時間的化學拋光方法。本發(fā)明的有益效果是：通過逐漸升高電壓，實時監(jiān)測“電流?電壓曲線”，捕捉理想的拋光電壓和電流。

危險化學品儲槽緊急轉(zhuǎn)移系統(tǒng) 1051     

 0

一種危險化學品儲槽緊急轉(zhuǎn)移系統(tǒng)，它涉及化工存儲技術領域。它包括：儲槽；安全槽；設于所述儲槽與所述安全槽之間供溶液流通的導流管；及設于所述導流管內(nèi)的電磁閥；所述儲槽設有監(jiān)控裝置，所述監(jiān)控裝置和所述電磁閥與外部控制系統(tǒng)連接，所述監(jiān)控裝置用于監(jiān)測所述儲槽內(nèi)的危急情況，所述外部控制系統(tǒng)用于控制所述電磁閥開啟以將所述儲槽內(nèi)的溶液轉(zhuǎn)移至所述安全槽。采用上述技術方案，在發(fā)生緊急情況時，外部控制系統(tǒng)可控制電磁閥開啟，使儲槽內(nèi)的危險化學品溶液迅速流入安全槽內(nèi)，防止損失擴大，減少事故后期處置的成本，減小污染。

檢測多肽中N,N-二異丙基碳二亞胺的方法 1104     

 0

本發(fā)明屬于藥物分析化學領域，公開了一種檢測多肽中N,N-二異丙基碳二亞胺的方法。本發(fā)明所述檢測方法分別用pH≤5的溶液溶解待測多肽樣品和N,N-二異丙基碳二亞胺對照品制得供試品溶液和對照品溶液；采用液相色譜與質(zhì)譜聯(lián)用的方法檢測供試品溶液中N,N-二異丙基碳二亞胺含量。本發(fā)明所述檢測方法以pH≤5的溶液溶解多肽樣品，營造一個酸性環(huán)境，使得多肽中的DIC完全轉(zhuǎn)化為其尿素衍生物。本發(fā)明所述檢測方法操作簡單，檢測儀器和試劑普通，檢測成本低；檢測時間短；檢測結果準確、明顯，易于判斷；檢測靈敏度高，質(zhì)譜檢測的檢測限可以達到0.8ppm，廣泛適合于多肽類藥物中DIC的檢測。

顯著提高RuO2酸性中OER催化性能的電化學嵌鋰改性方法 822     

 0

本發(fā)明屬于電催化技術領域，具體涉及一種顯著提高RuO2酸性中OER催化性能的電化學嵌鋰改性方法。本發(fā)明通過電化學方法成功嵌入到RuO2晶格中并形成固溶體相(LixRuO2)。OER電催化測試結果表明，RuO2的OER性能通過鋰嵌入后得到顯著提升，特別是，Li0.52RuO2在0.5M H2SO4電解液中電流密度達到10mA cm?2具有156mV的超低過電位，并在1.27V恒定電位下保持電流密度為10mA cm?2至少在70h不發(fā)生明顯的衰減。

基于深度強化學習的視頻編碼幀內(nèi)碼率控制方法 862     

 0

本發(fā)明公開了一種基于深度強化學習的視頻編碼幀內(nèi)碼率控制方法，采用A3C算法，首先采用不同分辨率的視頻進行編碼并記錄實際編碼信息以制作離線訓練數(shù)據(jù)集，然后定義行動網(wǎng)絡和批評網(wǎng)絡的結構和輸入輸出，再利用離線訓練數(shù)據(jù)集訓練定義好的網(wǎng)絡，訓練完成后將網(wǎng)絡嵌入到HM編碼軟件中，當視頻編碼進行到幀內(nèi)碼率控制流程時，調(diào)用該網(wǎng)絡預測得到當前CTU的QP并計算當前的拉格朗日優(yōu)化因子，利用得到的QP和拉格朗日優(yōu)化因子對當前CTU進行編碼，實現(xiàn)幀內(nèi)碼率控制。本發(fā)明的方法相對于傳統(tǒng)的幀內(nèi)碼率控制方法以及現(xiàn)有的基于深度強化學習的幀內(nèi)碼率控制方法，率失真性能都有一定的提升。

化學氣相淀積反應器及反應腔 1081     

 0

本實用新型揭示了一種用于化學氣相淀積反應器及其反應腔。其中,加熱裝置由若干單獨測控的扇形加熱單元組成,在所述扇形加熱單元之間可以放置襯底載盤支撐或反應腔頂蓋支撐。所述加熱裝置具有結構簡單,操作與維修方便,制造和使用成本低等優(yōu)點,適用于大直徑化學氣相淀積反應器反應腔中加熱環(huán)形或圓形或由若干扇形襯底載盤單元組成的環(huán)形或圓形襯底載盤。

智能洗菜機的電化學單元 1102     

 0

本發(fā)明公開了一種智能洗菜機的電化學單元，通過智能化地、實時地自動調(diào)整電源驅(qū)動單元加載到正負電極對上的電壓，實現(xiàn)了控制單元對正負電極工作狀態(tài)的迅速響應，提高了洗菜機的工作效率、延長了電極生命周期；結合溶液離子濃度的監(jiān)測，提高了對電極本身運行狀態(tài)判斷的可靠性，進一步保證了電化學單元的穩(wěn)定性。

基于電化學阻抗譜的退役電池快速分選方法 863     

 0

本發(fā)明公開了一種基于電化學阻抗譜的退役電池快速分選方法，該方法包括：采集電池的EIS數(shù)據(jù)并訓練貝葉斯神經(jīng)網(wǎng)絡，得到剩余容量估計模型；對退役動力電池進行初步評估和EIS測試，得到退役電池EIS數(shù)據(jù)；將退役電池EIS數(shù)據(jù)輸入至剩余容量估計模型，得到退役電池的估計剩余容量；基于等效電路模型和退役電池EIS數(shù)據(jù)辨識得到電池阻抗參數(shù)；基于機器學習聚類算法，根據(jù)退役電池的估計剩余容量和電池阻抗參數(shù)對退役電池進行多條件快速分選。本發(fā)明作為一種基于電化學阻抗譜的退役電池快速分選方法，可廣泛應用于數(shù)據(jù)電池分類領域。

上轉(zhuǎn)換長余輝化學發(fā)光成像納米探針及其制備方法和應用 714     

 0

本發(fā)明公開了一種上轉(zhuǎn)換長余輝化學發(fā)光成像納米探針及其制備方法和應用，所述熒光探針無需使用稀土元素，可以接收660nm激光、發(fā)射出570nm的化學發(fā)光，在激光停止照射后仍可持續(xù)發(fā)光，持續(xù)十天后依舊能發(fā)出可以被觀測到的化學發(fā)光，在生物成像領域有重要意義。

針對性強化學習方法、裝置、終端及存儲介質(zhì) 679     

 0

本發(fā)明公開一種針對性強化學習方法，包括以下步驟：獲取學生的學習數(shù)據(jù)信息；根據(jù)學習數(shù)據(jù)信息統(tǒng)計學生的失分題目信息；根據(jù)失分題目信息確認學生需要強化學習的多個失分知識點；根據(jù)失分知識點向?qū)W生提供具有相應失分知識點題型的訓練冊。本發(fā)明通過調(diào)取學生此前的學習數(shù)據(jù)信息，對失分題目進行統(tǒng)計，然后確定學生在測驗與考試容易丟分的失分知識點，再然后根據(jù)這些失分知識點生成包含針對每個學生所需強化學習的失分知識點的訓練冊，從而使每個學生在對應的訓練冊中能夠?qū)ψ约赫莆詹簧畹闹R點進行針對性強化，進而全面提升學生的學習成績。

基于強化學習的聯(lián)合決策方法及裝置 1080     

 0

本申請實施例公開一種基于強化學習的聯(lián)合決策方法及裝置。所述方法包括A1、通過演說家?評論家網(wǎng)絡的演說家網(wǎng)絡根據(jù)輸入的環(huán)境狀態(tài)觀測值，輸出決策變量的動作概率分布；A2、通過所述演說家?評論家網(wǎng)絡的評論家網(wǎng)絡根據(jù)輸入的環(huán)境狀態(tài)觀測值，輸出當前狀態(tài)的價值估計；A3、根據(jù)所述決策變量的動作概率分布和所述當前狀態(tài)的價值估計，得到優(yōu)勢函數(shù)的估計值；A4、使用所述演說家?評論家網(wǎng)絡和基于所述優(yōu)勢函數(shù)的策略梯度算法，利用過往的內(nèi)容訪問數(shù)據(jù)進行訓練，得到深度強化學習的模型，從而實現(xiàn)輸出聯(lián)合決策策略。所述裝置可實現(xiàn)所述方法。本申請實施例可在不需要先驗信息的情況下最大化使用者的長期利益。

基于深度強化學習的自動駕駛車輛超車決策方法 1050     

 0

本發(fā)明公開一種基于深度強化學習的自動駕駛車輛超車決策方法。該方法包括：基于演員評論家架構構建強化學習網(wǎng)絡，該強化學習網(wǎng)絡包含策略網(wǎng)絡、價值網(wǎng)絡和Q值網(wǎng)絡，其中策略網(wǎng)絡通過對駕駛環(huán)境的觀測產(chǎn)生連續(xù)的駕駛動作；車輛將所述策略網(wǎng)絡產(chǎn)生的連續(xù)駕駛動作應用于駕駛決策任務中，并通過與駕駛環(huán)境的交互，以實現(xiàn)無碰撞、連續(xù)高速超車為目標，在獎勵函數(shù)指導下進行自動駕駛，其中所述駕駛決策任務包括第一子任務和第二子任務，第一子任務是在單車場景中實現(xiàn)自動駕駛車輛高速的駕駛，第二子任務是在多車環(huán)境中實現(xiàn)超車任務，第二子任務的初始策略是第一子任務得到的最優(yōu)策略。利用本發(fā)明能夠?qū)崿F(xiàn)無碰撞的、連續(xù)高速超車任務。

用于索體的防腐蝕的電化學方法及裝置 951     

 0

本發(fā)明公開了一種用于索體的防腐蝕的電化學方法，包括：外加直流電通過活性炭纖維布上的導電部向索體施加電流，并與平行鋼絲束或鋼絞線束上設置的陰極接入點之間形成導電回路，所述導電部是由高硅鉻鐵、磁性氧化鐵、鉛銀合金、鉑復合材料中的任一材料制成；監(jiān)測控制索體的電位值數(shù)據(jù)，其包括以下步驟：比較索體的目標電位值數(shù)據(jù)和采集到的索體實際電位值數(shù)據(jù)，根據(jù)比較結果信息，調(diào)整外加直流電的輸出值。本發(fā)明還公開了一種用于索體的防腐蝕的電化學裝置。實施本發(fā)明的用于索體的防腐蝕的電化學方法及裝置，能夠增強對橋梁索體銹蝕的抑制，消除銹蝕對索體使用壽命的影響，可以大幅提高目前索體的使用壽命。

基于強化學習算法的超冗余機械臂自主抓捕空間碎片方法 645     

 0

本發(fā)明公開了一種基于強化學習算法的超冗余機械臂自主抓捕空間碎片方法，包括S100：服務航天器通過攜帶的測量裝置獲取空間碎片信息；S200：服務航天器接近空間碎片，實現(xiàn)與空間碎片的軌道運動同步，并調(diào)整自身姿態(tài)；S300：基于空間翻滾目標是處于自由漂浮狀態(tài)的動態(tài)物體這一事實，采用馬爾科夫決策過程對抓捕過程進行建模，得到超冗余機械臂抓捕空間碎片的抓捕模型；S400：對空間碎片抓捕過程中的多元約束進行數(shù)學化的表征；S500：根據(jù)強化學習方法求解馬爾科夫決策過程的最優(yōu)策略，得到一條超冗余機械臂從初始構型到成功抓捕住空間碎片構型的抓捕路徑，并根據(jù)抓捕路徑進行抓捕。該方法能夠自主性地規(guī)劃超冗余機械臂從初始構型到成功抓捕住空間碎片構型的抓捕路徑。