原创 強化學習學習總結(三)——Sarsa

1.qlearning和sarsa 區別 (1)qlearning——off-policy:離線 (2)sarsa——on-policy:在線   2.程序 學習模式不同 class SarsaTable(RL): de

原创 TensorFlow學習總結(六)卷積神經網絡—LeNet5

一、認知概念 https://blog.csdn.net/Raoodududu/article/details/82287099 二、 常用結構的tensorflow運用 1. 卷積層 '''通過tf.get_variable的方式創建

原创 強化學習學習總結(四)——DQN

一、def         如果我們的state與action很多,就如打磚塊遊戲,每個時間不同的磚塊排列跟剩餘都是不同的state,就會導致維度災難。使用神經網絡來 估算 這個 state 的值, 這樣就不需要一張表了. 更新方式 二

原创 強化學習學習總結(二)——QLearning算法更新和思維決策

QLearning        QLearning並沒有直接將這個Q值(q_target是估計值)直接賦予新的Q,而是採用漸進的方式類似梯度下降,朝target邁近一小步,取決於α,這就能夠減少估計誤差造成的影響。類似隨機梯度下降,最後

原创 Mysql學習記錄(三)約束的使用和數據表操作

                                一、約束的使用()           上一部分 (列級約束)                      1.外鍵約束FOREIGN KEY                

原创 Mysql學習記錄(六)運算符和函數

                                            1.字符函數                        ①CONCAT() 直接寫連接內容                           

原创 Mysql學習記錄(八)MYSQL圖形化管理工具

                Nacicat常規操作    1.新建                                                                               2.  數

原创 Mysql學習記錄(七)MYSQL存儲

 一、存儲過程                                                                                                               

原创 Mysql學習記錄(五)子查詢與連接

一、子查詢                                        1.使用計較運算符的子查詢           ①常規應用                                相當於         

原创 Mysql學習記錄(四)操作數據(數據表中的記錄)

增刪改查                                  一、數據表中記錄的基本操作(單表)增刪改                      創建新的數據表users3                       1.插

原创 Mysql學習記錄(二)數據類型和數據表操作

一、數據類型                                         1.整形(選擇合適的類型有利於存儲和優化)                              2.浮點型(一般單精度 小數點後七位)  

原创 Mysql學習記錄(三)約束的使用和操作數據表中的記錄

一、約束的使用           上一部分 (列級約束)                             1.外鍵約束FOREIGN KEY                               (1)創建外鍵約束的條件及

原创 Mysql學習記錄(一)數據庫入門操作

一、數據庫入門 1.登入 退出 2.mysql提示符(前面閃爍光標) 3.常用命令及規範 4.數據庫操作 大括號必須有,中括號選擇有,文件名必須有 (1)創建CREATE 查看SHOW  (2)修改ALTER (3)刪除D

原创 python 可視化工具matplotlib應用

基本應用 1.基本應用 導入模塊 import matplotlib.pyplot as plt import numpy as np 定義x,y x = np.linspace(-1, 1, 50) #使用np.linspac

原创 Linux激活python3

source activate py35