本程序实现了在一个二维的网格模型中，蚂蚁从出发地沿踪迹走步的模拟实验。-This procedure has in a grid of two-dimensional model, starting from the ants walking along the trail of the simulation experiment.

“ 人工蚂蚁” 生活在一个二维网格世界中， 它能沿已作标记的单元所组成的连续“信息素踪迹”(宽为一个单元)的运动。这个蚂蚁占一个单元，它可以面向东、南、西、北。它能做五个动作：前移一个单元(m)；在同一单元中向左转(l)；在同一单元中向右转(r)；设置状态位元“开”(on)；设置状态位元“关”(off)。蚂蚁感知它的正前方(即其面朝的方向)是否有信息素踪迹且其状态位元是否为“开”，若状态位元为“开”表示该单元已经走过（设状态位元起初为“关”）。-"Artificial ants world l

Reinforcement Learning 中以 Q learning 學習的倒單擺實驗。以x,x_dot,theta,theta_dot作為狀態參數 state，利用model模擬之結果做Q值更新，產生Q table，對學習平衡控制。結果以csv檔作為輸出，可以由使用者作圖觀察變化。-Reinforcement Learning , utilize Q learning for An inverted pendulum system control。x,x_dot,theta,theta_d