【正文】 需要提出新的保證可靠廣播通信的機(jī)制。如果 rndPi則傳送 ACK包，否則不回傳 ACK包。 一種無線傳感器網(wǎng)絡(luò)的動態(tài)協(xié)調(diào)的 MAC協(xié)議 Abstract ? 本文中，我們設(shè)計(jì)了一種基于競爭的無線傳感器網(wǎng)絡(luò)的動態(tài)協(xié)調(diào)的 MAC協(xié)議（ ACMAC）。 ACMAC Protocol Design ? 自適應(yīng)的工作周期（ duty cycle） ? 動態(tài)協(xié)調(diào)工作周期是 ACMAC關(guān)鍵的策略，以適應(yīng)流量負(fù)載。 Simulation Study ? 仿真中對比了 ACMAC和 SMAC和 MAC。其中空閑偵聽是主要的能源浪費(fèi)。 Markov decision process and RL methods 馬爾可夫過程（ MDP）和 RL（增強(qiáng)學(xué)習(xí)）方法 ? An MDP (Bertsekas and Tsitsiklis, 1996) is defined as a (S,A,P,R) tuple, where S stands for the state space, A contains all the possible actions at each state, P is a probability transition function S A S → [0 , 1] and R is the reward function S A → R. Also, we define π as the decision policy that maps the state set to the action set: π : S → A. Specifically, let us assume that the environment is a finitestate, discretetime stochastic dynamic system. Let the state space S be S = (s1, s2,..., sn) and, accordingly, action space A be A = (a1, a2,..., am).. The goal for the RL agent is to maximise the expected discounted reward or statevalue... ? 在 Q學(xué)習(xí)過程中， a learned action value function Q directly approximates Q? through value ， Q值的更新規(guī)則如下公式： ? 在下節(jié)中，我們列 MAC能耗優(yōu)化方程，作為一個(gè) MDP（馬爾可夫過程）。因此預(yù)約的活動時(shí)間應(yīng)該是節(jié)點(diǎn)流量負(fù)載情況的函數(shù)。 The RL framework assumes an underlaying MDP, which使節(jié)點(diǎn)推測網(wǎng)絡(luò)中其它節(jié)點(diǎn)的狀態(tài)，來動態(tài)地優(yōu)化MAC策略。我們的方法就基于這個(gè)前提，同時(shí)我們把活動時(shí)間的預(yù)約問題作為一個(gè) MDP（馬爾可夫過程）（ formulate the active time reservation problem as an MDP） . ? 我們的 RL代理的目標(biāo)是：首先，努力最大化一個(gè)能效因子，它是有效的傳輸 /接收時(shí)間跟總的預(yù)約活動之間的比率。這樣，整個(gè)網(wǎng)絡(luò)的介質(zhì)接入效率得到了提高。然而，在大部分情況下每個(gè)節(jié)點(diǎn)根據(jù)自身的流量負(fù)載來決定工作周期。對于目標(biāo)接收節(jié)點(diǎn)，當(dāng)它接收到 RTS包后，會把 Ri附加到 CTS包，來傳播單跳之內(nèi)的新的工作周期。 ACMAC Protocol Design ? 同步和虛簇： ? SMAC的偵聽期間，包括 SYNC和 RTS/CTS部分。仿真結(jié)果表明改進(jìn)的 MAC協(xié)議適用于 WSN，并且表現(xiàn)更好。 ? 初始的確認(rèn)概率定義為（ 2）式。我們嘗試在廣播模式中加入 RTS/CTS機(jī)制。大量的仿真結(jié)果表明基于這種提出的自適應(yīng)概率確認(rèn)機(jī)制的 MAC協(xié)議具有更好的接入控制效果和節(jié)能效率。而 WSN的主要通信方式是廣播。下文將對這兩步進(jìn)行討論。 ? 如果在一個(gè)窗口中出現(xiàn)太多數(shù)據(jù)包接收到多確認(rèn)包，確認(rèn)概率應(yīng)該降低；如果在一個(gè)窗口中太多數(shù)據(jù)包沒有接收到確認(rèn)包，確認(rèn)概率應(yīng)該增大。 Introduction ? WSN節(jié)能技術(shù)關(guān)注以下幾個(gè)方面： ? 1. 動態(tài)地協(xié)調(diào)發(fā)