8edb3f89b22dc0e8d2ae7c546abfd02e47e96006
[pandora-kernel.git] / drivers / net / wireless / iwlwifi / iwl-agn-tx.c
1 /******************************************************************************
2  *
3  * GPL LICENSE SUMMARY
4  *
5  * Copyright(c) 2008 - 2011 Intel Corporation. All rights reserved.
6  *
7  * This program is free software; you can redistribute it and/or modify
8  * it under the terms of version 2 of the GNU General Public License as
9  * published by the Free Software Foundation.
10  *
11  * This program is distributed in the hope that it will be useful, but
12  * WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * General Public License for more details.
15  *
16  * You should have received a copy of the GNU General Public License
17  * along with this program; if not, write to the Free Software
18  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110,
19  * USA
20  *
21  * The full GNU General Public License is included in this distribution
22  * in the file called LICENSE.GPL.
23  *
24  * Contact Information:
25  *  Intel Linux Wireless <ilw@linux.intel.com>
26  * Intel Corporation, 5200 N.E. Elam Young Parkway, Hillsboro, OR 97124-6497
27  *
28  *****************************************************************************/
29
30 #include <linux/kernel.h>
31 #include <linux/module.h>
32 #include <linux/init.h>
33 #include <linux/sched.h>
34 #include <linux/ieee80211.h>
35
36 #include "iwl-dev.h"
37 #include "iwl-core.h"
38 #include "iwl-sta.h"
39 #include "iwl-io.h"
40 #include "iwl-helpers.h"
41 #include "iwl-agn-hw.h"
42 #include "iwl-agn.h"
43 #include "iwl-trans.h"
44
45 /*
46  * mac80211 queues, ACs, hardware queues, FIFOs.
47  *
48  * Cf. http://wireless.kernel.org/en/developers/Documentation/mac80211/queues
49  *
50  * Mac80211 uses the following numbers, which we get as from it
51  * by way of skb_get_queue_mapping(skb):
52  *
53  *      VO      0
54  *      VI      1
55  *      BE      2
56  *      BK      3
57  *
58  *
59  * Regular (not A-MPDU) frames are put into hardware queues corresponding
60  * to the FIFOs, see comments in iwl-prph.h. Aggregated frames get their
61  * own queue per aggregation session (RA/TID combination), such queues are
62  * set up to map into FIFOs too, for which we need an AC->FIFO mapping. In
63  * order to map frames to the right queue, we also need an AC->hw queue
64  * mapping. This is implemented here.
65  *
66  * Due to the way hw queues are set up (by the hw specific modules like
67  * iwl-4965.c, iwl-5000.c etc.), the AC->hw queue mapping is the identity
68  * mapping.
69  */
70
71 static const u8 tid_to_ac[] = {
72         IEEE80211_AC_BE,
73         IEEE80211_AC_BK,
74         IEEE80211_AC_BK,
75         IEEE80211_AC_BE,
76         IEEE80211_AC_VI,
77         IEEE80211_AC_VI,
78         IEEE80211_AC_VO,
79         IEEE80211_AC_VO
80 };
81
82 static inline int get_ac_from_tid(u16 tid)
83 {
84         if (likely(tid < ARRAY_SIZE(tid_to_ac)))
85                 return tid_to_ac[tid];
86
87         /* no support for TIDs 8-15 yet */
88         return -EINVAL;
89 }
90
91 static inline int get_fifo_from_tid(struct iwl_rxon_context *ctx, u16 tid)
92 {
93         if (likely(tid < ARRAY_SIZE(tid_to_ac)))
94                 return ctx->ac_to_fifo[tid_to_ac[tid]];
95
96         /* no support for TIDs 8-15 yet */
97         return -EINVAL;
98 }
99
100 static int iwlagn_txq_agg_enable(struct iwl_priv *priv, int txq_id, int sta_id,
101                                 int tid)
102 {
103         if ((IWLAGN_FIRST_AMPDU_QUEUE > txq_id) ||
104             (IWLAGN_FIRST_AMPDU_QUEUE +
105                 hw_params(priv).num_ampdu_queues <= txq_id)) {
106                 IWL_WARN(priv,
107                         "queue number out of range: %d, must be %d to %d\n",
108                         txq_id, IWLAGN_FIRST_AMPDU_QUEUE,
109                         IWLAGN_FIRST_AMPDU_QUEUE +
110                         hw_params(priv).num_ampdu_queues - 1);
111                 return -EINVAL;
112         }
113
114         /* Modify device's station table to Tx this TID */
115         return iwl_sta_tx_modify_enable_tid(priv, sta_id, tid);
116 }
117
118 static void iwlagn_tx_cmd_protection(struct iwl_priv *priv,
119                                      struct ieee80211_tx_info *info,
120                                      __le16 fc, __le32 *tx_flags)
121 {
122         if (info->control.rates[0].flags & IEEE80211_TX_RC_USE_RTS_CTS ||
123             info->control.rates[0].flags & IEEE80211_TX_RC_USE_CTS_PROTECT ||
124             info->flags & IEEE80211_TX_CTL_AMPDU)
125                 *tx_flags |= TX_CMD_FLG_PROT_REQUIRE_MSK;
126 }
127
128 /*
129  * handle build REPLY_TX command notification.
130  */
131 static void iwlagn_tx_cmd_build_basic(struct iwl_priv *priv,
132                                       struct sk_buff *skb,
133                                       struct iwl_tx_cmd *tx_cmd,
134                                       struct ieee80211_tx_info *info,
135                                       struct ieee80211_hdr *hdr, u8 sta_id)
136 {
137         __le16 fc = hdr->frame_control;
138         __le32 tx_flags = tx_cmd->tx_flags;
139
140         tx_cmd->stop_time.life_time = TX_CMD_LIFE_TIME_INFINITE;
141
142         if (!(info->flags & IEEE80211_TX_CTL_NO_ACK))
143                 tx_flags |= TX_CMD_FLG_ACK_MSK;
144         else
145                 tx_flags &= ~TX_CMD_FLG_ACK_MSK;
146
147         if (ieee80211_is_probe_resp(fc))
148                 tx_flags |= TX_CMD_FLG_TSF_MSK;
149         else if (ieee80211_is_back_req(fc))
150                 tx_flags |= TX_CMD_FLG_ACK_MSK | TX_CMD_FLG_IMM_BA_RSP_MASK;
151         else if (info->band == IEEE80211_BAND_2GHZ &&
152                  priv->cfg->bt_params &&
153                  priv->cfg->bt_params->advanced_bt_coexist &&
154                  (ieee80211_is_auth(fc) || ieee80211_is_assoc_req(fc) ||
155                  ieee80211_is_reassoc_req(fc) ||
156                  skb->protocol == cpu_to_be16(ETH_P_PAE)))
157                 tx_flags |= TX_CMD_FLG_IGNORE_BT;
158
159
160         tx_cmd->sta_id = sta_id;
161         if (ieee80211_has_morefrags(fc))
162                 tx_flags |= TX_CMD_FLG_MORE_FRAG_MSK;
163
164         if (ieee80211_is_data_qos(fc)) {
165                 u8 *qc = ieee80211_get_qos_ctl(hdr);
166                 tx_cmd->tid_tspec = qc[0] & 0xf;
167                 tx_flags &= ~TX_CMD_FLG_SEQ_CTL_MSK;
168         } else {
169                 tx_flags |= TX_CMD_FLG_SEQ_CTL_MSK;
170         }
171
172         iwlagn_tx_cmd_protection(priv, info, fc, &tx_flags);
173
174         tx_flags &= ~(TX_CMD_FLG_ANT_SEL_MSK);
175         if (ieee80211_is_mgmt(fc)) {
176                 if (ieee80211_is_assoc_req(fc) || ieee80211_is_reassoc_req(fc))
177                         tx_cmd->timeout.pm_frame_timeout = cpu_to_le16(3);
178                 else
179                         tx_cmd->timeout.pm_frame_timeout = cpu_to_le16(2);
180         } else {
181                 tx_cmd->timeout.pm_frame_timeout = 0;
182         }
183
184         tx_cmd->driver_txop = 0;
185         tx_cmd->tx_flags = tx_flags;
186         tx_cmd->next_frame_len = 0;
187 }
188
189 #define RTS_DFAULT_RETRY_LIMIT          60
190
191 static void iwlagn_tx_cmd_build_rate(struct iwl_priv *priv,
192                                      struct iwl_tx_cmd *tx_cmd,
193                                      struct ieee80211_tx_info *info,
194                                      __le16 fc)
195 {
196         u32 rate_flags;
197         int rate_idx;
198         u8 rts_retry_limit;
199         u8 data_retry_limit;
200         u8 rate_plcp;
201
202         /* Set retry limit on DATA packets and Probe Responses*/
203         if (ieee80211_is_probe_resp(fc))
204                 data_retry_limit = 3;
205         else
206                 data_retry_limit = IWLAGN_DEFAULT_TX_RETRY;
207         tx_cmd->data_retry_limit = data_retry_limit;
208
209         /* Set retry limit on RTS packets */
210         rts_retry_limit = RTS_DFAULT_RETRY_LIMIT;
211         if (data_retry_limit < rts_retry_limit)
212                 rts_retry_limit = data_retry_limit;
213         tx_cmd->rts_retry_limit = rts_retry_limit;
214
215         /* DATA packets will use the uCode station table for rate/antenna
216          * selection */
217         if (ieee80211_is_data(fc)) {
218                 tx_cmd->initial_rate_index = 0;
219                 tx_cmd->tx_flags |= TX_CMD_FLG_STA_RATE_MSK;
220 #ifdef CONFIG_IWLWIFI_DEVICE_SVTOOL
221                 if (priv->tm_fixed_rate) {
222                         /*
223                          * rate overwrite by testmode
224                          * we not only send lq command to change rate
225                          * we also re-enforce per data pkt base.
226                          */
227                         tx_cmd->tx_flags &= ~TX_CMD_FLG_STA_RATE_MSK;
228                         memcpy(&tx_cmd->rate_n_flags, &priv->tm_fixed_rate,
229                                sizeof(tx_cmd->rate_n_flags));
230                 }
231 #endif
232                 return;
233         }
234
235         /**
236          * If the current TX rate stored in mac80211 has the MCS bit set, it's
237          * not really a TX rate.  Thus, we use the lowest supported rate for
238          * this band.  Also use the lowest supported rate if the stored rate
239          * index is invalid.
240          */
241         rate_idx = info->control.rates[0].idx;
242         if (info->control.rates[0].flags & IEEE80211_TX_RC_MCS ||
243                         (rate_idx < 0) || (rate_idx > IWL_RATE_COUNT_LEGACY))
244                 rate_idx = rate_lowest_index(&priv->bands[info->band],
245                                 info->control.sta);
246         /* For 5 GHZ band, remap mac80211 rate indices into driver indices */
247         if (info->band == IEEE80211_BAND_5GHZ)
248                 rate_idx += IWL_FIRST_OFDM_RATE;
249         /* Get PLCP rate for tx_cmd->rate_n_flags */
250         rate_plcp = iwl_rates[rate_idx].plcp;
251         /* Zero out flags for this packet */
252         rate_flags = 0;
253
254         /* Set CCK flag as needed */
255         if ((rate_idx >= IWL_FIRST_CCK_RATE) && (rate_idx <= IWL_LAST_CCK_RATE))
256                 rate_flags |= RATE_MCS_CCK_MSK;
257
258         /* Set up antennas */
259          if (priv->cfg->bt_params &&
260              priv->cfg->bt_params->advanced_bt_coexist &&
261              priv->bt_full_concurrent) {
262                 /* operated as 1x1 in full concurrency mode */
263                 priv->mgmt_tx_ant = iwl_toggle_tx_ant(priv, priv->mgmt_tx_ant,
264                                 first_antenna(hw_params(priv).valid_tx_ant));
265         } else
266                 priv->mgmt_tx_ant = iwl_toggle_tx_ant(priv, priv->mgmt_tx_ant,
267                                                 hw_params(priv).valid_tx_ant);
268         rate_flags |= iwl_ant_idx_to_flags(priv->mgmt_tx_ant);
269
270         /* Set the rate in the TX cmd */
271         tx_cmd->rate_n_flags = iwl_hw_set_rate_n_flags(rate_plcp, rate_flags);
272 }
273
274 static void iwlagn_tx_cmd_build_hwcrypto(struct iwl_priv *priv,
275                                       struct ieee80211_tx_info *info,
276                                       struct iwl_tx_cmd *tx_cmd,
277                                       struct sk_buff *skb_frag,
278                                       int sta_id)
279 {
280         struct ieee80211_key_conf *keyconf = info->control.hw_key;
281
282         switch (keyconf->cipher) {
283         case WLAN_CIPHER_SUITE_CCMP:
284                 tx_cmd->sec_ctl = TX_CMD_SEC_CCM;
285                 memcpy(tx_cmd->key, keyconf->key, keyconf->keylen);
286                 if (info->flags & IEEE80211_TX_CTL_AMPDU)
287                         tx_cmd->tx_flags |= TX_CMD_FLG_AGG_CCMP_MSK;
288                 IWL_DEBUG_TX(priv, "tx_cmd with AES hwcrypto\n");
289                 break;
290
291         case WLAN_CIPHER_SUITE_TKIP:
292                 tx_cmd->sec_ctl = TX_CMD_SEC_TKIP;
293                 ieee80211_get_tkip_p2k(keyconf, skb_frag, tx_cmd->key);
294                 IWL_DEBUG_TX(priv, "tx_cmd with tkip hwcrypto\n");
295                 break;
296
297         case WLAN_CIPHER_SUITE_WEP104:
298                 tx_cmd->sec_ctl |= TX_CMD_SEC_KEY128;
299                 /* fall through */
300         case WLAN_CIPHER_SUITE_WEP40:
301                 tx_cmd->sec_ctl |= (TX_CMD_SEC_WEP |
302                         (keyconf->keyidx & TX_CMD_SEC_MSK) << TX_CMD_SEC_SHIFT);
303
304                 memcpy(&tx_cmd->key[3], keyconf->key, keyconf->keylen);
305
306                 IWL_DEBUG_TX(priv, "Configuring packet for WEP encryption "
307                              "with key %d\n", keyconf->keyidx);
308                 break;
309
310         default:
311                 IWL_ERR(priv, "Unknown encode cipher %x\n", keyconf->cipher);
312                 break;
313         }
314 }
315
316 /*
317  * start REPLY_TX command process
318  */
319 int iwlagn_tx_skb(struct iwl_priv *priv, struct sk_buff *skb)
320 {
321         struct ieee80211_hdr *hdr = (struct ieee80211_hdr *)skb->data;
322         struct ieee80211_tx_info *info = IEEE80211_SKB_CB(skb);
323         struct iwl_station_priv *sta_priv = NULL;
324         struct iwl_rxon_context *ctx = &priv->contexts[IWL_RXON_CTX_BSS];
325         struct iwl_tx_cmd *tx_cmd;
326         int txq_id;
327
328         u16 seq_number = 0;
329         __le16 fc;
330         u8 hdr_len;
331         u16 len;
332         u8 sta_id;
333         u8 tid = 0;
334         unsigned long flags;
335         bool is_agg = false;
336
337         if (info->control.vif)
338                 ctx = iwl_rxon_ctx_from_vif(info->control.vif);
339
340         spin_lock_irqsave(&priv->shrd->lock, flags);
341         if (iwl_is_rfkill(priv->shrd)) {
342                 IWL_DEBUG_DROP(priv, "Dropping - RF KILL\n");
343                 goto drop_unlock_priv;
344         }
345
346         fc = hdr->frame_control;
347
348 #ifdef CONFIG_IWLWIFI_DEBUG
349         if (ieee80211_is_auth(fc))
350                 IWL_DEBUG_TX(priv, "Sending AUTH frame\n");
351         else if (ieee80211_is_assoc_req(fc))
352                 IWL_DEBUG_TX(priv, "Sending ASSOC frame\n");
353         else if (ieee80211_is_reassoc_req(fc))
354                 IWL_DEBUG_TX(priv, "Sending REASSOC frame\n");
355 #endif
356
357         hdr_len = ieee80211_hdrlen(fc);
358
359         /* For management frames use broadcast id to do not break aggregation */
360         if (!ieee80211_is_data(fc))
361                 sta_id = ctx->bcast_sta_id;
362         else {
363                 /* Find index into station table for destination station */
364                 sta_id = iwl_sta_id_or_broadcast(priv, ctx, info->control.sta);
365                 if (sta_id == IWL_INVALID_STATION) {
366                         IWL_DEBUG_DROP(priv, "Dropping - INVALID STATION: %pM\n",
367                                        hdr->addr1);
368                         goto drop_unlock_priv;
369                 }
370         }
371
372         IWL_DEBUG_TX(priv, "station Id %d\n", sta_id);
373
374         if (info->control.sta)
375                 sta_priv = (void *)info->control.sta->drv_priv;
376
377         if (sta_priv && sta_priv->asleep &&
378             (info->flags & IEEE80211_TX_CTL_PSPOLL_RESPONSE)) {
379                 /*
380                  * This sends an asynchronous command to the device,
381                  * but we can rely on it being processed before the
382                  * next frame is processed -- and the next frame to
383                  * this station is the one that will consume this
384                  * counter.
385                  * For now set the counter to just 1 since we do not
386                  * support uAPSD yet.
387                  */
388                 iwl_sta_modify_sleep_tx_count(priv, sta_id, 1);
389         }
390
391         /*
392          * Send this frame after DTIM -- there's a special queue
393          * reserved for this for contexts that support AP mode.
394          */
395         if (info->flags & IEEE80211_TX_CTL_SEND_AFTER_DTIM) {
396                 txq_id = ctx->mcast_queue;
397                 /*
398                  * The microcode will clear the more data
399                  * bit in the last frame it transmits.
400                  */
401                 hdr->frame_control |=
402                         cpu_to_le16(IEEE80211_FCTL_MOREDATA);
403         } else if (info->flags & IEEE80211_TX_CTL_TX_OFFCHAN)
404                 txq_id = IWL_AUX_QUEUE;
405         else
406                 txq_id = ctx->ac_to_queue[skb_get_queue_mapping(skb)];
407
408         /* irqs already disabled/saved above when locking priv->shrd->lock */
409         spin_lock(&priv->shrd->sta_lock);
410
411         if (ieee80211_is_data_qos(fc)) {
412                 u8 *qc = NULL;
413                 struct iwl_tid_data *tid_data;
414                 qc = ieee80211_get_qos_ctl(hdr);
415                 tid = qc[0] & IEEE80211_QOS_CTL_TID_MASK;
416                 tid_data = &priv->shrd->tid_data[sta_id][tid];
417
418                 if (WARN_ON_ONCE(tid >= IWL_MAX_TID_COUNT))
419                         goto drop_unlock_sta;
420
421                 seq_number = tid_data->seq_number;
422                 seq_number &= IEEE80211_SCTL_SEQ;
423                 hdr->seq_ctrl = hdr->seq_ctrl &
424                                 cpu_to_le16(IEEE80211_SCTL_FRAG);
425                 hdr->seq_ctrl |= cpu_to_le16(seq_number);
426                 seq_number += 0x10;
427                 /* aggregation is on for this <sta,tid> */
428                 if (info->flags & IEEE80211_TX_CTL_AMPDU &&
429                     tid_data->agg.state == IWL_AGG_ON) {
430                         txq_id = tid_data->agg.txq_id;
431                         is_agg = true;
432                 }
433         }
434
435         tx_cmd = iwl_trans_get_tx_cmd(trans(priv), txq_id);
436         if (unlikely(!tx_cmd))
437                 goto drop_unlock_sta;
438
439         /* Copy MAC header from skb into command buffer */
440         memcpy(tx_cmd->hdr, hdr, hdr_len);
441
442         /* Total # bytes to be transmitted */
443         len = (u16)skb->len;
444         tx_cmd->len = cpu_to_le16(len);
445
446         if (info->control.hw_key)
447                 iwlagn_tx_cmd_build_hwcrypto(priv, info, tx_cmd, skb, sta_id);
448
449         /* TODO need this for burst mode later on */
450         iwlagn_tx_cmd_build_basic(priv, skb, tx_cmd, info, hdr, sta_id);
451         iwl_dbg_log_tx_data_frame(priv, len, hdr);
452
453         iwlagn_tx_cmd_build_rate(priv, tx_cmd, info, fc);
454
455         iwl_update_stats(priv, true, fc, len);
456
457         if (iwl_trans_tx(trans(priv), skb, tx_cmd, txq_id, fc, is_agg, ctx))
458                 goto drop_unlock_sta;
459
460         if (ieee80211_is_data_qos(fc)) {
461                 priv->shrd->tid_data[sta_id][tid].tfds_in_queue++;
462                 if (!ieee80211_has_morefrags(fc))
463                         priv->shrd->tid_data[sta_id][tid].seq_number =
464                                 seq_number;
465         }
466
467         spin_unlock(&priv->shrd->sta_lock);
468         spin_unlock_irqrestore(&priv->shrd->lock, flags);
469
470         /*
471          * Avoid atomic ops if it isn't an associated client.
472          * Also, if this is a packet for aggregation, don't
473          * increase the counter because the ucode will stop
474          * aggregation queues when their respective station
475          * goes to sleep.
476          */
477         if (sta_priv && sta_priv->client && !is_agg)
478                 atomic_inc(&sta_priv->pending_frames);
479
480         return 0;
481
482 drop_unlock_sta:
483         spin_unlock(&priv->shrd->sta_lock);
484 drop_unlock_priv:
485         spin_unlock_irqrestore(&priv->shrd->lock, flags);
486         return -1;
487 }
488
489 /*
490  * Find first available (lowest unused) Tx Queue, mark it "active".
491  * Called only when finding queue for aggregation.
492  * Should never return anything < 7, because they should already
493  * be in use as EDCA AC (0-3), Command (4), reserved (5, 6)
494  */
495 static int iwlagn_txq_ctx_activate_free(struct iwl_priv *priv)
496 {
497         int txq_id;
498
499         for (txq_id = 0; txq_id < hw_params(priv).max_txq_num; txq_id++)
500                 if (!test_and_set_bit(txq_id, &priv->txq_ctx_active_msk))
501                         return txq_id;
502         return -1;
503 }
504
505 int iwlagn_tx_agg_start(struct iwl_priv *priv, struct ieee80211_vif *vif,
506                         struct ieee80211_sta *sta, u16 tid, u16 *ssn)
507 {
508         int sta_id;
509         int tx_fifo;
510         int txq_id;
511         int ret;
512         unsigned long flags;
513         struct iwl_tid_data *tid_data;
514
515         tx_fifo = get_fifo_from_tid(iwl_rxon_ctx_from_vif(vif), tid);
516         if (unlikely(tx_fifo < 0))
517                 return tx_fifo;
518
519         IWL_DEBUG_HT(priv, "TX AGG request on ra = %pM tid = %d\n",
520                      sta->addr, tid);
521
522         sta_id = iwl_sta_id(sta);
523         if (sta_id == IWL_INVALID_STATION) {
524                 IWL_ERR(priv, "Start AGG on invalid station\n");
525                 return -ENXIO;
526         }
527         if (unlikely(tid >= IWL_MAX_TID_COUNT))
528                 return -EINVAL;
529
530         if (priv->shrd->tid_data[sta_id][tid].agg.state != IWL_AGG_OFF) {
531                 IWL_ERR(priv, "Start AGG when state is not IWL_AGG_OFF !\n");
532                 return -ENXIO;
533         }
534
535         txq_id = iwlagn_txq_ctx_activate_free(priv);
536         if (txq_id == -1) {
537                 IWL_ERR(priv, "No free aggregation queue available\n");
538                 return -ENXIO;
539         }
540
541         spin_lock_irqsave(&priv->shrd->sta_lock, flags);
542         tid_data = &priv->shrd->tid_data[sta_id][tid];
543         *ssn = SEQ_TO_SN(tid_data->seq_number);
544         tid_data->agg.txq_id = txq_id;
545         tid_data->agg.tx_fifo = tx_fifo;
546         iwl_set_swq_id(&priv->txq[txq_id], get_ac_from_tid(tid), txq_id);
547         spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
548
549         ret = iwlagn_txq_agg_enable(priv, txq_id, sta_id, tid);
550         if (ret)
551                 return ret;
552
553         spin_lock_irqsave(&priv->shrd->sta_lock, flags);
554         tid_data = &priv->shrd->tid_data[sta_id][tid];
555         if (tid_data->tfds_in_queue == 0) {
556                 IWL_DEBUG_HT(priv, "HW queue is empty\n");
557                 tid_data->agg.state = IWL_AGG_ON;
558                 ieee80211_start_tx_ba_cb_irqsafe(vif, sta->addr, tid);
559         } else {
560                 IWL_DEBUG_HT(priv, "HW queue is NOT empty: %d packets in HW queue\n",
561                              tid_data->tfds_in_queue);
562                 tid_data->agg.state = IWL_EMPTYING_HW_QUEUE_ADDBA;
563         }
564         spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
565         return ret;
566 }
567
568 int iwlagn_tx_agg_stop(struct iwl_priv *priv, struct ieee80211_vif *vif,
569                        struct ieee80211_sta *sta, u16 tid)
570 {
571         int tx_fifo_id, txq_id, sta_id, ssn;
572         struct iwl_tid_data *tid_data;
573         int write_ptr, read_ptr;
574         unsigned long flags;
575
576         tx_fifo_id = get_fifo_from_tid(iwl_rxon_ctx_from_vif(vif), tid);
577         if (unlikely(tx_fifo_id < 0))
578                 return tx_fifo_id;
579
580         sta_id = iwl_sta_id(sta);
581
582         if (sta_id == IWL_INVALID_STATION) {
583                 IWL_ERR(priv, "Invalid station for AGG tid %d\n", tid);
584                 return -ENXIO;
585         }
586
587         spin_lock_irqsave(&priv->shrd->sta_lock, flags);
588
589         tid_data = &priv->shrd->tid_data[sta_id][tid];
590         ssn = (tid_data->seq_number & IEEE80211_SCTL_SEQ) >> 4;
591         txq_id = tid_data->agg.txq_id;
592
593         switch (priv->shrd->tid_data[sta_id][tid].agg.state) {
594         case IWL_EMPTYING_HW_QUEUE_ADDBA:
595                 /*
596                  * This can happen if the peer stops aggregation
597                  * again before we've had a chance to drain the
598                  * queue we selected previously, i.e. before the
599                  * session was really started completely.
600                  */
601                 IWL_DEBUG_HT(priv, "AGG stop before setup done\n");
602                 goto turn_off;
603         case IWL_AGG_ON:
604                 break;
605         default:
606                 IWL_WARN(priv, "Stopping AGG while state not ON or starting\n");
607         }
608
609         write_ptr = priv->txq[txq_id].q.write_ptr;
610         read_ptr = priv->txq[txq_id].q.read_ptr;
611
612         /* The queue is not empty */
613         if (write_ptr != read_ptr) {
614                 IWL_DEBUG_HT(priv, "Stopping a non empty AGG HW QUEUE\n");
615                 priv->shrd->tid_data[sta_id][tid].agg.state =
616                                 IWL_EMPTYING_HW_QUEUE_DELBA;
617                 spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
618                 return 0;
619         }
620
621         IWL_DEBUG_HT(priv, "HW queue is empty\n");
622  turn_off:
623         priv->shrd->tid_data[sta_id][tid].agg.state = IWL_AGG_OFF;
624
625         /* do not restore/save irqs */
626         spin_unlock(&priv->shrd->sta_lock);
627         spin_lock(&priv->shrd->lock);
628
629         /*
630          * the only reason this call can fail is queue number out of range,
631          * which can happen if uCode is reloaded and all the station
632          * information are lost. if it is outside the range, there is no need
633          * to deactivate the uCode queue, just return "success" to allow
634          *  mac80211 to clean up it own data.
635          */
636         iwl_trans_txq_agg_disable(trans(priv), txq_id, ssn, tx_fifo_id);
637         spin_unlock_irqrestore(&priv->shrd->lock, flags);
638
639         ieee80211_stop_tx_ba_cb_irqsafe(vif, sta->addr, tid);
640
641         return 0;
642 }
643
644 static int iwlagn_txq_check_empty(struct iwl_priv *priv,
645                            int sta_id, u8 tid, int txq_id)
646 {
647         struct iwl_queue *q = &priv->txq[txq_id].q;
648         u8 *addr = priv->stations[sta_id].sta.sta.addr;
649         struct iwl_tid_data *tid_data = &priv->shrd->tid_data[sta_id][tid];
650         struct iwl_rxon_context *ctx;
651
652         ctx = &priv->contexts[priv->stations[sta_id].ctxid];
653
654         lockdep_assert_held(&priv->shrd->sta_lock);
655
656         switch (priv->shrd->tid_data[sta_id][tid].agg.state) {
657         case IWL_EMPTYING_HW_QUEUE_DELBA:
658                 /* We are reclaiming the last packet of the */
659                 /* aggregated HW queue */
660                 if ((txq_id  == tid_data->agg.txq_id) &&
661                     (q->read_ptr == q->write_ptr)) {
662                         u16 ssn = SEQ_TO_SN(tid_data->seq_number);
663                         int tx_fifo = get_fifo_from_tid(ctx, tid);
664                         IWL_DEBUG_HT(priv, "HW queue empty: continue DELBA flow\n");
665                         iwl_trans_txq_agg_disable(trans(priv), txq_id,
666                                 ssn, tx_fifo);
667                         tid_data->agg.state = IWL_AGG_OFF;
668                         ieee80211_stop_tx_ba_cb_irqsafe(ctx->vif, addr, tid);
669                 }
670                 break;
671         case IWL_EMPTYING_HW_QUEUE_ADDBA:
672                 /* We are reclaiming the last packet of the queue */
673                 if (tid_data->tfds_in_queue == 0) {
674                         IWL_DEBUG_HT(priv, "HW queue empty: continue ADDBA flow\n");
675                         tid_data->agg.state = IWL_AGG_ON;
676                         ieee80211_start_tx_ba_cb_irqsafe(ctx->vif, addr, tid);
677                 }
678                 break;
679         }
680
681         return 0;
682 }
683
684 static void iwlagn_non_agg_tx_status(struct iwl_priv *priv,
685                                      struct iwl_rxon_context *ctx,
686                                      const u8 *addr1)
687 {
688         struct ieee80211_sta *sta;
689         struct iwl_station_priv *sta_priv;
690
691         rcu_read_lock();
692         sta = ieee80211_find_sta(ctx->vif, addr1);
693         if (sta) {
694                 sta_priv = (void *)sta->drv_priv;
695                 /* avoid atomic ops if this isn't a client */
696                 if (sta_priv->client &&
697                     atomic_dec_return(&sta_priv->pending_frames) == 0)
698                         ieee80211_sta_block_awake(priv->hw, sta, false);
699         }
700         rcu_read_unlock();
701 }
702
703 /**
704  * translate ucode response to mac80211 tx status control values
705  */
706 static void iwlagn_hwrate_to_tx_control(struct iwl_priv *priv, u32 rate_n_flags,
707                                   struct ieee80211_tx_info *info)
708 {
709         struct ieee80211_tx_rate *r = &info->control.rates[0];
710
711         info->antenna_sel_tx =
712                 ((rate_n_flags & RATE_MCS_ANT_ABC_MSK) >> RATE_MCS_ANT_POS);
713         if (rate_n_flags & RATE_MCS_HT_MSK)
714                 r->flags |= IEEE80211_TX_RC_MCS;
715         if (rate_n_flags & RATE_MCS_GF_MSK)
716                 r->flags |= IEEE80211_TX_RC_GREEN_FIELD;
717         if (rate_n_flags & RATE_MCS_HT40_MSK)
718                 r->flags |= IEEE80211_TX_RC_40_MHZ_WIDTH;
719         if (rate_n_flags & RATE_MCS_DUP_MSK)
720                 r->flags |= IEEE80211_TX_RC_DUP_DATA;
721         if (rate_n_flags & RATE_MCS_SGI_MSK)
722                 r->flags |= IEEE80211_TX_RC_SHORT_GI;
723         r->idx = iwlagn_hwrate_to_mac80211_idx(rate_n_flags, info->band);
724 }
725
726 #ifdef CONFIG_IWLWIFI_DEBUG
727 const char *iwl_get_tx_fail_reason(u32 status)
728 {
729 #define TX_STATUS_FAIL(x) case TX_STATUS_FAIL_ ## x: return #x
730 #define TX_STATUS_POSTPONE(x) case TX_STATUS_POSTPONE_ ## x: return #x
731
732         switch (status & TX_STATUS_MSK) {
733         case TX_STATUS_SUCCESS:
734                 return "SUCCESS";
735         TX_STATUS_POSTPONE(DELAY);
736         TX_STATUS_POSTPONE(FEW_BYTES);
737         TX_STATUS_POSTPONE(BT_PRIO);
738         TX_STATUS_POSTPONE(QUIET_PERIOD);
739         TX_STATUS_POSTPONE(CALC_TTAK);
740         TX_STATUS_FAIL(INTERNAL_CROSSED_RETRY);
741         TX_STATUS_FAIL(SHORT_LIMIT);
742         TX_STATUS_FAIL(LONG_LIMIT);
743         TX_STATUS_FAIL(FIFO_UNDERRUN);
744         TX_STATUS_FAIL(DRAIN_FLOW);
745         TX_STATUS_FAIL(RFKILL_FLUSH);
746         TX_STATUS_FAIL(LIFE_EXPIRE);
747         TX_STATUS_FAIL(DEST_PS);
748         TX_STATUS_FAIL(HOST_ABORTED);
749         TX_STATUS_FAIL(BT_RETRY);
750         TX_STATUS_FAIL(STA_INVALID);
751         TX_STATUS_FAIL(FRAG_DROPPED);
752         TX_STATUS_FAIL(TID_DISABLE);
753         TX_STATUS_FAIL(FIFO_FLUSHED);
754         TX_STATUS_FAIL(INSUFFICIENT_CF_POLL);
755         TX_STATUS_FAIL(PASSIVE_NO_RX);
756         TX_STATUS_FAIL(NO_BEACON_ON_RADAR);
757         }
758
759         return "UNKNOWN";
760
761 #undef TX_STATUS_FAIL
762 #undef TX_STATUS_POSTPONE
763 }
764 #endif /* CONFIG_IWLWIFI_DEBUG */
765
766 static void iwlagn_count_agg_tx_err_status(struct iwl_priv *priv, u16 status)
767 {
768         status &= AGG_TX_STATUS_MSK;
769
770         switch (status) {
771         case AGG_TX_STATE_UNDERRUN_MSK:
772                 priv->reply_agg_tx_stats.underrun++;
773                 break;
774         case AGG_TX_STATE_BT_PRIO_MSK:
775                 priv->reply_agg_tx_stats.bt_prio++;
776                 break;
777         case AGG_TX_STATE_FEW_BYTES_MSK:
778                 priv->reply_agg_tx_stats.few_bytes++;
779                 break;
780         case AGG_TX_STATE_ABORT_MSK:
781                 priv->reply_agg_tx_stats.abort++;
782                 break;
783         case AGG_TX_STATE_LAST_SENT_TTL_MSK:
784                 priv->reply_agg_tx_stats.last_sent_ttl++;
785                 break;
786         case AGG_TX_STATE_LAST_SENT_TRY_CNT_MSK:
787                 priv->reply_agg_tx_stats.last_sent_try++;
788                 break;
789         case AGG_TX_STATE_LAST_SENT_BT_KILL_MSK:
790                 priv->reply_agg_tx_stats.last_sent_bt_kill++;
791                 break;
792         case AGG_TX_STATE_SCD_QUERY_MSK:
793                 priv->reply_agg_tx_stats.scd_query++;
794                 break;
795         case AGG_TX_STATE_TEST_BAD_CRC32_MSK:
796                 priv->reply_agg_tx_stats.bad_crc32++;
797                 break;
798         case AGG_TX_STATE_RESPONSE_MSK:
799                 priv->reply_agg_tx_stats.response++;
800                 break;
801         case AGG_TX_STATE_DUMP_TX_MSK:
802                 priv->reply_agg_tx_stats.dump_tx++;
803                 break;
804         case AGG_TX_STATE_DELAY_TX_MSK:
805                 priv->reply_agg_tx_stats.delay_tx++;
806                 break;
807         default:
808                 priv->reply_agg_tx_stats.unknown++;
809                 break;
810         }
811 }
812
813 static void iwl_rx_reply_tx_agg(struct iwl_priv *priv,
814                                 struct iwlagn_tx_resp *tx_resp)
815 {
816         struct agg_tx_status *frame_status = &tx_resp->status;
817         int tid = (tx_resp->ra_tid & IWLAGN_TX_RES_TID_MSK) >>
818                 IWLAGN_TX_RES_TID_POS;
819         int sta_id = (tx_resp->ra_tid & IWLAGN_TX_RES_RA_MSK) >>
820                 IWLAGN_TX_RES_RA_POS;
821         struct iwl_ht_agg *agg = &priv->shrd->tid_data[sta_id][tid].agg;
822         u32 status = le16_to_cpu(tx_resp->status.status);
823         int i;
824
825         if (agg->wait_for_ba)
826                 IWL_DEBUG_TX_REPLY(priv,
827                         "got tx response w/o block-ack\n");
828
829         agg->rate_n_flags = le32_to_cpu(tx_resp->rate_n_flags);
830         agg->wait_for_ba = (tx_resp->frame_count > 1);
831
832         /*
833          * If the BT kill count is non-zero, we'll get this
834          * notification again.
835          */
836         if (tx_resp->bt_kill_count && tx_resp->frame_count == 1 &&
837             priv->cfg->bt_params &&
838             priv->cfg->bt_params->advanced_bt_coexist) {
839                 IWL_DEBUG_COEX(priv, "receive reply tx w/ bt_kill\n");
840         }
841
842         /* Construct bit-map of pending frames within Tx window */
843         for (i = 0; i < tx_resp->frame_count; i++) {
844                 u16 fstatus = le16_to_cpu(frame_status[i].status);
845
846                 if (status & AGG_TX_STATUS_MSK)
847                         iwlagn_count_agg_tx_err_status(priv, fstatus);
848
849                 if (status & (AGG_TX_STATE_FEW_BYTES_MSK |
850                               AGG_TX_STATE_ABORT_MSK))
851                         continue;
852
853                 IWL_DEBUG_TX_REPLY(priv, "status %s (0x%08x), "
854                                    "try-count (0x%08x)\n",
855                                    iwl_get_agg_tx_fail_reason(fstatus),
856                                    fstatus & AGG_TX_STATUS_MSK,
857                                    fstatus & AGG_TX_TRY_MSK);
858         }
859 }
860
861 #ifdef CONFIG_IWLWIFI_DEBUG
862 #define AGG_TX_STATE_FAIL(x) case AGG_TX_STATE_ ## x: return #x
863
864 const char *iwl_get_agg_tx_fail_reason(u16 status)
865 {
866         status &= AGG_TX_STATUS_MSK;
867         switch (status) {
868         case AGG_TX_STATE_TRANSMITTED:
869                 return "SUCCESS";
870                 AGG_TX_STATE_FAIL(UNDERRUN_MSK);
871                 AGG_TX_STATE_FAIL(BT_PRIO_MSK);
872                 AGG_TX_STATE_FAIL(FEW_BYTES_MSK);
873                 AGG_TX_STATE_FAIL(ABORT_MSK);
874                 AGG_TX_STATE_FAIL(LAST_SENT_TTL_MSK);
875                 AGG_TX_STATE_FAIL(LAST_SENT_TRY_CNT_MSK);
876                 AGG_TX_STATE_FAIL(LAST_SENT_BT_KILL_MSK);
877                 AGG_TX_STATE_FAIL(SCD_QUERY_MSK);
878                 AGG_TX_STATE_FAIL(TEST_BAD_CRC32_MSK);
879                 AGG_TX_STATE_FAIL(RESPONSE_MSK);
880                 AGG_TX_STATE_FAIL(DUMP_TX_MSK);
881                 AGG_TX_STATE_FAIL(DELAY_TX_MSK);
882         }
883
884         return "UNKNOWN";
885 }
886 #endif /* CONFIG_IWLWIFI_DEBUG */
887
888 static inline u32 iwlagn_get_scd_ssn(struct iwlagn_tx_resp *tx_resp)
889 {
890         return le32_to_cpup((__le32 *)&tx_resp->status +
891                             tx_resp->frame_count) & MAX_SN;
892 }
893
894 static void iwl_free_tfds_in_queue(struct iwl_priv *priv,
895                             int sta_id, int tid, int freed)
896 {
897         lockdep_assert_held(&priv->shrd->sta_lock);
898
899         if (priv->shrd->tid_data[sta_id][tid].tfds_in_queue >= freed)
900                 priv->shrd->tid_data[sta_id][tid].tfds_in_queue -= freed;
901         else {
902                 IWL_DEBUG_TX(priv, "free more than tfds_in_queue (%u:%d)\n",
903                         priv->shrd->tid_data[sta_id][tid].tfds_in_queue,
904                         freed);
905                 priv->shrd->tid_data[sta_id][tid].tfds_in_queue = 0;
906         }
907 }
908
909 static void iwlagn_count_tx_err_status(struct iwl_priv *priv, u16 status)
910 {
911         status &= TX_STATUS_MSK;
912
913         switch (status) {
914         case TX_STATUS_POSTPONE_DELAY:
915                 priv->reply_tx_stats.pp_delay++;
916                 break;
917         case TX_STATUS_POSTPONE_FEW_BYTES:
918                 priv->reply_tx_stats.pp_few_bytes++;
919                 break;
920         case TX_STATUS_POSTPONE_BT_PRIO:
921                 priv->reply_tx_stats.pp_bt_prio++;
922                 break;
923         case TX_STATUS_POSTPONE_QUIET_PERIOD:
924                 priv->reply_tx_stats.pp_quiet_period++;
925                 break;
926         case TX_STATUS_POSTPONE_CALC_TTAK:
927                 priv->reply_tx_stats.pp_calc_ttak++;
928                 break;
929         case TX_STATUS_FAIL_INTERNAL_CROSSED_RETRY:
930                 priv->reply_tx_stats.int_crossed_retry++;
931                 break;
932         case TX_STATUS_FAIL_SHORT_LIMIT:
933                 priv->reply_tx_stats.short_limit++;
934                 break;
935         case TX_STATUS_FAIL_LONG_LIMIT:
936                 priv->reply_tx_stats.long_limit++;
937                 break;
938         case TX_STATUS_FAIL_FIFO_UNDERRUN:
939                 priv->reply_tx_stats.fifo_underrun++;
940                 break;
941         case TX_STATUS_FAIL_DRAIN_FLOW:
942                 priv->reply_tx_stats.drain_flow++;
943                 break;
944         case TX_STATUS_FAIL_RFKILL_FLUSH:
945                 priv->reply_tx_stats.rfkill_flush++;
946                 break;
947         case TX_STATUS_FAIL_LIFE_EXPIRE:
948                 priv->reply_tx_stats.life_expire++;
949                 break;
950         case TX_STATUS_FAIL_DEST_PS:
951                 priv->reply_tx_stats.dest_ps++;
952                 break;
953         case TX_STATUS_FAIL_HOST_ABORTED:
954                 priv->reply_tx_stats.host_abort++;
955                 break;
956         case TX_STATUS_FAIL_BT_RETRY:
957                 priv->reply_tx_stats.bt_retry++;
958                 break;
959         case TX_STATUS_FAIL_STA_INVALID:
960                 priv->reply_tx_stats.sta_invalid++;
961                 break;
962         case TX_STATUS_FAIL_FRAG_DROPPED:
963                 priv->reply_tx_stats.frag_drop++;
964                 break;
965         case TX_STATUS_FAIL_TID_DISABLE:
966                 priv->reply_tx_stats.tid_disable++;
967                 break;
968         case TX_STATUS_FAIL_FIFO_FLUSHED:
969                 priv->reply_tx_stats.fifo_flush++;
970                 break;
971         case TX_STATUS_FAIL_INSUFFICIENT_CF_POLL:
972                 priv->reply_tx_stats.insuff_cf_poll++;
973                 break;
974         case TX_STATUS_FAIL_PASSIVE_NO_RX:
975                 priv->reply_tx_stats.fail_hw_drop++;
976                 break;
977         case TX_STATUS_FAIL_NO_BEACON_ON_RADAR:
978                 priv->reply_tx_stats.sta_color_mismatch++;
979                 break;
980         default:
981                 priv->reply_tx_stats.unknown++;
982                 break;
983         }
984 }
985
986 static void iwlagn_set_tx_status(struct iwl_priv *priv,
987                                  struct ieee80211_tx_info *info,
988                                  struct iwlagn_tx_resp *tx_resp,
989                                  bool is_agg)
990 {
991         u16  status = le16_to_cpu(tx_resp->status.status);
992
993         info->status.rates[0].count = tx_resp->failure_frame + 1;
994         if (is_agg)
995                 info->flags &= ~IEEE80211_TX_CTL_AMPDU;
996         info->flags |= iwl_tx_status_to_mac80211(status);
997         iwlagn_hwrate_to_tx_control(priv, le32_to_cpu(tx_resp->rate_n_flags),
998                                     info);
999         if (!iwl_is_tx_success(status))
1000                 iwlagn_count_tx_err_status(priv, status);
1001 }
1002
1003 static void iwl_check_abort_status(struct iwl_priv *priv,
1004                             u8 frame_count, u32 status)
1005 {
1006         if (frame_count == 1 && status == TX_STATUS_FAIL_RFKILL_FLUSH) {
1007                 IWL_ERR(priv, "Tx flush command to flush out all frames\n");
1008                 if (!test_bit(STATUS_EXIT_PENDING, &priv->shrd->status))
1009                         queue_work(priv->shrd->workqueue, &priv->tx_flush);
1010         }
1011 }
1012
1013 void iwlagn_rx_reply_tx(struct iwl_priv *priv, struct iwl_rx_mem_buffer *rxb)
1014 {
1015         struct iwl_rx_packet *pkt = rxb_addr(rxb);
1016         u16 sequence = le16_to_cpu(pkt->hdr.sequence);
1017         int txq_id = SEQ_TO_QUEUE(sequence);
1018         int cmd_index = SEQ_TO_INDEX(sequence);
1019         struct iwl_tx_queue *txq = &priv->txq[txq_id];
1020         struct iwlagn_tx_resp *tx_resp = (void *)&pkt->u.raw[0];
1021         struct ieee80211_hdr *hdr;
1022         u32 status = le16_to_cpu(tx_resp->status.status);
1023         u32 ssn = iwlagn_get_scd_ssn(tx_resp);
1024         int tid;
1025         int sta_id;
1026         int freed;
1027         struct ieee80211_tx_info *info;
1028         unsigned long flags;
1029         struct sk_buff_head skbs;
1030         struct sk_buff *skb;
1031         struct iwl_rxon_context *ctx;
1032
1033         if ((cmd_index >= txq->q.n_bd) ||
1034             (iwl_queue_used(&txq->q, cmd_index) == 0)) {
1035                 IWL_ERR(priv, "%s: Read index for DMA queue txq_id (%d) "
1036                           "cmd_index %d is out of range [0-%d] %d %d\n",
1037                           __func__, txq_id, cmd_index, txq->q.n_bd,
1038                           txq->q.write_ptr, txq->q.read_ptr);
1039                 return;
1040         }
1041
1042         txq->time_stamp = jiffies;
1043
1044         tid = (tx_resp->ra_tid & IWLAGN_TX_RES_TID_MSK) >>
1045                 IWLAGN_TX_RES_TID_POS;
1046         sta_id = (tx_resp->ra_tid & IWLAGN_TX_RES_RA_MSK) >>
1047                 IWLAGN_TX_RES_RA_POS;
1048
1049         spin_lock_irqsave(&priv->shrd->sta_lock, flags);
1050
1051         if (txq->sched_retry)
1052                 iwl_rx_reply_tx_agg(priv, tx_resp);
1053
1054         if (tx_resp->frame_count == 1) {
1055                 bool is_agg = (txq_id >= IWLAGN_FIRST_AMPDU_QUEUE);
1056
1057                 __skb_queue_head_init(&skbs);
1058                 /*we can free until ssn % q.n_bd not inclusive */
1059                 iwl_trans_reclaim(trans(priv), txq_id, ssn, status, &skbs);
1060                 freed = 0;
1061                 while (!skb_queue_empty(&skbs)) {
1062                         skb = __skb_dequeue(&skbs);
1063                         hdr = (struct ieee80211_hdr *)skb->data;
1064
1065                         if (!ieee80211_is_data_qos(hdr->frame_control))
1066                                 priv->last_seq_ctl = tx_resp->seq_ctl;
1067
1068                         info = IEEE80211_SKB_CB(skb);
1069                         ctx = info->driver_data[0];
1070
1071                         memset(&info->status, 0, sizeof(info->status));
1072
1073                         if (status == TX_STATUS_FAIL_PASSIVE_NO_RX &&
1074                             iwl_is_associated_ctx(ctx) && ctx->vif &&
1075                             ctx->vif->type == NL80211_IFTYPE_STATION) {
1076                                 ctx->last_tx_rejected = true;
1077                                 iwl_stop_queue(priv, &priv->txq[txq_id]);
1078
1079                                 IWL_DEBUG_TX_REPLY(priv,
1080                                            "TXQ %d status %s (0x%08x) "
1081                                            "rate_n_flags 0x%x retries %d\n",
1082                                            txq_id,
1083                                            iwl_get_tx_fail_reason(status),
1084                                            status,
1085                                            le32_to_cpu(tx_resp->rate_n_flags),
1086                                            tx_resp->failure_frame);
1087
1088                                 IWL_DEBUG_TX_REPLY(priv,
1089                                            "FrameCnt = %d, idx=%d\n",
1090                                            tx_resp->frame_count, cmd_index);
1091                         }
1092
1093                         /* check if BAR is needed */
1094                         if (is_agg && !iwl_is_tx_success(status))
1095                                 info->flags |= IEEE80211_TX_STAT_AMPDU_NO_BACK;
1096                         iwlagn_set_tx_status(priv, IEEE80211_SKB_CB(skb),
1097                                      tx_resp, is_agg);
1098                         if (!is_agg)
1099                                 iwlagn_non_agg_tx_status(priv, ctx, hdr->addr1);
1100
1101                         ieee80211_tx_status_irqsafe(priv->hw, skb);
1102
1103                         freed++;
1104                 }
1105
1106                 WARN_ON(!is_agg && freed != 1);
1107
1108                 iwl_free_tfds_in_queue(priv, sta_id, tid, freed);
1109                 iwlagn_txq_check_empty(priv, sta_id, tid, txq_id);
1110         }
1111
1112         iwl_check_abort_status(priv, tx_resp->frame_count, status);
1113         spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
1114 }
1115
1116 /**
1117  * iwlagn_rx_reply_compressed_ba - Handler for REPLY_COMPRESSED_BA
1118  *
1119  * Handles block-acknowledge notification from device, which reports success
1120  * of frames sent via aggregation.
1121  */
1122 void iwlagn_rx_reply_compressed_ba(struct iwl_priv *priv,
1123                                            struct iwl_rx_mem_buffer *rxb)
1124 {
1125         struct iwl_rx_packet *pkt = rxb_addr(rxb);
1126         struct iwl_compressed_ba_resp *ba_resp = &pkt->u.compressed_ba;
1127         struct iwl_tx_queue *txq = NULL;
1128         struct iwl_ht_agg *agg;
1129         struct sk_buff_head reclaimed_skbs;
1130         struct ieee80211_tx_info *info;
1131         struct ieee80211_hdr *hdr;
1132         struct sk_buff *skb;
1133         unsigned long flags;
1134         int index;
1135         int sta_id;
1136         int tid;
1137         int freed;
1138
1139         /* "flow" corresponds to Tx queue */
1140         u16 scd_flow = le16_to_cpu(ba_resp->scd_flow);
1141
1142         /* "ssn" is start of block-ack Tx window, corresponds to index
1143          * (in Tx queue's circular buffer) of first TFD/frame in window */
1144         u16 ba_resp_scd_ssn = le16_to_cpu(ba_resp->scd_ssn);
1145
1146         if (scd_flow >= hw_params(priv).max_txq_num) {
1147                 IWL_ERR(priv,
1148                         "BUG_ON scd_flow is bigger than number of queues\n");
1149                 return;
1150         }
1151
1152         txq = &priv->txq[scd_flow];
1153         sta_id = ba_resp->sta_id;
1154         tid = ba_resp->tid;
1155         agg = &priv->shrd->tid_data[sta_id][tid].agg;
1156
1157         /* Find index of block-ack window */
1158         index = ba_resp_scd_ssn & (txq->q.n_bd - 1);
1159
1160         spin_lock_irqsave(&priv->shrd->sta_lock, flags);
1161
1162         if (unlikely(agg->txq_id != scd_flow)) {
1163                 /*
1164                  * FIXME: this is a uCode bug which need to be addressed,
1165                  * log the information and return for now!
1166                  * since it is possible happen very often and in order
1167                  * not to fill the syslog, don't enable the logging by default
1168                  */
1169                 IWL_DEBUG_TX_REPLY(priv,
1170                         "BA scd_flow %d does not match txq_id %d\n",
1171                         scd_flow, agg->txq_id);
1172                 spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
1173                 return;
1174         }
1175
1176         if (unlikely(!agg->wait_for_ba)) {
1177                 if (unlikely(ba_resp->bitmap))
1178                         IWL_ERR(priv, "Received BA when not expected\n");
1179                 spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
1180                 return;
1181         }
1182
1183         IWL_DEBUG_TX_REPLY(priv, "REPLY_COMPRESSED_BA [%d] Received from %pM, "
1184                            "sta_id = %d\n",
1185                            agg->wait_for_ba,
1186                            (u8 *) &ba_resp->sta_addr_lo32,
1187                            ba_resp->sta_id);
1188         IWL_DEBUG_TX_REPLY(priv, "TID = %d, SeqCtl = %d, bitmap = 0x%llx, "
1189                            "scd_flow = %d, scd_ssn = %d\n",
1190                            ba_resp->tid,
1191                            ba_resp->seq_ctl,
1192                            (unsigned long long)le64_to_cpu(ba_resp->bitmap),
1193                            ba_resp->scd_flow,
1194                            ba_resp->scd_ssn);
1195
1196         /* Mark that the expected block-ack response arrived */
1197         agg->wait_for_ba = 0;
1198
1199         /* Sanity check values reported by uCode */
1200         if (ba_resp->txed_2_done > ba_resp->txed) {
1201                 IWL_DEBUG_TX_REPLY(priv,
1202                         "bogus sent(%d) and ack(%d) count\n",
1203                         ba_resp->txed, ba_resp->txed_2_done);
1204                 /*
1205                  * set txed_2_done = txed,
1206                  * so it won't impact rate scale
1207                  */
1208                 ba_resp->txed = ba_resp->txed_2_done;
1209         }
1210         IWL_DEBUG_HT(priv, "agg frames sent:%d, acked:%d\n",
1211                         ba_resp->txed, ba_resp->txed_2_done);
1212
1213         __skb_queue_head_init(&reclaimed_skbs);
1214
1215         /* Release all TFDs before the SSN, i.e. all TFDs in front of
1216          * block-ack window (we assume that they've been successfully
1217          * transmitted ... if not, it's too late anyway). */
1218         iwl_trans_reclaim(trans(priv), scd_flow, ba_resp_scd_ssn, 0,
1219                           &reclaimed_skbs);
1220         freed = 0;
1221         while (!skb_queue_empty(&reclaimed_skbs)) {
1222
1223                 skb = __skb_dequeue(&reclaimed_skbs);
1224                 hdr = (struct ieee80211_hdr *)skb->data;
1225
1226                 if (ieee80211_is_data_qos(hdr->frame_control))
1227                         freed++;
1228                 else
1229                         WARN_ON_ONCE(1);
1230
1231                 if (freed == 0) {
1232                         /* this is the first skb we deliver in this batch */
1233                         /* put the rate scaling data there */
1234                         info = IEEE80211_SKB_CB(skb);
1235                         memset(&info->status, 0, sizeof(info->status));
1236                         info->flags |= IEEE80211_TX_STAT_ACK;
1237                         info->flags |= IEEE80211_TX_STAT_AMPDU;
1238                         info->status.ampdu_ack_len = ba_resp->txed_2_done;
1239                         info->status.ampdu_len = ba_resp->txed;
1240                         iwlagn_hwrate_to_tx_control(priv, agg->rate_n_flags,
1241                                                     info);
1242                 }
1243
1244                 ieee80211_tx_status_irqsafe(priv->hw, skb);
1245         }
1246
1247         iwl_free_tfds_in_queue(priv, sta_id, tid, freed);
1248         iwlagn_txq_check_empty(priv, sta_id, tid, scd_flow);
1249
1250         spin_unlock_irqrestore(&priv->shrd->sta_lock, flags);
1251 }