net/failsafe: change back-reference from sub-device
authorRaslan Darawsheh <rasland@mellanox.com>
Mon, 18 Mar 2019 16:05:26 +0000 (16:05 +0000)
committerFerruh Yigit <ferruh.yigit@intel.com>
Fri, 29 Mar 2019 16:25:32 +0000 (17:25 +0100)
In multiprocess context, the sub-device structure is shared
between processes. The reference to the failsafe device was
a per process pointer. It's changed to port id which is the
same for all processes.

Signed-off-by: Raslan Darawsheh <rasland@mellanox.com>
Signed-off-by: Thomas Monjalon <thomas@monjalon.net>
Acked-by: Gaetan Rivet <gaetan.rivet@6wind.com>
drivers/net/failsafe/failsafe_eal.c
drivers/net/failsafe/failsafe_ether.c
drivers/net/failsafe/failsafe_intr.c
drivers/net/failsafe/failsafe_private.h

index 8a888b1..56d1669 100644 (file)
@@ -114,7 +114,7 @@ fs_bus_init(struct rte_eth_dev *dev)
                }
                ETH(sdev) = &rte_eth_devices[pid];
                SUB_ID(sdev) = i;
-               sdev->fs_dev = dev;
+               sdev->fs_port_id = dev->data->port_id;
                sdev->dev = ETH(sdev)->device;
                sdev->state = DEV_PROBED;
        }
index 1783165..7fa209a 100644 (file)
@@ -298,7 +298,7 @@ fs_dev_remove(struct sub_device *sdev)
                break;
        }
        sdev->remove = 0;
-       failsafe_hotplug_alarm_install(sdev->fs_dev);
+       failsafe_hotplug_alarm_install(fs_dev(sdev));
 }
 
 static void
@@ -318,8 +318,9 @@ fs_dev_stats_save(struct sub_device *sdev)
                        WARN("Using latest snapshot taken before %"PRIu64" seconds.\n",
                                 (rte_rdtsc() - timestamp) / rte_get_tsc_hz());
        }
-       failsafe_stats_increment(&PRIV(sdev->fs_dev)->stats_accumulator,
-                       err ? &sdev->stats_snapshot.stats : &stats);
+       failsafe_stats_increment
+               (&PRIV(fs_dev(sdev))->stats_accumulator,
+               err ? &sdev->stats_snapshot.stats : &stats);
        memset(&sdev->stats_snapshot, 0, sizeof(sdev->stats_snapshot));
 }
 
@@ -566,17 +567,17 @@ failsafe_eth_rmv_event_callback(uint16_t port_id __rte_unused,
 {
        struct sub_device *sdev = cb_arg;
 
-       fs_lock(sdev->fs_dev, 0);
+       fs_lock(fs_dev(sdev), 0);
        /* Switch as soon as possible tx_dev. */
-       fs_switch_dev(sdev->fs_dev, sdev);
+       fs_switch_dev(fs_dev(sdev), sdev);
        /* Use safe bursts in any case. */
-       failsafe_set_burst_fn(sdev->fs_dev, 1);
+       failsafe_set_burst_fn(fs_dev(sdev), 1);
        /*
         * Async removal, the sub-PMD will try to unregister
         * the callback at the source of the current thread context.
         */
        sdev->remove = 1;
-       fs_unlock(sdev->fs_dev, 0);
+       fs_unlock(fs_dev(sdev), 0);
        return 0;
 }
 
index 09aa3c6..0f34c5b 100644 (file)
@@ -274,14 +274,14 @@ failsafe_eth_rx_intr_ctl_subdevice(struct sub_device *sdev, int op)
        int rc;
        int ret = 0;
 
+       fsdev = fs_dev(sdev);
        if (sdev == NULL || (ETH(sdev) == NULL) ||
-           sdev->fs_dev == NULL || (PRIV(sdev->fs_dev) == NULL)) {
+               fsdev == NULL || (PRIV(fsdev) == NULL)) {
                ERROR("Called with invalid arguments");
                return -EINVAL;
        }
        dev = ETH(sdev);
-       fsdev = sdev->fs_dev;
-       epfd = PRIV(sdev->fs_dev)->rxp.efd;
+       epfd = PRIV(fsdev)->rxp.efd;
        pid = PORT_ID(sdev);
 
        if (epfd <= 0) {
@@ -330,7 +330,7 @@ int failsafe_rx_intr_install_subdevice(struct sub_device *sdev)
        const struct rte_intr_conf *const intr_conf =
                                &ETH(sdev)->data->dev_conf.intr_conf;
 
-       fsdev = sdev->fs_dev;
+       fsdev = fs_dev(sdev);
        rxq = (struct rxq **)fsdev->data->rx_queues;
        if (intr_conf->rxq == 0)
                return 0;
@@ -368,7 +368,7 @@ void failsafe_rx_intr_uninstall_subdevice(struct sub_device *sdev)
        struct rte_eth_dev *fsdev;
        struct rxq *fsrxq;
 
-       fsdev = sdev->fs_dev;
+       fsdev = fs_dev(sdev);
        for (qid = 0; qid < ETH(sdev)->data->nb_rx_queues; qid++) {
                if (qid < fsdev->data->nb_rx_queues) {
                        fsrxq = fsdev->data->rx_queues[qid];
index 6e3f203..785a302 100644 (file)
@@ -117,7 +117,7 @@ struct sub_device {
        /* Others are retrieved through a file descriptor */
        char *fd_str;
        /* fail-safe device backreference */
-       struct rte_eth_dev *fs_dev;
+       uint16_t fs_port_id; /* shared between processes */
        /* flag calling for recollection */
        volatile unsigned int remove:1;
        /* flow isolation state */
@@ -324,16 +324,16 @@ extern int failsafe_mac_from_arg;
  */
 #define FS_ATOMIC_RX(s, i) \
        rte_atomic64_read( \
-        &((struct rxq *)((s)->fs_dev->data->rx_queues[i]))->refcnt[(s)->sid] \
-       )
+        &((struct rxq *) \
+        (fs_dev(s)->data->rx_queues[i]))->refcnt[(s)->sid])
 /**
  * s: (struct sub_device *)
  * i: uint16_t qid
  */
 #define FS_ATOMIC_TX(s, i) \
        rte_atomic64_read( \
-        &((struct txq *)((s)->fs_dev->data->tx_queues[i]))->refcnt[(s)->sid] \
-       )
+        &((struct txq *) \
+        (fs_dev(s)->data->tx_queues[i]))->refcnt[(s)->sid])
 
 #ifdef RTE_EXEC_ENV_FREEBSD
 #define FS_THREADID_TYPE void*
@@ -379,6 +379,11 @@ fs_find_next(struct rte_eth_dev *dev,
        return &subs[sid];
 }
 
+static inline struct rte_eth_dev *
+fs_dev(struct sub_device *sdev) {
+       return &rte_eth_devices[sdev->fs_port_id];
+}
+
 /*
  * Lock hot-plug mutex.
  * is_alarm means that the caller is, for sure, the hot-plug alarm mechanism.