Crowdsourcing versus MNT

La necesidad de una evaluación objetiva de la calidad y el rendimiento de redes celulares conduce a dos enfoques fundamentalmente diferentes, crowdsourcing y pruebas de redes celulares (MNT). El mercado de crowdsourcing está demasiado saturado. Más de 20 compañías se centran en la medición de redes celulares usando el método de crowdsourcing. Para obtener resultados de medición se utilizan diferentes conceptos que sirven para diferentes propósitos. Esta ficha de aplicación describe la estructura del espacio de crowdsourcing y analiza las ventajas y desventajas de ambos enfoques.

Crowdsourcing versus MNT
Crowdsourcing versus MNT
/

Su misión

Los operadores y reguladores de redes de comunicaciones móviles están cada vez más interesados en conocer a fondo la calidad de las redes y la competencia en mercados específicos. Este interés se ve motivado por tres requerimientos claves:

  • Benchmarking:proporciona una visión del rendimiento relativo de diferentes redes celulares
  • Optimización de las operaciones:mejora la eficiencia operacional para el operador de redes (incluye servicio al cliente, aseguramiento del servicio e ingeniería de redes)
  • Marketing/gestión de la experiencia del cliente (CEM):evalúa la experiencia de usuario final de la calidad de la red

Crowdsourcing y MNT son dos enfoques fundamentalmente diferentes para abordar estos requerimientos. Los operadores y reguladores de redes de comunicaciones móviles necesitan evaluar estos dos enfoques y mapearlos según sus necesidades. Esta ficha de aplicación investiga las ventajas y las desventajas de ambos conceptos.

Soluciones de crowdsourcing

Las soluciones de crowdsourcing pueden agruparse en tres categorías:

  • Sindicación:permite a aplicaciones no relacionadas integrar un kit de desarrollo de software (SDK) de medición para obtener una compensación monetaria (similar a la colocación de anuncios en una aplicación). A menudo los usuarios finales no saben que los datos se recopilan en un segundo plano y se envían al almacenamiento de la nube para su posterior análisis, lo cual puede ser un área de ambigüedad jurídica.
  • Aplicación del operador:integra un SDK de medición en una aplicación de marca del operador
  • Aplicación propia:coloca una aplicación de marca en las tiendas de aplicaciones dirigida especialmente a los usuarios que se interesan en el rendimiento de la red

Segmentación del mercado de crowdsourcing basada en el posicionamiento de la compañía

Segmentación del mercado de crowdsourcing basada en el posicionamiento de la compañía
Segmentación del mercado de crowdsourcing basada en el posicionamiento de la compañía

Figura 1: segmentación de las soluciones de crowdsourcing por requerimiento y categoría de aplicación (ejemplos, no exhaustivos).

/
Figura 1: segmentación de las soluciones de crowdsourcing por requerimiento y categoría de aplicación (ejemplos, no exhaustivos).

Análisis de crowdsourcing

Ventajas Desventajas
  • Los datos de crowdsourcing se recopilan de manera continua y autónoma sin una campaña de medición especial.
  • La enorme cantidad de datos proporciona un análisis de resolución muy alto. Obtiene datos de donde quiera que la gente se encuentre. Pero esto no asegura una cobertura geográfica completa.
  • Las estadísticas de calidad y cobertura de redes celulares están disponibles para todo el país o región.
  • La identificación de estaciones base, ubicaciones y operadores con alto tráfico de datos puede proporcionar información para la planificación de estaciones base o ampliaciones de capacidad.
  • Proporciona una comprensión de cómo se utiliza el espectro disponible en diferentes áreas geográficas.
  • Puede filtrarse una gran cantidad de datos y utilizarlos para un análisis en profundidad de acuerdo a diversos criterios (operadores, ubicación, tiempo, etc.).
  • Las condiciones de recopilación de datos de crowdsourcing son impredecibles y en su mayoría desconocidas:
    • Temperatura: el smartphone en el bolsillo del usuario se calienta a la temperatura corporal debido a las aplicaciones que se ejecutan en paralelo
    • Ubicación: el smartphone en el sótano o en el 1.º, 10.º o 20.º piso de un edificio
    • Dependencia del dispositivo: teléfonos antiguos con funciones de equipo de usuario limitadas en uso por largos periodos de tiempo. La medición del rendimiento de la red puede verse afectada por funciones de equipos de usuario limitadas
    • Plan de datos del cliente: el volumen de datos puede agotarse y el rendimiento reducirse por la red
  • Las mediciones no son reproducibles (el análisis de crowdsourcing puede repetirse o realizarse en un registro de datos más actual, pero no puede reproducirse). Si existen controversias en el evento reportado, este no puede reproducirse para su validación.
  • Los datos de crowdsourcing no pueden utilizarse para la optimización de la red. Información limitada o nula acerca de las causas básicas.
  • Las soluciones de crowdsourcing siguen más que nada un enfoque patentado con un método de valoración no revelado de los resultados. La valoración o los resultados de diferentes soluciones no pueden compararse entre sí.
  • Las soluciones de crowdsourcing normalmente limitan sus pruebas activas a los siguientes indicadores claves de desempeño (KPI) de calidad: rendimiento de enlace ascendente/descendente, latencia promedio, jitter promedio y pérdida de paquete.
  • Los sistemas operativos de los smartphones están cada vez más restrictivos y limitan los parámetros disponibles que las aplicaciones de crowdsourcing (ejecución en segundo plano) pueden utilizar.
  • Las aplicaciones dedicadas de crowdsourcing por lo general muestran una parcialidad negativa (los subscriptores con conocimientos técnicos en particular activan estas pruebas en cuando experimentan un problema de red).

Soluciones de pruebas de redes celulares (MNT)

Los «drive y walk tests» son conceptos especiales de pruebas de redes celulares. Se utilizan smartphones (equipos de usuario comerciales) y escáneres de red especiales en un sistema de medición controlado (temperatura y apantallamiento de RF en la medida de lo posible) y se realiza una serie de casos de prueba que reflejen el comportamiento del usuario final. Los servicios de voz (telefonía) y de datos (transferencia de datos, streaming de video, redes sociales y búsquedas en la web) son los servicios más utilizados y representan la mayor parte del volumen de tráfico en las redes celulares.

ETSI TR 103 559 describe las mejores prácticas para realizar pruebas y obtener valoraciones concluyentes del benchmarking de la calidad de servicio (QoS) de la red. El informe técnico proporciona una recomendación de cómo probar la calidad de las redes celulares basándose en la percepción del usuario final.

La valoración del rendimiento de redes de Rohde & Schwarz implementa el método del Instituto Europeo de Normas de Telecomunciaciones (ETSI).

Las aplicaciones se prueban según las tres categorías siguientes:

  • Accesibilidad:disponibilidad de servicio, por ejemplo, corte de llamadas
  • Tiempo de espera:tiempo de establecimiento de llamada
  • Calidad del contenido audiovisual:calidad de imagen o de voz

Los resultados se mapean a una escala de puntos y se genera una valoración agregada que refleja la calidad percibida por el usuario final (un video de streaming que no puede iniciarse es más grave que una calidad de video ligeramente reducida y obtiene una mayor ponderación).

Para más detalles y explicaciones visite:
www.rohde-schwarz.com/nps

Campaña de pruebas en carreteras

Campaña de pruebas en carreteras
Campaña de pruebas en carreteras

Figura 2: la valoración del rendimiento de redes (NPS) de Rohde & Schwarz abarca toda la gama de aplicaciones de usuario final.

/
Figura 2: la valoración del rendimiento de redes (NPS) de Rohde & Schwarz abarca toda la gama de aplicaciones de usuario final.

Análisis de pruebas de redes celulares (MNT)

Ventajas Desventajas
  • Los datos se recopilan bajo condiciones definidas y en una configuración de medición controlada (temperatura, apantallamiento de RF). Siempre se sabe bajo qué condiciones los datos se recopilan (interiores, exteriores, posición del dispositivo de medición, temperatura, etc.).
  • Las campañas de medición se planifican con los últimos smartphones y las funciones del equipo de usuario para asegurar que las mediciones de rendimiento no se vean afectadas por las deficiencias del equipo de usuario. Todas las aplicaciones que los subscriptores tienen en ejecución en segundo plano contribuyen a la evaluación general de la calidad de la red.
  • La utilización de métodos de prueba definidos y armonizados hace que las pruebas de redes celulares puedan compararse y reproducirse.
  • Las campañas de medición están claramente definidas (rutas, equipos, tiempos, configuraciones de medición, etc.) y fácilmente pueden repetirse después de 3, 6 o 12 meses para medir la mejora del rendimiento en función del tiempo.
  • El alcance de las pruebas es mucho más amplio que el de crowdsourcing. Las soluciones profesionales de pruebas de redes celulares también pueden calcular métricas avanzadas, como nota media de opinión (MOS) para contenido de voz y video.
  • La valoración del rendimiento de redes mediante el método del Instituto Europeo de Normas de Telecomunciaciones proporciona información para la optimización de la red gracias al enfoque estandarizado de medición y valoración. Todos los detalles están disponibles para análisis posteriores. Cuando se reportan problemas, el contexto está disponible (condiciones de RF, mensajes L3 detallados de la red y aplicaciones) para propósitos de depuración de problemas.
  • Su compatibilidad debido al método de prueba armonizado significa que las pruebas de redes celulares pueden utilizarse para comparar Open RAN (O-RAN) con una arquitectura RAN de un único fabricante.
  • Se han establecido acuerdos con fabricantes de dispositivos celulares y chipsets para superar las limitaciones de los sistemas operativos restrictivos.
  • Hay que planificar y ejecutar campañas de medición especiales que requieren de esfuerzo. Estas pruebas toman mucho tiempo y son costosas si se las compara con crowdsourcing (aunque los reportes de crowdsourcing tampoco están disponibles de manera gratuita).
  • Los resultados del rendimiento de la red solo están disponibles para áreas donde los datos se han recopilado. No puede crearse de manera eficiente un mapa de cobertura para todo un país basándose solamente en pruebas de redes celulares.

Recomendaciones

El análisis y la comparación de las ventajas y desventajas de ambos enfoques muestra que crowdsourcing y MNT son más complementarias que competitivas y que uno nunca puede reemplazar al otro.

Según sea el objetivo o el requerimiento, un enfoque tiene ventajas sobre el otro. Aquí tenemos algunos ejemplos:

  • Benchmarking de la calidad de redes/clasificación de redes de operadores en un país:para una visión general aproximada, los datos de crowdsourcing pueden ser suficientes. Pero si el objetivo es realizar una comparación justa y sacar conclusiones sólidas, se recomienda encarecidamente un método de prueba comparable como ETSI TR 103 559 para pruebas de redes celulares.
  • Mapa de cobertura de un todo un país:si el objetivo es el mapa de cobertura de todo un país, el método de crowdsourcing es la mejor solución. Los datos básicos de RF como la potencia de recepción (RSRP) son suficientes en la mayoría de los casos, aunque en la Conferencia Europea de Administraciones de Correos y Telecomunicaciones (CEPT) está discutiéndose la redefinición del término «cobertura», en particular debido a la formación de haces 5G. Las pruebas de redes celulares no pueden cubrir todo un país con todas y cada una de las calles de cada ciudad, pueblo o aldea a un costo razonable.
  • Optimización de redes: si la optimización de redes se basa en datos, los datos recopilados deben ser confiables, es decir, recopilados bajo condiciones definidas y deben también poderse reproducir. Los datos también necesitan estar disponibles con contexto (condiciones de RF, mensajes L3 detallados de la red y aplicaciones) para así poder comparar los problemas identificados con los eventos RAN y poder identificar las causas básicas de estos problemas. Solo las pruebas de redes celulares cumplen con estos requerimientos, mientras que los datos de crowdsourcing no proporcionan este contexto.
  • Análisis de uso de la red:para identificar ubicaciones o áreas geográficas con alto uso de datos y espectro, crowdsourcing es una solución viable porque puede analizarse una gran cantidad de datos y la confiabilidad de los datos no es relevante para este propósito.
  • Crowdsourcing puede ser un buen complemento para un «drive test» tradicional:crowdsourcing puede utilizarse para detectar áreas de baja cobertura o problemas de red. Luego pueden enviarse los equipos de «drive test» para que recopilen datos. Crowdsourcing puede ayudar a justificar campañas de benchmarking a nivel nacional (p. ej. campañas de valoración del rendimiento de redes (NPS), como la planificación de campañas y rutas para determinar si una campaña realmente cubre las áreas más importantes del país.

Información adicional

Para mayor información sobre las soluciones de pruebas de redes celulares para benchmarking discutidas en esta ficha de aplicación, por favor, contáctese con su representante de ventas de Rohde & Schwarz o visite nuestro sitio web:
www.rohde-schwarz.com/mnt/network-benchmarking

Descargar