CUADERNOS TÉCNICOS

CONSTRUCCIÓN Y VALIDACIÓN
DE UN INSTRUMENTO PARA LA
OBSERVACIÓN Y REGISTRO EN EL
BALONMANO PLAYA.
Juan Carlos Zapardiel Cortés.

Facultad de Medicina y Ciencias de la Salud

Universidad de Alcalá

ESTRATEGIA
DE DATOS
EN BALONMANO
Anselmo Ruiz de Alarcón Quintero

Licenciado Ciencias
Actividad Física y Deporte
Consultor de Análisis de Datos
10 Cuadernos Técnicos

CONSTRUCCIÓN Y VALIDACIÓN
DE UN INSTRUMENTO PARA LA
Nº 328 OBSERVACIÓN Y REGISTRO EN
EL BALONMANO PLAYA
Juan Carlos Zapardiel Cortés

Facultad de Medicina y Ciencias de la Salud

Universidad de Alcalá
carlos.zapardiel@uah.es

RESUMEN

El balonmano playa es un deporte en plena expansión que requiere de estudios científicos que ayuden en
su progresión. El análisis de partidos es una de las estrategias que utilizan los entrenadores para mejorar
sus resultados y la metodología observacional podría ayudar en este sentido. OBJETIVO: Construir y vali-
dar un instrumento para la observación y el análisis de partidos de balonmano playa de nivel internacio-
nal. MÉTODO: Se utilizó la metodología observacional para construcción y validación de un instrumento
de registro y el software LINCE versión 1.3. RESULTADOS: La validez total del instrumento observacional
y de registro de este estudio otorgada por el panel de expertos obtuvo un porcentaje del 99,29%. El análi-
sis de la calidad del dato mediante el índice de Kappa obtuvo un valor medio que osciló entre 0.94 y 0.95
de concordancia intraobservador, y de 0.86 de concordancia interobservador. CONCLUSIONES: El instru-
mento de observación y registro de partidos de balonmano playa de nivel internacional creado ad hoc es
válido para el objetivo propuesto.

Palabras clave:
Validación herramienta, metodología observacional, análisis juego.

INTRODUCCIÓN a pesar de que últimamente ha crecido el número de

investigaciones (Bebetsos, 2012; Gehrer & Werkmeister,
El balonmano playa es un deporte que en este momento 2006; Lara Cobos, 2011; Morillo Baro, 2009; Morillo
está en plena expansión que nace en Italia en 1992. Baro, Reigal, & Hernández-Mendo, 2015; Morillo Baro
Viendo el auge que estaba adquiriendo el voley playa & Hernández Mendo, 2015; Zapardiel Cortés, Lara
y con la idea de promocionar el balonmano pista Cobos, & Rodríguez Hernández, 2013).
(Bebetsos, 2012) Gianni Buttarelli (presidente del equipo
de balonmano Sequax Lazio) y Franco Schiano (presi- En una revisión sistemática del balonmano playa
dente de un equipo italiano de la serie B) crean el balon- hemos encontrado artículos relacionados con el aná-
mano playa (Gehrer & Werkmeister, 2006). Este deporte, lisis de las estadísticas de juego (Gehrer, Trespidi
en tan solo veinticuatro años ya se juega en los cinco Trespidi, & Bebetsos, 2006), con análisis antropomé-
continentes y está en continua progresión y expansión. tricos (Sena, Gomes, Mimbacas, & Ferreira, 2012),
Esto requiere de estudios científicos que ayuden en su con el estudio de la relación de la superficie de juego
progresión ya que es un deporte muy poco estudiado y las lesiones (Manavis, Hatzimanouil, Stefas, &
 Cuadernos Técnicos 11

Bebetsos, 2008), con la nutrición (Miranda Neto et al., El éxito de la metodología observacional a través de un
2014), con el marketing, con aspectos técnico-tácti- instrumento basado en un sistema de categorías es la
cos (Zapardiel Cortés & Paramio Serrano, 2014), con correcta elaboración de este sistema. Para ello se deberá
los sistemas de entrenamiento (Zapardiel Cortés et al., seguir los siguientes pasos (Anguera & Mendo, 2013):
2013) y con la metodología observacional (Morillo
Baro & Hernández Mendo, 2015). 1. Realizar un listado de la realidad observable.
En relación a esta última área de investigación, 2. Elegir las categorías exhaustivas. En este sentido,
la metodología observacional, Borrie, Jonsson & el número de sesiones de observaciones previas
Magnusson ((Borrie, Jonsson, & Magnusson, 2002) a la finalización del sistema garantizarán que no
comentan que los estudios que se centran en el aná- aparezcan nuevas categorías. Se deben realizara al
lisis de frecuencia simple no pueden identificar accio- menos tres sesiones de observación.
nes temporales interdependientes dentro de un evento 3. Establecer agrupamientos de criterios basados en
deportivo. En este sentido, los deportes colectivos se comportamientos específicos según su similitud.
caracterizan por acciones temporales interdependien- 4. Realizar las sesiones de observación para compro-
tes y, como indica Santos, Sarmento, Campaniço, & bar la homogeneidad de los agrupamientos. En el
Alves (Santos, Sarmento, Campaniço, & Alves, 2014), caso de comprobar la no homogeneidad se reali-
de una gran complejidad de comportamientos que zarían las modificaciones oportunas hasta llegar a
dificultan su observación y análisis. Hay que tener en crear el sistema de categorías exhaustivo.
cuenta que aquellos que analizan sólo la frecuencia
de ocurrencia de los eventos no llegan a analizar un Cada una de las categorías desarrolladas como se comen-
aspecto clave en el juego, su dimensión temporal. taba anteriormente tendrá una característica básica que
captura su esencia, así como un grado de plasticidad que
En esta misma línea, Travassos, Davids, Araújo, & se refiere al rango completo de manifestaciones exter-
Esteves (Anguera & Mendo, 2013; Travassos, Davids, nas de los comportamientos que puede ser asignados a la
Araújo, & Esteves, 2013) hacen una reflexión sobre el misma categoría (Anguera & Mendo, 2013).
análisis observacional de los deportes colectivos pro-
poniendo complementar el análisis cuantitativo con el Una vez expuesto el planteamiento sobre la construc-
análisis cualitativo. En este sentido, (Anguera Argilaga, ción de un instrumento para la observación y el regis-
Sánchez Algarra, Camerino i Foguet, & Castañer tro de un evento deportivo se debe resaltar que estos
Balcells, 2014) indican que el paradigma Mixed instrumentos contribuyen a una comprensión más pro-
methods integra los paradigmas de investigación cuan- funda de los sistemas y de las acciones de juego de los
titativos y cualitativos, integrando o combinando deportes colectivos. Esto se realiza a través de la detec-
ambos tipos de datos para realizar un análisis general ción y el análisis de las estructuras regulares de com-
más amplio. En este sentido, Lozano (Lozano Jarque, portamiento que facilitan la comprensión de determi-
2014) comenta que cuando un gran número de varia- nados factores de rendimiento de los equipos y de las
bles influyen en el rendimiento, desde una perspectiva tendencias evolutivas del juego (Santos et al., 2014).
sistémica-ecológica-competitiva, se justifica la utiliza- En esta línea de estudio, Lozano y Camerino (2014)
ción de métodos mixtos en los que se integren datos construyeron un sistema de observación multidimen-
cuantitativos y cualitativos lo que permitirá la obten- sional con categorías para evaluar las acciones ofen-
ción de resultados contextualizados adecuadamente. sivas que se producen en el balonmano a alto nivel.
Cada criterio trataba de evaluar un comportamiento
Para (Anguera, Blanco, & Losada, 2001) la comple- táctico colectivo ofensivo. (Morillo Baro & Hernández
mentariedad entre lo cualitativo y lo cuantitativo, “sim- Mendo, 2015) validaron una herramienta de observa-
plificado drásticamente”, requerirá de la elaboración ción diseñada ad hoc. Este instrumento consistía en
de un instrumento con el que se realizará un registro un sistema mixto de formatos de campo y sistemas de
(metodología cualitativa) que deberá someterse a los categorías exhaustivas y mutuamente excluyentes que
controles de calidad de los datos y al posterior análisis tenían como objetivo codificar la fase de ataque del
(metodología cuantitativa). La extraordinaria diversidad balonmano playa. Utilizaron como criterios el minuto,
de situaciones que se pueden observar en un evento el marcador, la zona de finalización y el jugador que
que se quiere evaluar requiere, por costoso que sea, finaliza la acción. Se codificaron 12 observaciones de
de un instrumento ad hoc para cada caso. Este instru- selecciones nacionales absolutas masculinas.
mento puede estar basado en un sistema de catego-
rías, en un formato de campo, en la combinación de Después de contextualizar el marco teórico de este
ambos o en escalas de ratio (Anguera & Mendo, 2013). estudio y con las limitaciones que puede conllevar la
Nuestro estudio se basa en el instrumento basado en poca literatura que existe en cuanto a la observación
un sistema de categorías. y análisis del balonmano playa, el objetivo de este
12 Cuadernos Técnicos

estudio será el de construir y validar un instrumento de Balonmano Playa de Lloret de Mar del 2015 y, en
para la observación y el análisis del citado deporte. segundo lugar, mediante la práctica de registro de
Como consecuencia, se estimarán las necesidades for- datos con los mismos criterios de observación del ins-
mativas de los observadores para validar la calidad de trumento de registro de este estudio. Esta fase de for-
los datos recogidos siguiendo las indicaciones de gene- mación tuvo una duración de 30 días, realizando prác-
ralizabilidad determinadas por (Anguera et al., 2001). ticas de 60 minutos tres veces por semana.

MÉTODO Instrumento de registro

El instrumento de observación se fundamentó en una
Puesto que el objetivo de este estudio es la cons- revisión de la literatura existente relacionada con la
trucción y validación de un instrumento de observa- observación y análisis del balonmano, y del balon-
ción y registro específico para el balonmano playa se mano playa (Anguera et al., 2001; Avila, 2003; Lozano
han adaptado los apartados del método (Santos et al., Jarque, 2014; Lozano & Camerino, 2012; Morillo Baro
2014). & Hernández Mendo, 2015; Prudente, Garganta, &
Anguera, 2010).
Diseño
Debido a la poca investigación científica de metodo- El planteamiento inicial para la creación del instru-
logía observacional que existe sobre el balonmano mento observacional construido ad hoc fue crear una
playa, en el proceso de elaboración del sistema de herramienta muy elaborada pero que no ofreciese exce-
categorías se ha seguido una estrategia empírico-induc- siva rigidez (Anguera-Argilaga, Magnusson, & Jonsson,
tiva (Morillo Baro & Hernández Mendo, 2015). Desde 2007). Este instrumento observacional está basado en
el punto de vista del proceso de metodología observa- un sistema de categorías que se construyó siguiendo las
cional indicado por Anguera Argilaga et al. (2001) para indicaciones de Anguera & Mendo (2013). Se crearon
la construcción del instrumento de este estudio se ha 17 criterios (Tabla 1) relacionados con las acciones de
tenido en cuenta que el evento observado sería sin- los lanzamientos, las acciones del portero, los errores y
crónico, de pequeños grupos de sujetos que funcio- los aciertos. Los 17 criterios creados fueron las siguien-
nan como una unidad y de secuencias conductuales tes: equipo que realiza la acción, momento del partido
o heterocontingentes. En cuanto a los criterios delimi- en el que se realiza la acción, efectividad del lanza-
tadores (Anguera Argilaga et al., 2001), se trataría de miento, zona de la portería a la que se dirige el lanza-
un evento puntual, idiográfico y multidimensional. miento, tipo lanzamiento, posición del cuerpo durante
Finalmente, la elaboración del instrumento siguió las el lanzamiento, tiempo de ejecución del lanzamiento,
recomendaciones de (Anguera & Mendo, 2013) sobre error, acierto, efectividad de la acción del portero ante
la metodología observacional mediante un sistema de el lanzamiento, acción del portero durante el lanza-
categorías. miento, zona del terreno juego desde donde se realiza
el lanzamiento, distancia de intervención durante la
Participantes parada, estructura defensiva durante la acción anotada,
Para realizar la valoración de expertos del instrumento estructura ofensiva durante la acción anotada, equili-
de observación y registro de este estudio participaron brio numérico durante la acción anotada, número del
10 expertos en balonmano playa que debían cumplir jugador que realiza la acción.
uno de los siguientes criterios de inclusión (Santos et
al., 2014): a) experiencia como entrenador de equipos El criterio “equipo que realiza la acción” hace refe-
de balonmano playa de categoría nacional; b) expe- rencia al equipo local (A) o visitante (B) del jugador
riencia como investigador en este área científica; c) que se está analizando en el momento de la acción.
experiencia como entrenador de las selecciones espa- El criterio momento del partido en el que se realiza la
ñolas de balonmano playa. El panel de expertos se acción viene marcado por cómo se estructura un par-
formó con dos doctores (con tesis relacionadas con el tido de balonmano playa. Según las reglas de juego
balonmano playa), cuatro entrenadores de selecciones (International Handball Federation, 2010), un partido
nacionales, dos entrenadores de categoría nacional y de balonmano playa consiste en jugar dos tiempos que
dos investigadores del área científica. se puntúan por separado. Cada tiempo dura 10 minu-
tos. Si cada equipo gana un tiempo, el resultado es de
Para la fase piloto de validación del instrumento de empate. Como siempre tiene que haber un ganador, se
observación y registro de este estudio participaron tres utilizará el método de desempate del “Shootout”. En
estudiantes de Grado de Ciencias del Deporte de la caso de empate al final del set se tendría que dirimir el
Universidad de Alcalá. En primer lugar, se formó a los ganador mediante el “gol de oro”. La zona de la porte-
tres observadores mediante el visionado de cinco par- ría a la que se dirige el lanzamiento hace referencia a
tidos de balonmano playa del Campeonato de Europa la división de la portería como se indica en la figura 1.
 Cuadernos Técnicos 13

Tabla 1. Listado de criterios, registros en el panel El criterio “tipo lanzamiento” está sub-
y categorías correspondientes dividido en las categorías “sencillo”,
que son todos los lanzamientos que si
fuesen anotados tendrían valor de un
punto, “especialista”, que son todos
los lanzamientos que realiza el jugador
especialista-portero, “flight”, que son
todos los lanzamientos que se realizan
recibiendo el balón en el aire a excep-
ción de los materializados por el espe-
cialista-portero, “360”, que son todos
los lanzamientos que se realizan des-
pués de hacer un giro completo en el
aire, y “6 metros”, que son todos los
lanzamientos de penalti. La “posición
del cuerpo durante el lanzamiento” se
determinará como “vertical” cuando
la posición del jugador analizado
durante el lanzamiento se mantiene en
el eje vertical en relación al terreno de
juego, cuando la posición del jugador
analizado durante el lanzamiento se
mantiene en el eje horizontal en rela-
ción al terreno de juego serán anota-
dos como “horizontales”. El “tiempo
de ejecución rápido” está definido por
todos los lanzamientos que se realizan
al primer paso, a pie cambiado, en el
mismo instante de terminar el giro o
nada más coger el pase en el flight; el
“tiempo de ejecución lento” serían el
resto de lanzamientos. Como “error”
se consideran el “pase”, que son todos
los errores que se producen al realizar
un pase o una recepción, “falta en ata-
que”, que son todas las faltas en ata-
que que son indicadas por el árbitro
al jugador analizado, y los “reglamen-
tarios” “dobles”, “pasos”, “invasiones
defensivas”, “invasiones ofensivas”,
“penaltis”, “exclusiones” y “descali-
ficaciones”. En la descalificación por
Figura 1. División de la portería para identificar doble exclusión solo será considerado como único
las zonas de lanzamiento error la segunda exclusión y no la descalificación. El
criterio “acierto” se subdivide en las categorías “con-
tragiro”, que son todos los lanzamientos que se blo-
can después de un lanzamiento en 360, “blocaje”, que
son todos los lanzamientos blocados, “recuperación
de balón”, que son todos las recuperaciones de balo-
nes ante la posesión de balón del equipo contrario que
no sean cualquiera del resto de acciones de este crite-
rio, “falta en ataque”, que son todas las faltas en ata-
que provocadas, “bloqueo”, que son todas las accio-
nes ofensivas de bloqueo y “pase en flight”, que son
todos los pases en flight recepcionados correctamente.
14 Cuadernos Técnicos

Los criterios “parada” y “acción del portero” vienen

definidos en las tablas 2 y 3.
Figura 4. E.
Defensiva 2:1

Figura 5. E.
Defensiva 2+1

Tabla 2 . Criterio Parada

Para el criterio “zona del terreno juego desde donde Figura 6. E.

Defensiva 1:2
se realiza el lanzamiento” tomamos como referen-
cia a Morillo & Hernández-Mendo (2014) que dividen
las zonas del terreno de juego como se observa en la
figura 2 teniendo en cuenta para asignar el valor numé-
rico el sentido del ataque.

Figura 7. E.
Defensiva Individual

Las “estructuras ofensivas durante la acción anotada”

se presentan en las figuras 3, 4, 5, 6 y 7. Se indicará
Figura 2. División de zonas de lanzamiento la estructura defensiva que se estaba realizando en el
(extraído de Morillo & Hernández-Mendo, 2014) momento previo al de la acción anotada.

El criterio “distancia de intervención durante la parada”

está subdividido en las categorías “bajo portería”, defi-
nido por todas las acciones en las que el portero no
modifica su posición con pasos frontales ante los lan- Figura 8. E.
zamientos una vez que el jugador lanzador ha reci- Ofensiva 4:0
bido el pase o ha saltado con el balón en las manos,
y “salida”, que se define por todas las acciones en las
que el portero sí modifica su posición con pasos fron-
tales ante los lanzamientos una vez que el jugador lan-
zador ha recibido el pase o ha saltado con el balón en
las manos. Figura 9. E.
Ofensiva 3:1
Las “estructuras defensivas durante la acción anotada”
se presentan en las figuras 3, 4, 5, 6 y 7. Se indicará
la estructura defensiva que se estaba realizando en el
momento previo al de la acción anotada.

Figura 10. E.
Ofensiva 2:2
Figura 3.E.
Defensiva 3:0
 Cuadernos Técnicos 15

El criterio “equilibrio numérico durante la acción ano- El partido observado para realizar la validación fue la
tada” se determina por las categorías “igualdad”, con- final masculina del Campeonato de Europa Absoluto
tando el número total de jugadores en el terreno de de Balonmano Playa que se disputó en Lloret de Mar,
juego (incluido el portero en defensa), “superioridad Spain, el 5 de julio de 2015. El partido se grabó con
1”, el equipo del jugador observado tiene un juga- cinco cámaras de vídeo digitales JVC HD GY-250
dor más, contando el número total de jugadores en (máster, cortos, lateral izquierdo, derecho y grúa en
el terreno de juego (incluido el portero en defensa), el fondo derecho). En dicho partido se enfrentaban las
“superioridad 2”, el equipo del jugador observado selecciones nacionales de España y Croacia. La figura
tiene dos jugadores más, contando el número total de 12 muestra la pantalla del instrumento de registro.
jugadores en el terreno de juego (incluido el portero en
defensa), “inferioridad 1”, el equipo del jugador obser-
vado tiene un jugador menos, contando el número
total de jugadores en el terreno de juego (incluido el
portero en defensa), “inferioridad 2”, el equipo del
jugador observado tiene dos jugadores menos, con-
tando el número total de jugadores en el terreno de
juego (incluido el portero en defensa).

Procedimiento
Para confirmar la validez del instrumento de obser-
vación y registro se utilizó el denominado criterio de
autoridad mediante un panel de expertos. Se solicitó Figura 12. Instrumento de registro
a diez expertos en balonmano playa que hicieran una
valoración del instrumento de registro. A los expertos Posteriormente y de forma regular, se estudió la fiabili-
se les pedía que indicasen la pertinencia y adecuación dad del instrumento valorando la concordancia intra-
de cada uno de los criterios y categorías. De la misma observadores e interobservadores utilizando el índice
forma, pudieron realizar las aportaciones que creye- de Kappa de Cohen (Cohen, 1960) después de dife-
ron oportunas (Lozano, 2014). La figura 11 muestra un rentes periodos de formación.
ejemplo de los cuestionarios enviados a los expertos.
RESULTADOS Y DISCUSIÓN
Para la presentación de los resultados y de la dis-
cusión de este trabajo, en primer lugar, se expon-
drán los resultados y la discusión relacionados con
el panel de expertos y, en segundo lugar, los resul-
tados y la discusión relacionados con el análisis
de la calidad del dato, tanto intraobservador como
interobservador.

El instrumento de observación y registro tuvo dos ver-

siones. La primera versión se envió al panel de exper-
Figura 11. Ejemplo de uno los apartados de los cuestionarios del tos y la segunda, y definitiva, se elaboró con las apor-
panel de expertos taciones de los expertos. La tabla número 4 muestra
los resultados del panel de expertos. La validez total
obtuvo un porcentaje del 99,29%, 100% en cuanto a la
Para el registro de las acciones observadas se utilizó el pertinencia y 98,57 en cuanto a la adecuación. Nuestros
software LINCE (Gabín Moreira, 2011), desarrollado por resultados coinciden con otros estudios de metodología
el equipo de investigación del Laboratori d’Observa- observacional que han utilizado el panel de expertos
ció de la Motricitat del Inef de Lleida. Este software está para valorar sus instrumentos de observación. Lozano
desarrollado en Java, lo que permite tener una aplica- (2014), en la valoración de un instrumento de observa-
ción multiplataforma. Está diseñado para la observación ción sobre táctica ofensiva en balonmano, obtuvo una
de cualquier tipo de evento y se pueden realizar dise- validez del 98,96%, siendo la pertinencia del 100% y
ños de sistemas, registros de vídeo, controles de calidad la adecuación del 98,25%. Santos et al. (Santos et al.,
del dato y exportar los resultados en diversos formatos 2014), en la valoración de un instrumento de observa-
(Lozano, 2014). Otra de las ventajas que tiene este sof- ción de las interacciones en waterpolo obtuvo una vali-
tware es la facilidad que ofrece para crear nuevos pane- dez del 92,21%. Santos et al. (2014) no indicó los por-
les de registro a partir de un panel de registro base. centajes de pertinencia y adecuación.
16 Cuadernos Técnicos

la posición del cuerpo del lanzador

Tabla 4 Pertinencia y adecuación del instrumento observacional
según el panel de expertos tomando como referencia los ejes
vertical y horizontal en relación al
terreno de juego. En cuanto a los cri-
terios “error”, “acierto”, “estructura
defensiva” y “estructura ofensiva”, en
la primera versión existía confusión
al no definirse claramente si el obser-
vador debía centrar su atención en
la fase ofensiva o defensiva. Por esta
razón, se indicó que en esta cate-
goría se debía resaltar que, en prin-
cipio, el observador no tendría una
perspectiva definida en cuanto a si
debe registrar las acciones defensivas
u ofensivas. Se debían anotar todas
las acciones que estaban reflejadas
en los paneles y que se reproducían
durante el evento.

Para analizar la calidad del dato

registrado utilizamos la concordan-
cia del observador basándonos en
los coeficientes de correlación agru-
pados por la determinación de la
concordancia intraobservadores e
interobservadores (Lozano, 2014) uti-
lizando el índice de Kappa de Cohen
(Cohen, 1960). Este análisis se rea-
lizó directamente a través del sof-
tvare LINCE. A través de la escala
propuesta por Landis y Koch (Landis
& Koch, 1977) se fue comprobando
que los índices de Kappa certificaban
la validez de los registros.

Se analizó la calidad del dato

mediante la concordancia intraobser-
vador calculando el índice de Kappa
en tres ocasiones. En todas ellas la
interpretación del grado de acuerdo
propuesto por Landis y Koch (Landis
& Koch, 1977) fue de “muy bueno”.
La tabla 5 muestra los índices de
Kappa analizados. En el primer aná-
lisis se obtuvo una media de 0.94,
en el segundo una media de 0.95 y
Las aportaciones de los expertos en relación al ins- en el tercero una media de 0.94. Nuestros resultados
trumento observacional se centraron en los criterios coinciden con los estudios de Lozano (2014) y Morillo
“posición del cuerpo en los lanzamientos”, “error”, (Morillo Baro & Hernández Mendo, 2015) que tam-
“acierto” y en estructuras “ofensivas” y “defensivas”. bién utilizaron el índice de Kappa para analizar la cali-
En la primera versión del instrumento observacional en dad del dato de sus registros. Lozano (2014) obtuvo
el criterio “posición del cuerpo en los lanzamientos” se un índice de Kappa de 0.96 en su primer análisis y
tenía como referencia la primera parte del cuerpo que de 0.95 en su segundo análisis. Morillo (Morillo Baro
tocaba la arena después del lanzamiento. Con las apor- & Hernández Mendo, 2015) obtuvo una media de
taciones del panel de expertos se estableció determinar 0.98. En relación al estudio de Santos (2014) nuestros
 Cuadernos Técnicos 17

resultados mostraron mayor calidad del dato. Santos

(2012) obtuvo un índice de media de 0.75. En defini-
tiva, todos los índices de nuestro estudio en relación
a la concordancia intraobservador mostraron, según la
escala de Landis y Koch (Landis & Koch, 1977), una
certificación de que los datos recogidos son fiables.

CONCLUSIONES

La realización de este trabajo de investiga-

ción nos ha permitido extraer conclusiones
relacionadas con el marco teórico de los ins-
trumentos de observación y con el análisis
experimental propio de este estudio.
Tabla 5. Análisis de la concordancia intraobservador
mediante el índice de Kappa En cuanto al marco teórico de los instrumen-
tos de observación podemos concluir:

Para analizar la calidad del dato mediante la concor- • Que los métodos mixtos de observación
dancia interobservador también se calculó el índice aportan un análisis general más amplio.
de Kappa. En este caso, en dos ocasiones. En todas
ellas el índice fue superior a 0.65 que según la inter- •
Que la clave del éxito de la
pretación del grado de acuerdo propuesto por Landis metodología observacional a través de
y Koch (Landis & Koch, 1977) es suficiente para vali- un instrumento basado en un sistema de
dar la calidad del dato. La tabla 6 muestra los índices categorías es la correcta elaboración de
de Kappa analizados. En los dos análisis se obtuvo una este sistema.
media 0.86. Los índices de Kappa de nuestro estudio
son algo inferiores que los de Lozano (2012), 0.96, y • Que el análisis de la calidad del dato a
que los de Morillo (Morillo Baro & Hernández Mendo, través del índice de Kappa es un buen
2015), 0.98. A pesar de que los índices de Kappa de indicador para certificar la realidad de
nuestro estudio son inferiores a los de otros estudios la acción observada.
que realizaron el mismo análisis y también utilizaban
instrumentos observacionales parecidos, todos los índi- En cuanto al análisis experimental propio de
ces de nuestro estudio en relación a la concordancia este estudio podemos concluir:
interobservador mostraron, según la escala de Landis y
Koch (Landis & Koch, 1977), una certificación de que • Que el instrumento de observación y
los datos recogidos son fiables. registro de partidos de balonmano playa
de nivel internacional creado ad hoc es
válido para el objetivo propuesto.

• Que los registros recogidos con el

instrumento de observación de este
estudio reflejan la realidad que ha
tenido lugar en el evento.

• Que otra de las ventajas que tiene el

software LINCE es la es la facilidad que
ofrece para la crear nuevos paneles de
registro a partir de un panel de registro
base.
Tabla 6. Análisis de la concordancia interobservador
mediante el índice de Kappa
18 Cuadernos Técnicos

REFERENCIAS BIBLIOGRÁFICAS

Anguera Argilaga, M. T., Sánchez Algarra, P., Camerino Lozano Jarque, D. (2014). Análisis del comportamiento
i Foguet, O., & Castañer Balcells, M. (2014). Mixed táctico ofensivo en alto rendimiento en balonmano
methods en la investigación de la actividad física y Lozano, D., & Camerino, O. (2012). Eficacia de los
el deporte. Revista de Psicología del Deporte, 23(1), sistemas ofensivos en balonmano. Apunts. Educació
0123-130. Física i Esports, (108), 70.
Anguera, M. T., & Mendo, A. H. (2013). LA Manavis, K., Hatzimanouil, D., Stefas, E., & Bebetsos,
METODOLOGÍA OBSERVACIONAL EN EL ÁMBITO G. (2008). Injuries in beach handball.
DEL DEPORTE [observational methodology in sport Miranda Neto, M., Travares Toscano, L., da Silva Félix,
sciences]. E-Balonmano.Com: Revista De Ciencias G., de Oliveira Costa, D., Leite Tavares, R., & Coeil
Del Deporte, 9(3), 135-160. Seabra Marques, R. (2014). Consumo alimentar de
Anguera, M. T., Blanco, A., & Losada, J. L. (2001). seleçöes nacionais campeäs mundiais de beach
Diseños observacionales, cuestión clave en handball. Revista Brasileira De Ciências Da Saúde,
el procesode la metodología observacional. 18, 43-50.
Metodología de las Ciencias del Comportamiento, Morillo Baro, J. P. (2009). Balonmano Playa. Sevilla:
3(2), 135-160. Wanceulen.
Anguera-Argilaga, M. T., Magnusson, M. S., & Morillo Baro, J. P., Reigal, R. E., & Hernández-
Jonsson, G. K. (2007). Instrumentos no estandar: Mendo, A. (2015). Análisis del ataque posicional de
Planteamiento, desarrollo y posibilidades. Avances balonmano playa masculino y femenino mediante
En Medición, 5, 63-82. coordenadas polares. RICYDE.Revista Internacional
Avila, F. M. (2003). Aplicación de un sistema De Ciencias Del Deporte.Doi: 10.5232/Ricyde,
observacional para el análisis del lanzamiento en 11(41), 226-244.
balonmano en el mundial de Francia 2001. Apunts. Morillo Baro, J. P., & Hernández Mendo, A. (2015).
Educación Física y Deportes, 1(71), 100-108. Análisis de la calidad del dato de un instrumento
Bebetsos, G. (2012). Beach handball from A to Z. para la observación del ataque en balonmano playa.
Basel: International Handball Federation. Revista Iberoamericana de Psicología del Ejercicio y
Borrie, A., Jonsson, G. K., & Magnusson, M. S. (2002). el Deporte, 10(1), 15-22.
Temporal pattern analysis and its applicability in Prudente, J., Garganta, J., & Anguera, M. T. (2010).
sport: An explanation and exemplar data. Journal of Methodological approach to evaluate interactive
Sports Sciences, 20(10), 845-852. behaviors in team games: An example in handball.
Cohen, J. (1960). A coefficient of agreement for Proceedings of the 7th International Conference on
nominal scales.educational and psychosocial Methods and Techniques in Behavioral Research,
measurement.20, 37-46. 41.
Gabín Moreira, B. (2011). Lince, automatización de Santos, S., Sarmento, H., Campaniço, J., & Alves, J.
datos observacionales para “Avances tecnológicos (2014). Construcción de un instrumento para la
y metodológicos en la automatización de estudios observación y el análisis de las interacciones en
observacionales en deporte”. Unpublished el waterpolo. Revista De Psicología Del Deporte,
manuscript. 23(1), 0191-200.
Gehrer, A., Trespidi Trespidi, M., & Bebetsos, G. S. Travassos, B., Davids, K., Araújo, D., & Esteves, P.
(2006). Qualitative analysis of the 4th european T. (2013). Performance analysis in team sports:
beach handball championships. EHF Periodical, Advances from an ecological dynamics approach.
Gehrer, A., & Werkmeister, N. (2006). Beach-Handball. International Journal of Performance Analysis in
Der Neue Sommersport. Göppingen: GA. Sport, 13(1), 83-95.
International Handball Federation. (2010). Rules of the Zapardiel Cortés, J., Lara Cobos, D., & Rodríguez
game, beach handball. Unpublished manuscript. Hernández, M. (2013). Beach handball to improve
Landis, J. R., & Koch, G. G. (1977). The measurement jumping power. EHF Scientific Conference. Women
of observer agreement for categorical data. and Handball: Scientific and Practical Approaches,
Biometrics, , 159-174. Viena. 310-31.
Lara Cobos, D. (2011). La respuesta cardiaca durante Zapardiel Cortés, J., & Paramio Serrano, E. (2014).
la competición de balonmano playa femenino. Beach handball sessions for high school students.
Apunts. Medicina de L’Esport, 46(171), 131-136. EHF Web Periodical.
 Cuadernos Técnicos 19

Anselmo Ruiz de Alarcón Quintero

Licenciado Ciencias
Actividad Física y Deporte
Consultor de Análisis de Datos
e-mail: info@anselmoraq.es ESTRATEGIA
Twitter: @anselmoraq
Nº 329
DE DATOS EN
BALONMANO
1. Liga ASOBAL 2016/2017: Análisis de datos
INTRODUCCIÓN
¿Cuál ha sido el grado de relación entre diferentes
El análisis de datos en balonmano fue pionero variables estadísticas de la finalizada Liga ASOBAL
en la década de 1990 respecto a otros deportes 2016/2017 y el rendimiento de sus equipos?
de equipo. La implementación de un sistema
compatible y duradero en las competiciones
de selecciones nacionales de IHF y EHF ha
permitido poder comparar campeonatos desde
hace 20 años y establecer valores de referencia.
También el universo académico desarrolló
líneas de investigación, tesis doctorales y
herramientas que con una mayor fiabilidad
pero menor acceso y agilidad del dato,
proporcionaron un mayor conocimiento de
la lógica del juego y el engranaje de distintos
aspectos.
Sin embargo, los avances en Big Data
y volúmenes industriales de datos no
dependientes de auto-registro y sí de la
automatización de empresas especializadas en
el mercado consta de un historial de intentos FIGURA 1. Relación entre diferentes variables estadísticas de la
finalizada Liga ASOBAL 2016/2017
tímidos y abandonos en el balonmano que ya y el rendimiento de sus equipos.
han sido adoptados hace una década en fútbol
y baloncesto. Los recientes acuerdos de EHF A partir de la figura 1, se pueden establecer una serie
con proveedores de datos, hechos públicos en de coclusiones sobre los datos que se exponen en
junio de 2017, hace que la Champions League la misma:
2017-2018 pueda convertirse en un punto de • La variable de puntos obtenidos como visitante
inflexion en el que se inicie el análisis de datos es la que en mayor grado explica el rendimiento
ágil y accessible que permita el lanzamiento final, con un 91%.
inicial de una cultura del dato diferente en • El ataque tiene un 6% más de relación con la
balonmano a la desarrollada hasta ahora. clasificación final en ASOBAL que la defensa.
A continuación se exponen los análisis • Los goles marcados y encajados mediante
de grandes volúmenes de datos en la Liga contraataque son variables con una sensibilidad
ASOBAL, en la Champions League masculina, importante, algo que no ocurre con los goles de
en la Copa del Rey masculina 2017 y en la lanzamiento exterior.
fase de ascenso a ASOBAL 2017, así como • El rendimiento obtenido por los equipos en los
el análisis de partidos en directo con alertas últimos 5 partidos explica en mayor grado la
comunicables a cuerpo técnico en tiempos clasificación final que el logrado en los 5 iniciales
muertos, descansos o tiempo real y las redes de de la temporada.
juego de ataque. • El grado de relación del porcentaje de paradas con
el rendimiento final es de un 59%.
20 Cuadernos Técnicos

La línea discontinua de puntos de la siguiente figura - Fraikin BM, Granollers

(figura 2) indica el rendimiento esperado en defensa - Recoletas At. Valladolid
una vez conocidos los datos de ataque. Aquellos círcu- - Helvetia Anaitasuna
los que más se alejen del trazo de puntos discontinuos - Liberbank Ciudad Encantada
muestran perfiles inesperados que marcan una tenden- - Bidasoa Irún
cia atípica. Dos equipos muestran una tendencia ines-
perada, con ejemplos antagónicos: 2. Liga ASOBAL 2017/2018: Estrategia de datos
• ABANCA Ademar León obtiene eficacia defensiva
mucho mayor de lo esperado tras conocer sus ¿Qué sentido puede tener el uso de estos datos en el
datos atacantes, al situarse por encima de la línea diseño de la estrategia de la temporada de un club de
discontinua. balonmano? Es posible establecer un diseño de estra-
• Frigoríficos Cangas Morrazo obtiene eficacia tegia competitiva previo al inicio de la temporada con
atacante mucho mayor de lo esperado tras conocer las siguientes estimaciones, basado en las prioridades
datos defensivos, se sitúa por debajo de la línea del gráfico anterior (se privilegia la información res-
discontinua. pecto a contraataque y no tiene alta prioridad la de
goles de lanzamiento exterior):
• 1º. ¿Cuál es el objetivo clasificatorio?
- Optar a Campeón de liga: 59 puntos (1,90
puntos por partido)
- Optar a Subcampeón de liga: 52 puntos (1,73
puntos por partido)
- Optar a Clasificación europea: 32 puntos (1,07
puntos por partido)
- Optar a No descender: 21 puntos (0,70 puntos
por partido)
• 2º. ¿Qué rendimiento como local y visitante
debería obtenerse?
- Optar a Campeón de liga: 30 puntos como local
+ 29 visitante
- Optar a Subcampeón de liga: 28 puntos como
local + 24 visitante
- Optar a Clasificación europea: 21 puntos como
FIGURA 2. Rendimiento esperado en defensa una vez
local + 11 visitante
conocidos los datos de ataque - Optar a No descender: 14 puntos como local +
7 visitante
Además en función de los datos expuetos, se pue- • 3. ¿Cuál es el perfil de goles a marcar – encajar
den establecer 3 perfiles de equipos en ASOBAL por partido de cada objetivo?
2016/2017: - Optar a Campeón de liga: Marcar 34 – Encajar
• Perfil “Mejor Defensa que Ataque” 25
- ABANCA Ademar León - Optar a Subcampeón de liga: Marcar 28 –
- Bada Huesca Encajar 25
- Fertiberia Puerto Sagunto - Optar a Clasificación europea: Marcar 28 –
- Bm. Benidorm Encajar 27
- Optar a No descender: Marcar 26 – Encajar 28
• Perfil “Mejor Ataque que Defensa” • 4. ¿Cuál es el perfil de goles de contraataque a
- Frigoríficos Morrazo marcar y encajar por partido en cada objetivo?
- DS Auto Gomas Sinfín - Optar a Campeón de liga: Marcar 5 – Encajar 2
- Quabit Guadalajara - Optar a Subcampeón de liga: Similar a campeón
- BM. Villa de Aranda de liga (5-2)
- Ángel Ximenez – Avia P.G. - Optar a Clasificación europea: Marcar 2,5 –
Encajar 2,0
• Perfil “Normal” - Optar a No descender: Marcar 2,0 - Encajar 3,0
o Equipos con rendimiento defensivo esperado tras • 5. ¿Cuál debe ser el porcentaje de paradas en cada
conocer datos atacantes: objetivo?
- F.C. Barcelona Lassa - Optar a Campeón de liga: 37%
- Naturhouse La Rioja - Optar a Subcampeón de liga: 35%
 Cuadernos Técnicos 21

- Optar a Clasificación europea: 30%

- Optar a No descender: 28%
Estos son perfiles de rendimiento. ¿Dónde empieza la
estrategia y toma de decisiones basada en datos? Es
básico conocer la tendencia hacia el ataque o defensa
para determinar cuál es la “ruta” de crecimiento o esta-
bilidad deseada.

3. Champions League EHF 2017 masculina: Final a 4

En la figura 3 se muestran el rendimiento de los equi-
pos en cuanto a la eficacia atacante y defensiva en los
grupos A y B de la Champions League de la temporada
2017.

FIGURA 4. Alertas y redes de juego en tiempo real durante

el partido semifinal entre Paris Saint-Germain y Veszprem.
Champion League 2017.

FIGURA 5. Alertas y redes de juego en tiempo real durante

FIGURA 3. Rendimiento de los equipos en cuanto a la eficacia
el partido semifinal entre Vardar y F.C. Barcelona. Champion
atacante y defensiva de los grupos A y B de la Champions
League 2017.
League de la temporada 2017

Hasta este momento se han mostrado indices estadísti-

cos estratégicos, es decir, útiles para el planteamiento
general de una competición. Sin embargo, es necesario
otro tipo de índices para tomar decisiones en función
del plan de partido o referencias válidas en determi-
nados momentos del mismo. Estos índices se exponen
a modo de ejemplo en las figuras 4 – 6, en las que se
presentan los datos producidos mediante una herra-
mienta de análisis en directo, que permite proporcio-
nar alertas y redes de juego en tiempo real durante el
partido.
Para facilitar la interpretación de la información res-
presentada en las redes expuestas en las figuras 4 – 6,
se deben tener en cuenta los siguientes aspectos: el
tamaño del area del círculo representa el número de
goles marcados; el grosor de las flechas entre dos juga-
dores indica el número de pases previos a gol en juego FIGURA 6. Alertas y redes de juego en tiempo real durante
posicional y la flecha que tiene su origen en medio el partido final entre Paris Saint-Germain y Vardar. Champion
League 2017.
campo representa los pases de contraataque.
22 Cuadernos Técnicos

4. División de Honor Plata. Temporada 2016 / 2017

A continuación se presenta en la figura 7, el rendi-
miento de los equipos de División de Honor Plata en
cuanto sus perfiles atacante y defensivo durante la tem-
porada 2016/2017.

FIGURA 8. Alertas y redes de juego en tiempo real durante el

partido semifinal entre Palma del Río y BM. Alcobendas. Fase de
ascenso a Asobal 2016 / 2017.

FIGURA 7. Rendimiento de los equipos de División de Honor

Plata en cuanto sus perfiles atacante y defensivo durante la
temporada 2016/2017.

• Perfil “Mejor Defensa que Ataque”

- MMT Seguros Zamora
- ARS Palma del Río
- Amenábar ZKE Zarautz

• Perfil “Mejor Ataque que Defensa”

- Viveros Herol BM. Nava
- Cisne Colegio Los Sauces
- Tolosa C.F. Eskubaloia
FIGURA 9. Alertas y redes de juego en tiempo real durante el
• Perfil “Normal” partido semifinal entre CBM Zamora y BM Torrelavega. Fase de
ascenso a Asobal 2016 / 2017.
- Equipos con rendimiento defensivo esperado
tras conocer datos atacantes:
- F.C. Barcelona “B” Lassa
- S.D. Teucro
- Secin Group BM. Alcobendas
- BM. Torrelavega
- R.G.C. Covadonga
- BM. Alarcos Ciudad Real
- Cajasur Córdoba de Balonmano
- Club Handbol Bordils
- BM. Carabanchel
- Gijón Jovellanos

Además de una exposición general de los datos gene-

rados por los equipos durante la liga regular se muestra
también en las figuras 8 -10 un análisis pormenorizado
de las alertas y las redes de juego que presentaron los
equipos de División de Honor Plata que participaron FIGURA 10. Alertas y redes de juego en tiempo real durante el
en la fase de ascenso a la Liga ASOBAL. partido final entre ARS Palma del Rio y CBM Zamora. Fase de
ascenso a Asobal 2016 / 2017.
 Cuadernos Técnicos 23

5. Copa del Rey 2017: Semifinales y final

En este apartado se presentan los análisis referidos a la
Copa del Rey de la temporada 2016 / 2017. La figura
11 representa el cuadro en el rendimiento de los equi-
pos participantes en la fase final de la Copa del Rey
en cuanto a sus perfiles atacante y defensivo durante la
citada competición.

FIGURA 13. Alertas y redes de juego en tiempo real durante el

partido semifinal entre La Rioja y Anaitasuna.
Copa del Rey 2016 / 2017

FIGURA 11. Rendimiento de los equipos participantes en la fase

de la Copa del Rey 2017 en cuanto a la eficacia
atacante y defensive.

Para finalizar, se exponen en las figuras 12 – 14 el aná-

lisis de las alertas y las redes de juego generadas por
los equipos que participaron en las semifinales y final
de la fase final de la Copa del Rey de la temporada
2016 / 2017.

FIGURA 14. Alertas y redes de juego en tiempo real durante

el partido final entre La Rioja y F.C. Barcelona.
Copa del Rey 2016 / 2017

FIGURA 12. Alertas y redes de juego en tiempo real durante el

partido semifinal entre BM Granollers y F.C. Barcelona.
Copa del Rey 2016 / 2017
24 Cuadernos Técnicos

6. Conclusiones

Obtener ventaja competitiva es el propósito al que se encaminan todos los

esfuerzos de confección de plantilla, estrategia de temporada, diseño de
entrenamientos y planes de partido.

Las herramientas de análisis de datos presentadas en este artículo permiten,

• A largo plazo:
- Identificar qué ventajas competitivas son las más relevantes en la
competición en la que se va a participar (diferentes en Liga, Copa
o Champions)
- ¿Deben potenciarse aspectos defensivos u ofensivos en la
competición en la que vamos a tomar parte?

• A corto plazo:
- ¿Se está cumpliendo el plan de partido? (revisable al descanso o en
cualquier momento cuando se manifieste una alerta)
- ¿Qué tipo de partido estamos jugando? (ritmo alto o bajo, predominio
de primeras o segundas líneas, ataque rival previsible o variable)

Una vez expuesta esta nueva perspectiva de trabajo en cuanto al análisis

de datos en balonmano, pueden extraerse las siguientes conclusiones
finales:

• Cada competición, por su tipología y composición de equipos,

dispone de un determinado perfil de rendimiento que determina la
mayor o menor importancia de variables como porcentaje de paradas,
contraataque, que sea más importante el rendimiento atacante o
defensivo, etc. Es fundamental conocer qué tipo de competición se
está disputando para intentar priorizar unos aspectos u otros

• El conocimiento del perfil del propio equipo determina cuál en el

camino a tomar en la mejora o mantenimiento del nivel competitivo,
ya que estos procesos no suelen producer mejoras en la misma
dimension o grado en distintas variables: lo habitual es que ocurra
una “explosion” o “caída” de alguna variable que es compensada o
descompesada por otra.

• Las herramientas de análisis en directo de partido pueden proporcionar

un contraste respecto al plan de partido marcado previamente que
permita tomar decisiones en función del grado de cumplimiento o
eficacia del modelo de juego y sus adaptaciones al rival.