Instrument to measure the perceptions of software development communities regarding communication, coordination and cooperation: Result of validation through expert judgment

• Suarez Brieva, Eydy del Carmen ^[1] ; Pardo Calvache, Cesar de Jesús ^[2] ; Ordoñez Eraso, Hugo Armando ^[2]
  1. [1] Universidad Popular del Cesar

     Universidad Popular del Cesar

     Colombia

     
  2. [2] Universidad del Cauca

     Universidad del Cauca

     Colombia

     
• Localización: INGE CUC, ISSN 0122-6517, ISSN-e 2382-4700, Vol. 20, Nº. 1, 2024 (Ejemplar dedicado a: (Enero - Junio))
• Idioma: inglés
• Títulos paralelos:
  • Instrumento para medir las percepciones de las comunidades de desarrollo de software respecto a la comunicación, coordinación y cooperación: Resultado de la validación mediante juicio de expertos
• Enlaces
  • Texto completo (pdf)
• Resumen
  • español

    Introducción: El desarrollo de software es una actividad sociotécnica que requiere de factores sociales y técnicos para el logro de cualquier objetivo propuesto. Estos factores caracterizan a la Congruencia Sociotécnica (STC), que se centra en el uso debido de habilidades blandas como la coordinación, comunicación y cooperación de los equipos de desarrollo de software.

    Objetivo: El objetivo de este estudio es presentar un instrumento de medición que permite determinar las percepciones de los miembros de una comunidad de desarrollo de software a partir de 42 preguntas formuladas a través de tres dimensiones: comunicación, cooperación y coordinación.

    Metodología: La validación del instrumento de medición se realizó por juicio de expertos; se seleccionaron 9 profesionales, quienes evaluaron el instrumento mediante 4 criterios de calidad: suficiencia, claridad, relevancia y coherencia. Para determinar el acuerdo entre los expertos, se utilizó el coeficiente Kappa Fleiss y, para medir el grado de concordancia, se aplicó Landis y Koch.

    Resultados: La fuerza de concordancia para cada dimensión fue considerable y casi perfecta. Para los criterios de calidad del suficiencia, coherencia y claridad, se identificó una concordancia considerable, siendo la claridad el coeficiente más alto (0.85). El criterio de calidad relevancia fue moderado, siendo la más baja (0.583). Se tuvo en cuenta un nivel de significancia del 5%, siendo el criterio de calidad claridad el más relevante con un valor p=0.02.

    Conclusiones: Realizado los ajustes al instrumento, podrá ser utilizado para medir las percepciones de las dimensiones: comunicación, cooperación y coordinación en las comunidades de desarrollo de software.

  • English

    Introduction: Software development is a sociotechnical activity that requires both social and technical factors to achieve any proposed objective. These factors characterize Sociotechnical Congruence (STC), which focuses on the proper use of soft skills such as coordination, communication, and cooperation within software development teams.

    Objective: The objective of this study is to introduce a measurement tool that enables the assessment of perceptions among members of a software development community, based on 42 questions formulated across three dimensions: communication, cooperation, and coordination.

    Method: The validation of the measurement instrument was carried out through expert judgment. Nine professionals were selected to evaluate the instrument using four quality criteria: sufficiency, clarity, relevance, and coherence. To determine the agreement among the experts, the Fleiss' Kappa coefficient was employed, and Landis and Koch's criteria were applied to measure the degree of concordance.

    Results:  The agreement strength for each dimension was substantial and nearly perfect. Considerable agreement was identified for the sufficiency, coherence, and clarity quality criteria, with clarity having the highest coefficient (0.85). The relevance quality criterion showed moderate agreement, being the lowest (0.583). A significance level of 5% was considered, with the clarity quality criterion being the most significant, with a p-value of 0.02.

    Conclusions: Once the adjustments to the instrument are made, it can be used to measure perceptions of the dimensions: communication, cooperation, and coordination within software development communities.