Validation of A Scale For Assessing The Quality of University Training Devices In Sciences And Techniques Of Physical And Sports Activities (SAQ-UTD / STPSA)

International Journal of Economics and Management Studies

© 2020 by SSRG - IJEMS Journal

Volume 7 Issue 5

Year of Publication : 2020

Authors : Raja Lotfi, Touria Neggady Alami

10.14445/23939125/IJEMS-V7I5P121

How to Cite?

Raja Lotfi, Touria Neggady Alami, "Validation of A Scale For Assessing The Quality of University Training Devices In Sciences And Techniques Of Physical And Sports Activities (SAQ-UTD / STPSA)," SSRG International Journal of Economics and Management Studies, vol. 7,  no. 5, pp. 130-142, 2020. Crossref, https://doi.org/10.14445/23939125/IJEMS-V7I5P121

Abstract:

The aim of our study is to develop and validate a scale for assessing the quality of training devices in sciences and techniques of physical and sports activities in five Moroccan higher schools with regulated access. We borrowed Churchill's validation model and used measurement theory. From a multi-staged process of item generation, selection and scaling, field testing, and refinement procedures, exploratory factorial analysis (EFA) were verified with a sample of 267 students in STPSA. The construct validity of the emerging dimensions was also tested for each factor retained.  The results reveal that the scale identifies 34 items, structured into eight quality dimensions and having a good internal consistency (α =.85), an acceptable internal coherency (r = .803), and satisfactory temporal stability (r = .73). Confirmatory factor analysis allowed us to readjust and significantly improve our developed model (Δ χ2 (10) = 644.64; p< .000). We were also able to extract a general implicit factor called the "Training Quality Index" (TQI). This controls, only but significantly (p<.05), three factors of our scale. The QAS-UTD/STPSA scale has valid and very satisfactory psychometric properties. In fact, eight distinct dimensions have been identified, explored, and confirmed. It constitutes a sufficiently reliable and appropriate tool. It explores parameters little or not taken into account by the usual instruments. Therefore, except for a few minor limitations noted, it can be used in other similar academic institutions to continuously improve their quality of university training devices.

Keywords:

Validation, Scale, Measurement, Assessment, Quality, Training device, STPSA.

References:

[1] Abbes, N., L’entreprise responsable : de la responsabilité sociétale à la communication environnementale, Ed. L’Harmattan, Paris., (2013).
[2] Arbuckle J., IBM SPSS Amos 4.0 User’s Guide. Amos Development Corporation., (2013).
[3] Acedo F.J., Barroso C., Galan J.L., The resource-based theory: dissemination and main trends, Strategic Management Journal, 27(7) (2006) 621-636.
[4] AFNOR ., ISO 9001 Standard, V 2015 : vers un nouveau système de management de la qualité. Une norme révisée et adaptée au contexte économique actuel. 8M Management., (2015).
[5] Ajzen, I., Attitudes, personality, and behaviour (2e éd.). Maidenhead, England New York: Open University Press., (2005).
[6] American Educational Research Association, American Psychological Association & National Council of Measurement in Education, Standards for Educational and Psychological Testing. Washington, DC: AERA., (2014).
[7] Arcaro, J. S., Quality in education: An implementation handbook,  Delray Beach, FL: St. Lucie Press., (1995).
[8] Ardouin, T.,  Ingénierie de la formation pour l'entreprise, 2ème édition, Dunod, (2006).
[9] Aspisi, A., « Mobiliser sur la qualité », in L’Expression d’Entreprise, Aout , (1995) 45.
[10] Astolfi J.-P. & Develay M., La didactique des sciences, Presses Universitaires de France, Paris, (1991).
[11] Babakus E. et Boller G. W., An Empirical Assessment of the SERVQUAL Scale, Journal of Business Research, 24 (1992) 253-268.
[12] Bailey, J. E.; Pearson, S. W., Development of a Tool for Measuring and Analyzing Computer User Satisfaction, Management Science, 29 (5) (1983) 530-545.
[13] Barabel, M., Meier, O. et Teboul, T.,  Les fondamentaux du Management., Collection Management sup – Management, ressources humaines Ed. Dunod, 2ème édition, (2013) 228 
[14] Bardin, L, L’Analyse de contenu. Paris : Presses Universitaires de France ,(2007).
[15] Beamish, W., Consensus about program quality: An Australian study in early childhood special education, Brisbane, Australia: Griffith University, (2004).
[16] Belgith, F., Giret, J.-F., Ronzeau, M., & Tenret, E.,  Panorama 2016. Conditions de vie des étudiants. OVE infos, n°34, (2017).
[17] Bentler, P.M., Comparative Fit Indexes in Structural Models," Psychological Bulletin, 107 (2) (1990) 238-246.
[18] Benzécri, J.P. and al.,  : l’Analyse de Données. 1 (1973) Dunod, Paris.
[19] Bernier, J.J., Pietrulewicz, B.,  La psychométrie. Traité de mesure appliquée. Montréal.  Gaëtan Morin éditeur., (1997).
[20] Bertrand, R., & Blais, J.,  Modèles de mesure : l’apport de la théorie des réponses aux items. Ste -Foy, Québec : Presses de l’Université du Québec., (2004).
[21] Bigras, N., Lemire, J. & Eryasa, J., Analyse comparative de trois instruments d’observation de la qualité (ECERS-R, EOQÉ et CLASS Pre-K) des services de garde à la petite enfance. Les Dossiers des sciences de l’éducation, 37 (2017) 35-54.
[22] Bollen, K. et Long, J., Testing Structural Equation Models,  Sage., (1993).
[23] Borsboom, D., & Markus, K. A, Truth and evidence invalidity theory, Journal of Educational Measurement, 50(1) (2013) 110-114.
[24] Bouchard, C., Plante, J., La qualité : mieux la définir pour mieux la mesurer. Les Cahiers du Service de Pédagogie expérimentale (Université de Liège), 11-12 (2002)  219-236.
[25] Bouchard, C. et J. Plante ,  « La qualité : mieux la définir pour mieux la mesurer », Les Cahiers du Service de Pédagogie Expérimentale, (11/12), Service de pédagogie expérimentale de l’université de Liège, (2003) 219-236.
[26] Bouffard, T., Pansu, P. & Boissicat, N., Quand se juger meilleur ou moins bon qu’il ne l’est s’avère nuisible ou profitable à l’élève.” Revue française de pédagogie, 182 (2013) 117-140.
[27] Bourgon, L. & Lavallée, C.,  Échelle d’observation de la qualité éducative : les services de garde en installation pour les enfants de 18 mois ou plus. Québec, QC : Gouvernement du Québec., (2004).
[28] Bourque, J., Poulin, N. et Cleaver, A.F., Évaluation de l’utilisation et de la présentation des résultats d’analyses factorielles et d’analyses en composantes principales en education, Revue des sciences de l'éducation, 32(2) (2006) 325-344.
[29] Boyer A. & Nefzi A., « La perception de la qualité dans le domaine des services : vers une clarification des concepts », La revue des Sciences de Gestion, Direction et Gestion, n° 237-238 (2009) 43-54.
[30] Brault-Labbé, A. & Dubé, L., Engagement, surengagement et sous-engagement académiques au collégial : pour mieux comprendre le bien-être des étudiants. Revue des sciences de l'éducation, 34 (3) (2008) 729–751. 
[31] Brennan, R. L., Educational Measurement (4th ed.). Westport, CT: Praeger Cizek, G. J., & Bunch, M. B. (2007). A guide to establishing and evaluating performance standards on tests. Thousand Oaks, CA: sage Publications. 
[32] Browne, M. W., & Cudeck, R., Alternative ways of assessing model fit, In K. A. Bollen & J. S. Long (Eds.), Testing structural equation models, (1993) 136-162. Newbury Park, CA: Sage.
[33] Bruner, J.S.., Towards a Theory of Instruction, New-York, W.W Norton, (1966).
[34] Bué,J., Coutrot, T., Puech, I., Conditions de travail : les enseignements de vingt ans d’enquêtes, Toulouse: Octarès, (2004) 166 .
[35] Carman J. M., Consumer Perceptions of Service Quality: An Assessment of SERVQUAL, Dimensions, Journal of Retailing, (1990) 33-55.
[36] Casey, A., Goodyear, V.A., & Armour, K.M., Digital technologies and learning in physical education: Pedagogical cases. London; Routledge, (2016).
[37] Chaize, J., Fiume, O., Ballé, M. & Jones. D.., The Lean Strategy – Using Lean to Create Competitive Advantage, Unleash Innovation, and Deliver Sustainable Growth, McGraw-Hill Education, (2018).
[38] Chartier, D. ,Les styles d’apprentissage entre flou conceptuel et intérêt pratique, Savoirs, 2 (2003) 9-28.
[39] Chelladurai, P, Scott, FL & Haywood-Farmer, J., Dimensions of fitness services: development of a model, Journal of Sport Management. 1(2) (1987) 159-172.
[40] Chouinard, J.A., The case for participatory evaluation in an era of accountability, American Journal of Evaluation, 34 (2) (2013) 237 – 253.
[41] Churchill, G.A., A paradigm for developing better measures of marketing constructs,  Journal of Marketing Research, 16(1) (1979) 64-73.
[42] Costello, A.B. et Osborne, J.W., Best Practices in Exploratory Factor Analysis: Four Recommendations for Getting the Most from Your Analysis. Practical Assessment, Research and Evaluation, 10(7) (2005).
[43] Creswell, J. W., & Plano Clark, V.L., Designing and Conducting Mixed Methods Research (3rd ed.) Thousand Oaks, CA: Sage Publications, (2018).
[44] Creswell, J. W., Research design: Qualitative, quantitative, and mixed methods approach, Thousand Oaks, CA: SAGE Publications, (2013).
[45] Cronbach, L. J., Coefficient alpha and the internal structure of tests”. Psychometrika, 16(3) (1951) 297-335. 
[46] Cronin J. J. et Taylor S. A., Measuring Service Quality: A Reexamination and Extension, Journal of Marketing, 56  (1992) 55-68.
[47] Crosby, P., Quality Is Free, McGraw-Hill, New York, NY., (1979).
[48] De Ketele, J.-M., Évaluation des systèmes de formation. Dans A. Jorro (dir.), Dictionnaire des concepts de la professionnalisation, (2014) 117-120. Louvain-la-Neuve : De Boeck Supérieur.
[49] Deslandes G., Le management éthique, Editions Dunod, Paris, (2012).
[50] Detroz, P. « Vers une démarche balisant la mise en place (ou la refonte) d’un dispositif d’évaluation des enseignements ». In Actes du 28e Congrès de l’Association internationale de pédagogie universitaire (AIPU), Mons, 19-22 mai 2014. Mons : Université de Mons., (2014).
[51] Develay, M., D'un programme de connaissances à un curriculum de compétences. Louvainla-Neuve, Belgique : De Boeck Supérieur, (2015).
[52] De Vellis, R. F., Scale development: theory and applications (2nd ed. Vol. 26). Thousand Oaks, CA: Sage Publications, (2003).
[53] Doherty-Delorme, D., & Shaker, E., Missing pieces II.  An alternative guide to Canadian post-secondary education 2000/2001 provincial rankings: Where do the provinces stand on education? Canadian Centre for Policy alternative, (2001).
[54] Endrizzi, L., La qualité de l’enseignement : un engagement des établissements, avec les étudiants ? Dossier de veille de l”’IFE, (93) (2014) 1-44.
[55] Farrell, G. et Shafika, I., Survey of ICT and education in Africa: A summary report, based on 53 country surveys, Enquête sur les TIC et l’Éducation en Afrique. Washington DC : infoDev / World Bank., (2007)
[56] Felouzis, G., La Condition Etudiante. Sociologie des étudiants et de l'Université Collection Sociologie d’Aujourd’hui. Presses Universitaires de France, (2001). 
[57] Field, A, Discovering Statistics Using SPSS (2nd ed.). Thousand Oaks, CA: Sage Publications, (2005).
[58] Figari, G, L’évaluation des dispositifs Educatifs. Mesure et Evaluation en Education, 31(3) (2008) 77-93.
[59] Fointiat, V., Girandola, F., & Gosling, P., La Dissonance cognitive. Quand les actes changent les idées,  Paris : Armand Colin., (2013).
[60] Fortin, M. F., Fondements et étapes du processus de recherche : Méthodes quantitatives et qualitatives (2ème éd.)”. Montréal, Canada : Chenelière Éducation., (2010).
[61] Gaudin, C., Tribet, H., & Chaliès, S., Analyse de l’activité d’enseignants novices dans un dispositif de formation professionnelle par alternance exploitant la vidéo : de l’observation vidéo à la pratique de classe. Congrès de l’Actualité de la recherche en éducation et en formation (AREF). Université de Montpellier :  (2013) 27-30 août.
[62] Gerard, F.-M., Hugonnier, B. & Varin, S., Mesure de la qualité des systèmes éducatifs des pays de l'OCDE, in ADMEE-Europe, L'évaluation en éducation et en formation face aux transformations des sociétés contemporaines, Actes du colloque, Esch-sur-Alzette : Université de Luxembourg, (2018) 131-143.
[63] Gerbing D.W. and Anderson, J.C., Structural Equation Modeling in Practice: A Review and Recommended Two-Step Approach, Psychological Bulletin, 103 (1988) 411-423.
[64] Gohier, C., Éthique et formation : discussion sur les vertus ou vertus de la discussion? Formation et profession, 21(3) (2013) 70-80
[65] Gorsuch, R, Factor analysis,  Hillsdale, NJ : L. Erlbaum Associates, (1983).
[66] Grönroos, C., Service Quality: The six criteria of good perceived service,  Review of Business, 9(3) (1988) 10-13.
[67] Grunig, J. E., Introduction. Ethics problems as theories in public relations, Revue internationale Communication sociale et publique, (2014).
[68] Guilford, J. P.,  Psychometric Methods (2nd ed.). New York, NY: McGraw-Hill, (1954).
[69] Guttman, L., «A Note on Sir Cyril Burt's Factorial Analysis of Qualitative Data», British Journal of Statistical Psychology, 6 (1954) 21-4.
[70] Hagger, M. S., & Chatzisarantis, N. L., Integrating the theory of planned behaviour and self-determination theory in health behaviour: A meta-analysis, British Journal of Health Psychology, 14 (2009) 275-302.
[71] Hair, J., Black, W., Babin, B., Anderson, R., & Tatham, R. Multivariate data analysis (6th ed.), Upper Saddle River, N.J.: Pearson Prentice Hall., (2006).
[72] Hannon, V. et Peterson A., Thrive: Schools Reinvented for the real challenges we face, Innovation Unit Press, London., (2017).  
[73] Hejase, A. J., Al Kaakour, R. S., Halawi, L. A., & Hejase, H. J., Students' Perceptions of Student Evaluation of Teaching (SET) Process, International Journal of Social Sciences and Education, 3(3) (2013)
[74] Hendrickson, S., Martin, T., Manuel, J., Christopher, P., Thiedeman T., & Moyers, T. B., Assessing Reliability of the Motivational Interviewing Treatment Integrity Behavioral Coding System Under Limited RangeQ, Poster presented at the 27th Annual Convention of the Research Society on Alcoholism, Vancouver, BC, (2004).
[75] Hersan, C.,  Vade-mecum assurance qualité, Lavoisier Tec & Doc, 3e édition, , (1999) 254 
[76] Howat, G., Absher, J., Crilley, G., & Milne, I.,  Measuring customer service quality in sports and leisure centres. Managing Leisure, 1 (1996) 77-89.
[77] Jeffrey, D., Harvengt, D., Vachon, M.-C. et Deschesnes, G. Le droit et l’éthique dans la profession enseignante. Dans F. Jutras et C. Gohier (dir.), Repères pour l’éthique professionnelle des enseignants , (2008) 75-92. Québec, QC : Presses de l’Université du Québec.
[78] Jodoin M., Engagement et surengagement au travail : composantes psychologiques, antécédents potentiels et association avec le bien-être personnel. Thèse de doctorat inedited, Université de Montréal, Montréal, Canada, (2000).
[79] Jonnaert, P., Ettayebi, M., Defise R., Curriculum et Compétences. Un cadre opérationnel. Bruxelles : Editions De Boeck Université, Coll. « Perspectives en éducation & Formation ». , (2009).
[80] Jöreskog, K.G., & Sörbom, D., LISREL VI: Analysis of linear structural relationships by maximum likelihood, instrumental variables, and least squares methods, Mooresville, IN: Scientific Software.,  (1984).
[81] Joule, R-V. & Beauvois, J-L.,  Petit traité de manipulation à l'usage des honnêtes gens. Grenoble: Presses Universitaires de Grenoble, (2013).
[82] Juran, J., Quality planning and analysis., Maidenhead, uK: McGraw-hill, (1993).
[83] Karsenti, T., Komis, V., Depover, C., et Collin, S.,  Les TIC comme outils de recherche en sciences de l’éducation. Dans T. Karsenti et L. Savoie-Zajc (dir.), La recherche en éducation : étapes et approches , (2011) 168-192. SaintLaurent : ERPI.
[84] Kieffer, K.M., Orthogonal versus oblique factor rotation: A review of the literature regarding the pros and cons. Communication présentée dans le cadre du Annual Meeting of the Mid-South Educational Research Association, Nouvelle-Orléans, LA., (1998).
[85] Kim, D.  & Kim, S., QUESC: An instrument for Assessing the Service Quality of Sports Centers in Korea, Journal of Sport Management. 9(2) (1995) 208-220.
[86] Kolb D. A., The learning-style inventory: self-scoring inventory and interpretation booklet, Boston, Mass., McBer, and Company, (1985). 
[87] Lagrosen, S., Sayyed- Hashemi, R. & Leitner, M.,  Examination of the dimension of quality in higher education Quality Assurance in Education, 12(2) (2004) 61-69.
[88] Laveault, D. & Grégoire, J.  Introduction aux théories des tests en psychologie et en sciences de l'éducation,  Coll. Méthodes en sciences humaines, 3ème édition, De Boeck., (2014)
[89] Le Boterf, G.,  Développer et Mettre en œuvre la Compétence. Comment investir dans le Professionnalisme et les Compétences. Paris Ed. Eyrolles, (2018).
[90] Likert, R., « A Technique for the Measurement of Attitudes », Archives of Psychology, 140 (1932) 1-55.
[91] Maaroufi, F.,  Effets des TIC sur les pratiques pédagogiques dans un établissement d’enseignement supérieur marocain., (2016).
[92] Mastafi, M.,  Intégration et usages des TIC dans le système éducatif marocain : Attitudes des enseignants de l’enseignement primaire et secondaire. Revue Adjectif., (2013).
[93] Mayer, R. & Ouellet, F.,  Méthodologie de recherche pour les intervenants sociaux, Boucherville, Gaëtan Morin Éditeur, (1991) 537 .
[94] McGuire, W. J., Attitudes and attitude change. In G. Lindzey & E. Aronson (Eds.), The handbook of social psychology, 2 (1985)  233Ð346. New York: Random House
[95] Meignant, A., Manager la formation. Un nouveau souffle après la réforme de  ? L'ouvrage de référence des professionnels. Editions Liaisons, (2014).
[96] Morgan, d. l., Focus groups as qualitative research. Thousand oaks, CA: Sage, (1997).
[97] Morgan W.J., Ethics in sport, Champaign, Human Kinetics, (2007).
[98] Morin, E., Ethique, La méthode 6, Paris, Le Seuil,  (2004) 22-25.
[99] Moss, P., Section I: Theoretical examinations of quality: Making the narrative of a quality stutter, Early Education and Development, 16(4) (2005) 405-420.
[100] Mottier Lopez, L., Lenzen, B., Leutenegger, F., Ronveaux, C., Évaluation des enseignements de formations continues diplômantes : enjeux de reconnaissance et de collaboration entre les parties prenantes. Phronesis, (2018) 7.
[101] Narang, R.., How do management students perceive the quality of education in public institutions? Quality Assurance in Education, 20(4) (2012) 357-371.
[102] Naudet J.Y.,L’éthique de l’entreprise n’existe pas », Bulletin de L’ALEPS, (2011).
[103] Neuville, S. & Frenay, M.,  « La persévérance des étudiants de 1er baccalauréat à la lumière du modèle expectancy-value ». In C. Michaut & M. Romainville (dir.), Réussite, échec et abandon dans l’enseignement supérieur [sous presse]. Bruxelles : De Boeck., (2010).
[104] Newton, P., & Shaw, S., Validity in educational and psychological assessment, London: Sage.,(2014).
[105] Nunnally, Jum C., Psychometric Theory, New-York, NY, McGraw-Hill, (1978).
[106] Olson, M. A., et Kendrick, R. V., Origins of Attitudes. Dans D. W. Crano et R. Prislin (Dirs.) Attitudes and Attitude Change, (2008) 111-130. New York (NY, US): Taylor and Francis Group.
[107] O’Neill, M.; Palmer, A, Importance-performance analysis: a useful tool for directing continuous quality improvement in higher education,  Quality Assurance in Education. 12(1) (2004) 39-52.
[108] Paillé, P. & Mucchielli, A.,  L'analyse qualitative en sciences humaines et sociales, Paris, Armand Colin, 3ème éd, (2012).
[109] Papadimitriou, D. & Karteliotis, K., The Service Quality Expectations in Private Sport and Fitness Centers: A re-examination of the factor structure, Sports Marketing Quarterly. 9(3)  (2000)157-164.
[110] Parasuraman, A., Zeithaml, V.A. and Berry, L.L., A Conceptual Model of Service Quality and its Implications for Future Research, Journal of Marketing, 49 (1985) 41-50. 
[111] Parasuraman, A., Zeithaml, V.A. and Berry, L.L.,  SERVQUAL: a Multiple Item Scale for Measuring Consumer Perceptions of service quality, Journal of Retailing, 64(1) (1988) 12-40. 
[112] Parasuraman, A., Zeithaml, V.A. and Berry, L.L.,  Refinement and reassessment of the Servqual Scale, Journal of Retailing, 67(4) (1991) 420-50.
[113] Peeters, H., & charlier, P., Contributions à une théorie du dispositif. Hermès, 25 (1999)15-23.
[114] Pianta, RC, La Paro, K., Hamre, BK , Système de notation d'évaluation en classe (CLASS). Baltimore, MD : Brookes., (2008)
[115] Plano Clark, V. L., & Ivankova, N. V.,  Mixed methods research: A guide to the field. Thousand Oaks, CA: SAGE Publications., (2015).
[116] Poole, B., Quality, semantics, and the two cultures. Quality Assurance in education, 18(1) (2010) 6-18. 
[117] Postiaux, N., & Salcin, A. Au croisement de l'évaluation de l'enseignement et de l'évaluation de programme : les étudiants finissant évaluent leur apprentissage à partir d'un référentiel de compétences. In M. Romainville & C. Coggi (Eds.), L'évaluation de l'enseignement par les étudiants - Approches critiques et pratiques innovantes. Bruxelles : De Boeck Universités., (2009).
[118] Raby, C.,  Le processus d’intégration des technologies de l’information et de la communication. In T. Karsenti et F. Larose (dir.), L’intégration pédagogique des TIC dans le travail enseignant : recherches et pratiques ,  (2005) 79-95. Sainte-Foy, Québec : Presses de l’Université du Québec.
[119] Reckase, M. D., Multidimensional item response theory. Statistics for Social and Behavioral Sciences, Michigan, United States: Springer., (2009).
[120] Rege Colet, N.,  « L’évaluation de l’enseignement au cœur des processus d’assurance qualité : l’arbre qui cache la forêt », in M. Romainville & C. Coggi (dir.), L’évaluation de l’enseignement par les étudiants, Bruxelles : De Boeck, (2009)  235-254.Roegiers, X. & coll. (2010). Des curricula pour la formation professionnelle initiale. Bruxelles : De Boeck.
[121] Roegiers, Xavier.,  Quelles réformes pédagogiques pour l’enseignement supérieur ? Préface par Nicole Rege Colet. Collaborateurs : Mohamed Miled, Ioan Ratziu, Caroline Letor, Richard Etienne, Gaëlle Hubert, Mohamed Dali. Bruxelles, Ed. De Boeck, (2012)313 . 
[122] Rondeau, D.,  « La délibération éthique, un outil pour la démocratie scolaire », Le point en administration scolaire, (2003) 18-19.
[123] Roussel, P.,  Méthodes de développement d’échelles pour questionnaires d’enquête, In P. Roussel et F. Wacheux, Management des Ressources Humaines : Méthodes de Recherche en Sciences Humaines et Sociales, Bruxelles : De Boeck, Chapitre,  9 (2005) 245-276.
[124] Rust, R. T., & Oliver, R. L., Service Quality: Insights and managerial implications from the frontier In R. T. Rust & R. L. Oliver (Eds.), Service Quality: New directions in theory and practice, (1994) 1-19. Thousand Oaks, CA: Sage Publication.
[125] Satin, A., et Shastry, W.,  L’échantillonnage : un guide non mathématique. Ottawa : Statistique Canada, Ministère de l’Industrie, des Sciences et de la Technologie, (1993).
[126] Schiro, M.S.,  Curriculum Theory. Conflicting Visions and Enduring. London: Sage Publications, (2008).
[127] Silvia, E.S.M., & MacCallum, R.C.,  Some factors affect the success of specification searches in covariance structure modelling. Multivariate Behavioral Research, 23 (1988) 297-326.
[128] Simard, Y., L’efficacité de la formation à distance au niveau postsecondaire : une méga-analyse (Thèse de doctorat non publiée). Université Laval, Québec, (2018).
[129] Stake, R., & Schwandt, T.,  On discerning Quality in Evaluation. In I. F. Shaw, J. C. Greene, & M. M. Mark (eds), Handbook of Evaluation. London: sage, (2006)
[130] Steiger, J.H., Structural model evaluation and modification, Multivariate Behavioral Research, 25 (1990) 214-12.
[131] Stone, J., et Fernandez, N. C., How Behavior Shapes Attitudes. Cognitive Dissonance Processes. Dans D. W. Crano et R. Prislin (Dirs.), Attitudes and Attitude Chang, (2008) 313-334. New York (NY, US): Taylor and Francis Group.
[132] Tempus., Glossary of the terms related to quality assurance. Development of Quality Assurance System in Higher Education (QUASYS) Tempus Joint European Project, UM JEP16015-2001, (2001).
[133] Tessaro, W., Gerard. F.-M. & Giglio, M.,  Changements curriculaires : un levier pour les pratiques évaluatives des enseignants ? Evaluer, Journal international de Recherche en Education et Formation, 3(1-2) (2017)  51-60.
[134] Thode Jr., H.C., Testing for Normality, Marcel Dekker, New York., (2002).
[135] Thorndike, R. L., Educational Measurement (2nd ed.). Washington, DC: American Council on Education, (1971).
[136] Vaez, M. & Laflamme, L. Experienced stress, psychological symptoms, self-rated health, and academic achievement: a longitudinal study of a Swedish university student, Social behaviour and personality, 36(2) (2008) 183-195.
[137] Vinokur, A., La normalisation de l’université, in Gouverner par les standards et les indicateurs : De Hume aux rankings, (2013)  235-261, Bruxelles.
[138] Weisser, M.,  « Dispositif didactique ? Dispositif pédagogique ? Situations d’apprentissage ! », Questions Vives, 4(13) (2010).
[139] Wittorski, R., La professionnalisation en formation : textes fondamentaux. Mont-Saint-Aignan, France : Presses universitaires de Rouen et de Le Havre, (2016).
[140] Younes, N., L'évaluation de l'enseignement par les étudiants : le tournant du partage. Evaluer- Journal international de recherche en éducation et formation, 1 (2015) 79-90. 
[141] Zarifian P., Le modèle de compétence. Trajectoire historique, enjeux actuels et propositions. Malmaison: Éditions Liaisons, (2001).
[142] Zaslow, M., Anderson, R., Redd, Z., Wessel, J., Tarullo, L., & Burchinal, M., Quality, dosage, thresholds, and features in early childhood settings: A review of the literature, (OPRE 2011-5), (2010). 
[143] Zeithaml, Valarie A., Bitner, Mary Jo and Dwayne D. Gremler. Services Marketing. Integrating Customer Focus Across the Firm, 6th Edition, New York: McGraw-Hill Irwin, (2013).