Lifelong Learn. 2018, 8, 25-47

https://doi.org/10.11118/lifele2018080325

Quality of Study Programs Assessment: Validation, Possibilities and Limits of the Questionnaire for Students and Graduates

Ilona Kočvarová, Jan Kalenda

Univerzita Tomáše Bati ve Zlíně, Fakulta humanitních studií, Centrum výzkumu, Štefánikova 5670, 760 01 Zlín, Czech Republic

Received December 10, 2018
Accepted January 15, 2019

References

1. Adamec, P. (2018). Editorial. Lifelong Learning – Celoživotní vzdělávání. Monotematické číslo „Kvalita ve vzdělávání“, 8(2), 5–7.
2. Ali, F., Zhou, Y., Hussain, K., Nair, P. K., & Ragavan, N. A. (2016). Does higher education service quality effect student satisfaction, image and loyalty? A study of international students in Malaysian public universities. Quality Assurance in Education, 24(1), 70–94. <https://doi.org/10.1108/QAE-02-2014-0008>
3. Alves, H., & Raposo, M. (2007). Conceptual model of student satisfaction in higher education. Total Quality Management, 18(5), 571–588. <https://doi.org/10.1080/14783360601074315>
4. Álvarez, R. V., Freira, D., Vernazza, E., & Alves, H. (2016). Can students’ satisfaction indexes be applied the same way in different countries? International Review of Public Nonprofit Market, 13(1), 101–118. <https://doi.org/10.1007/s12208-016-0155-x>
5. Benton, S. L., & Cashin, W. E. (2011). Student ratings of teaching: A summary of research and literature. IDEA Cetner, Kansas University. Dostupné z: http://www.ideaedu.org/Portals/0/Uploads/Documents/IDEA%20Papers/IDEA%20Papers/PaperIDEA_66.pdf
6. Benton, S. L., & Li., D. (2015). Response to a Better Way to Evaluate Undergraduate Teaching. IDEA Cetner, Kansas University: Dostupné z: https://www.ideaedu.org/Portals/0/Uploads/Documents/A_Better_Way_to_Evaluate.pdf
7. Berk, R. A. (2005). Top 20 strategies to increase the online response rates of student rating scales. International Journal of Technology in Teaching and Learning, 8(2), 98–107.
8. Berk, R. A (2012). Top 10 flashpoints in student ratings and the evaluation of teaching: What faculty administrators must know to protect themselves employment decisions. Sterling, Virginia: Stylus.
9. Blackmore, J. (2009). Academic pedagogies, quality logics and performative universities: Evaluating teaching and what students want. Studies in Higher Education, 34(8), 857–872. <https://doi.org/10.1080/03075070902898664>
10. Byers, T., Imms, W, Hartnell-Young, E. (2018). Comparative analysis of the impact of traditional versus innovative learning environment on students attitudes and learning outcomes. Studies in Educational Evaluation, 58(1), 167–177. <https://doi.org/10.1016/j.stueduc.2018.07.003>
11. Burgess, A., Senior, C., & Moores, E. (2018). A 10-year case study on the changing determinants of university student satisfaction in the UK. PLoS ONE, 13(2), e0192976. <https://doi.org/10.1371/journal.pone.0192976>
12. Callendar, C., Ramsden, P., & Griggs, J. (2014). Review of the National Student Survey: HEFCE. Dostupné z: http://www.hefce.ac.uk/pubs/rereports/year/2014/nssreview/
13. Cashin, W. E. (2003). Evaluating college and university teaching: Reflections of a practitioner. In Smart, J. C. (Ed.), Higher education: Handbook of theory and research (s. 531–593). Dordrecht, The Netherlands: Kluwer Academic Publishers.
14. Cheng, J. H. S., & Marsh, H. W. (2010). National Student Survey: Are differences between universities and courses reliable and meaningful? Oxford Review of Education, 36(6), 693–712. <https://doi.org/10.1080/03054985.2010.491179>
15. Douglas, J., Douglas, A., & Barens, B. (2006). Measuring student satisfaction at a UK university. Quality Assurance in Education, 14(3), 251–267. <https://doi.org/10.1108/09684880610678568>
16. Douglas, J. A., Douglas, A., McClelland, R., & Davies, J. (2014). Understanding student satisfaction and dissatisfaction: An interpretative study in the UK higher education context. Studies in Higher Education, 39(1), 251–267.
17. Eurostat (2018). Unemployment of Tertiary Education Students. Dostupné z: https://ec.europa.eu/eurostat/data/database
18. Finney, T. G., & Finney, R. Z. (2010). Are students their universities’ customers? An exploratory study. Education + Training, 52(4), 276–291. <https://doi.org/10.1108/00400911011050954>
19. Fučík, P., & Slepičková, L. (2014). Studenti, kteří odcházejí: Kvantitativní analýza nedokončených vysokoškolských studií. AULA, 22(1), 24–54.
20. Furr, R. M. (2018). Psychometrics: An introduction. Third edition. Los Angeles: SAGE.
21. Green, H. J., Hood, M., & Neumann, D. L. (2015). Predictors of Student Satisfaction with University Psychology Courses: A Review. Psychology Learning & Teaching, 14(2), 131–146. <https://doi.org/10.1177/1475725715590959>
22. Gruber, T., Fuß, S., Vosss, R., & Zikuda, M. G. (2010). Examining student satisfaction with higher education services: Using a new measurement tool. International Journal of Public Sector Management, 23(2), 105–123. <https://doi.org/10.1108/09513551011022474>
23. Chvátalová, A., Kohoutek, J., & Šebková, H. (Eds.) (2008). Zajišťování kvality v českém školství. Plzeň: Vydavatelství a nakladatelství Aleš Čeněk.
24. Jemelske, E. (2009). Measuring the impact of a university first-year experience program on student GPA and retention. Higher Education, 57(3), 373–391. <https://doi.org/10.1007/s10734-008-9161-1>
25. Jongbloed, B., Enders, J., & Salerno, C. (2008). Higher education and its communities: Interconnections, interdependencies and a research agenda. Higher Education, 56(3), 303–324. <https://doi.org/10.1007/s10734-008-9128-2>
26. Joseph, M., Yakhou, M., & Stone, G. (2005). An educational institution’s quest for service quality: Customers’ perspective. Quality Assurance in Education, 13(1), 66–82. <https://doi.org/10.1108/09684880510578669>
27. Karagiannopoulou, E., & Christodulides, P. (2005). The impact of Greek University Students’ perceptions of their learning environment on approaches to studying and academic outcomes. International Journal of Educational Research, 43(6), 329–350. <https://doi.org/10.1016/j.ijer.2006.05.002>
28. Keller, J., & Tvrdý, L. (2008). Vzdělanostní společnost? Chrám, výtah a pojišťovna. Praha: SLON.
29. Kohoutek, J. (2014a). European standards for quality assurance and institutional practices of student assessment in the UK, the Netherlands and the Czech Republic. Assessment & Evaluation in Higher Education, 2014, 39(3), 310–325. <https://doi.org/10.1080/02602938.2013.830694>
30. Kohoutek, J. (2014b). Analysing instrument mixes in quality assurance: The Czech and Slovak accreditation commissions in the era of mass higher education. Quality in Higher Education, 20(1), 83–102. <https://doi.org/10.1080/13538322.2014.890773>
31. Koucký, J. (2009). Kolik máme vysokoškoláků? Expanze terciárního vzdělávání v ČR ve vývojovém a srovnávacím pohledu. Aula, 17(1), 5–19.
32. Koucký, J., & Zelenka, M. (2013). Kontext a důsledky vzdělávací expanze. Proměny českého školství, úrovně vzdělávání, sociálních nerovností, gramotnosti a uplatnění absolventů. In Straková, J., & Veselý, A. (Eds.). Předpokaldy úspěchu v práci a životě. Výsledky mezinárodního výzkumu dospělých OECD PIAAC (s. 195–222). Praha: Dům zahraniční spolupráce.
33. Lin, K.-J., Chen, H.-M., Chen, H.-M., & Chang, Y.-S. (2017). The effect of TQM strategy on learning satisfaction and loyalty of students – the mediation effect of teaching quality. World Transactions on Engineering and Technology Education, 15(1), 49–56.
34. Linková, M., & Stöckelová, T. (2012). Public accountability and the politicization of science: The peculiar journey of Czech research assesment. Science and Public Policy, 39(5), 398–409. <https://doi.org/10.1093/scipol/scs039>
35. Liu, L., Wang, Y.-S., Wu, T.-J. (2017). Student Satisfaction Scale Development and Application for Sport Management in China. Euroasia Journal of Mathematics Science and Technology Education, 13(5), 1429–1444.
36. McCune, V., & Enwistle, N. (2011). Cultivating the disposition to understand in 21st century university education. Learning and Individual Difference, 21(3), 303–310. <https://doi.org/10.1016/j.lindif.2010.11.017>
37. Mertens, D. M. (2010). Research and Evaluation in Education and Psychology: Integrating Diversity with Quantitative, Qualitative, and Mixed Methods. London: SAGE Publications.
38. MUNI (2017). Zpráva o vnitřním hodnocení kvality vzdělávací, tvůrčí a s nimi souvisejících činností Masarykovy univerzity. Brno: MUNI. Dostupné z: https://www.muni.cz/do/rect/metodika/rozvoj/kvalita/ia/zovnh/Zprava_o_vnitrnim_hodnoceni_MU_final.pdf?lang=cs
39. Muijs, D., & Bokhove, Ch. (2017). Postgraduate student satisfaction: A multilevel analysis of PTES data. British Educational Research Journal, 43(5), 904–930. <https://doi.org/10.1002/berj.3294>
40. NAÚ (2017). Metodické materiály pro přípravu žádosti a akreditaci studijního programu. Praha: Národní akreditační úřad. Dostupné z: https://www.nauvs.cz/index.php/cs/metodiky
41. NV (2016). Nařízení vlády ze dne 24. srpna 2016 o standardech pro akreditace ve vysokém školství. Praha: Vláda ČR.
42. NOKUT (2017). Previous questionnaires. Dostupné z: https://www.nokut.no/en/studiebarometeret/previous-questionnaires/
43. Pabián, P. (2008), Od elitního přes masové k univerzálnímu terciárnímu vzdělávání: Koncepce Martina Trowa. Aula, 16(2), 31–40.
44. Pascarella, E. T., & Terenzini, P. T. (2005). How college affects students: A third decade of research. San Francisco: John Wiley & Sons.
45. Peter, A. M. (1997). Quality in European higher education: Recent trend and their historical roots. European Journal of Education, 32(2), 111–127.
46. Perry, R. P., & Smart, J. C. (Eds.) (2007). The Scholarship of teaching and learning in higher education: An evidence-based perspective. Dordrecht, The Netherlands: Springer.
47. Prudký, L., Pabián, P., & Šíma, K. (2010). České vysoké školství na cestě od elitního k univerzálnímu vzdělávání 1989–2009. Praha: Grada Publishing.
48. RR VŠ (2018). Rámec rozvoje vysoké školství do roku 2020. Praha: MŠMT. Dostupné z: http://www.vzdelavani2020.cz/
49. Richardson, J. T. (2005). Instruments for obtaining student feedback: A review of literature. Assesment and Evaluation in Higher Education, 30(4), 387–415. <https://doi.org/10.1080/02602930500099193>
50. Ryška, R., & Zelenka, M. (2011). Absolventi vysokých škol: Hodnocení vzdělávání, uplatnění na trhu práce kompetence. Praha: Středisko vzdělávací politiky.
51. Sabri, D. (2010). Student Evaluations of Teaching as ‘Fact-Totems՚: The Case of the UK National Student Survey. Sociological Research Online, 18(4), 15.
52. Seldin, P. (Ed.) (1999). Changing practices in evaluationg teaching: A practical guide to improved fakulty performance and promotion/decisions. Bolton, Massachusetts: Anker.
53. Strathern, M. (Ed.) (2000). Audit cultures: Anthropological studies in accountability, ethics and the academic. London – New York: Routledge.
54. Šíma, K. (2017). Evidence in Czech research evaluation policy: Measured and contested. Evidence & Policy: A Journal of Research, Debate and Practice, 13(1), 81–95. <https://doi.org/10.1332/174426415X14467432784664>
55. Šima, K. & Pabián, P. (2013). Ztracený Humboltův ráj: Ideologie jednoty a výzkumu a výuky ve vysokém školství. Praha: SLON.
56. Šebková, H., Beneš, J., & Roskovec, V. (2013). Využití evropských standardů pro zajištění kvality na českých vysokých školách. Praha: Centrum pro studium vysokého školství, v nakladatelství Vyšehrad.
57. UHK (2017). Zpráva o vnitřním hodnocení kvality vzdělávací, tvůrčí a s nimi souvisejících činností na UHK. Dostupné z: file:///C:/Users/Ilona/Desktop/Zpr%C3%A1va_o_vnit%C5%99n%C3%ADm_hodnocen%C3%AD_UHK.pdf
58. UPOL (2017). Zpráva o vnitřním hodnocení kvality vzdělávací, tvůrčí a s nimi souvisejících činností Univerzity Palackého v Olomouci. Dostupné z: https://www.upol.cz/fileadmin/userdata/UP/uredni-deska/zakladni_dokumenty/zprava_hodnoceni_kvality-15_12_2017.pdf
59. Urbánek, T., Denglerová, D., & Širůček, J. (2011). Psychometrika: Měření v psychologii. Praha: Portál.
60. Utriainen, J., Tynjälä, P., Kallio, E., & Marttunen, M. (2018). Validation of modified of the experience of teaching and learning questionnaire. Studies in Educational Evaluation, 56(1), 133–143. <https://doi.org/10.1016/j.stueduc.2017.12.007>
61. Vila, L., Perez, P., & Morillas, F. (2012). Higher Education and the development of competencies for innovation in the workplace. Management Decision, 50(9), 1634–1648. <https://doi.org/10.1108/00251741211266723>
62. Virtanen, A., & Tynjälä, P. (2018). Factors explaining the learning of generic skills: A study of university students’ experiences, Teaching in Higher Education. Dostupné z: <https://doi.org/10.1080/13562517.2018.1515195>
63. Vlk, A., Drbohlav, J., Fliegl, T., Hulík, V., Stiburk, Š., & Švec, V. (2017). Studijní neúspěšnost na vysokých školách. Teoretická východiska, empirické poznatky a doporučení. Praha: SLON.
64. VŠ zákon (2016). Novela zákona č. 111/1998 Sb., o vysokých školách a o změně a doplnění dalších zákonů, platná od 1. 9. 2016. Praha: Vláda ČR.
65. Yorke, M., Orr, S. & Blair, B. (2014). Hit by a perfect storm? Art & Design in the National Student Survey. Studies in Higher Education, 39(10), 178–810. <https://doi.org/10.1080/03075079.2013.806465>
front cover

ISSN 1804-526X (Print) ISSN 1805-8868 (Online)

Archive