Full-text resources of CEJSH and other databases are now available in the new Library of Science.
Visit https://bibliotekanauki.pl

Results found: 5

first rewind previous Page / 1 next fast forward last

Search results

help Sort By:

help Limit search:
first rewind previous Page / 1 next fast forward last
EN
In this article we present an outline of psychological model of evaluation and results of ratings analysis for 673 abstracts submitted to international conference and 323 grant proposals. In both cases one evaluator (reviewer) evaluated many proposals or abstracts, which allowed us to demonstrate individual evaluation style (for 18 grant proposals evaluators and 33 abstract reviewers), operationalized by leniency/severity level and degree of ratings differentiation. We showed as well relation between rank order and severity rating (first 15 abstracts were rated more severely than others). It is suggested that this relation can be explained by two alternative explanations: stabilization of implicit comparative standard and fatigue.
PL
W artykule przedstawiamy zarys psychologicznego modelu ewaluacji oraz wynik analizy ocen 673 abstraktów zgłoszonych na międzynarodową konferencję i 323 projektów badawczych. W obu przypadkach jeden ewaluator (recenzent) dokonywał oceny wielu projektów lub abstraktów, co pozwoliło na wykazanie wpływu indywidualnych stylów ewaluacji (dla 18 ewaluatorów projektów badawczych i 33 recenzentów abstraktów), operacjonalizowanych przez poziom łagodności/surowości i stopień różnicowania ocen. Pokazano także związek kolejności oceniania z surowością ocen (pierwsze 15 abstraktów ocenianych było surowiej niż reszta), co zinterpretowano za pomocą dwóch alternatywnych wyjaśnień: stabilizacji utajonego wzorca porównawczego oraz zmęczenia.
PL
W niniejszym tekście omawiamy 10 pułapek analiz danych w naukach o zarządzaniu: (1) zbyt mała liczba badań doświadczalnych; (2) ignorowanie specyfiki przedmiotu badań; (3) brak standardowych operacjonalizacji; (4) słabość pomiaru; (5) słabość analiz danych; (6) zbyt wysoki poziom ogólności teorii i zbyt mała liczba replikacji; (7) błędna interpretacja wyników analiz statystycznych; (8) oczekiwania recenzentów dotyczące doboru próby i testowania hipotez; (9) brak „czasu” na liście predyktorów; (10) niewłaściwe standardy publikacji. Większość z tych zjawisk odnosi się również do badań psychologicznych i socjologicznych.
EN
This essay-like text discusses 10 pitfalls in the analysis of data in management science: (1) Too small a number of experimental studies; (2) Ignoring the specifics of the research object; (3) Lack of standard operationalizations; (4) Weakness of measurement ; (5) Weakness of data analyses; (6) Too high a level of generality of theory and too few replications; (7) Misinterpretation of the outcomes of statistical analyses; (8) Reviewers’ expectation regarding the samples and hypotheses testing; (9) Missing “time” in the list of predictors; (10) Wrong standards of publication. Most of these risks apply also to psychological and sociological research.
EN
Consequences of using different types of rating scales
PL
Extreme Response Style (Skrajny Styl Odpowiadania), definiowany jako skłonność do konsekwentnego korzystania (albo unikania) z krańcowych odpowiedzi w kwestionariuszach (Clark, 2000), jest jednym z najczęściej badanych stylów odpowiadania. Uważa się, że może on zniekształcać wyniki analiz, szczególnie w badaniach międzykulturowych (Cheung i Rensvold, 2000). Wyniki badań nad związkiem ERS z innymi zmiennymi (np. płcią, wiekiem) również są niejednoznaczne. W celu sprawdzenia wpływu ERS, wykorzystując dane z World Value Survey, zreplikowaliśmy kilka analiz, dołączając do nich wskaźnik ERS. W przypadku, gdy wskaźnik ERS nie był skorelowany ze zmienną zależną, nie wpływał on na wyniki. W następnym kroku przeprowadziliśmy symulacje mające na celu określenie sytuacji, w których ERS mógłby istotnie wpływać na relacje pomiędzy zmiennymi. Uważamy, że nawet w przypadku korelacji mierzonych na skalach przedziałowych wykorzystywanych np. w analizie regresji metodą najmniejszych kwadratów, efekt ten jest zaniedbywalny.
EN
Extreme Response Style, defined as the tendency to consistently use (or avoid) the extreme ends of response scales in questionnaires with a multiple response category format (Clark, 2000), is one of the most studied response styles. The reason for this is its potential to distort survey results, especially in cross-cultural research (Cheung & Rensvold, 2000). Furthermore, the relationships between ERS and most frequently analyzed socio-demographic variables (such as gender, age, education) are inconclusive. We replicated a number of well-established effects, using data from the World Value Survey, and expanded these analyses by including an ERS index, to determine its possible effect on the original results. We found no significant effects of ERS in any of the replicated studies, as long as the ERS index is uncorrelated with the dependent variable. We followed with a theoretical model and a recount of simulation results in an attempt to define boundaries for the phenomenon of ERS significantly affecting research conclusions. We argue that even for interval-level correlation measures, e.g. as used in the ordinary least squares regression analysis, the effect on real data is negligible.
first rewind previous Page / 1 next fast forward last
JavaScript is turned off in your web browser. Turn it on to take full advantage of this site, then refresh the page.