Зерттеуді өлшеу жолдары

The source text is taken from here: https://www.cs.purdue.edu/homes/dec/essay.research.measure.html

Дуглас Е. Комер/Douglas E. Comer 

Жас компьютерлік ғалымдарға зерттеу нәтижелерін шығару қажеттігі туралы айтылғанымен, нақты талаптар анықталмайды. Оның орнына, зерттеушілер әдетте «маңызды» немесе «жоғары сапалы жарияланымдарға» ие болу үшін қандай да бір нәрсені түсінбейтін нәрсеге қол жеткізу үшін белгісіз көтермелейді.

Кіші ғылыми қызметкерге аға адамдар арасында жасырын ойлар бар – олар зерттеулерді бағалаудың кейбір құпия тәсілдері бар, бірақ оны ашқысы келмейді. Өйткені, біреу «білімді жинақтау дегенді білдіреді» немесе «ақылды» деген сияқты: «анықтау қиын, бірақ мен оны жақсы көргенде жақсы зерттеуді білемін» деген сияқты немқұрайсыз мәлімдеме естіледі.

Кіші қызметкердің зерттеуді қалай өлшеуге болатынын нақты түсіндіре алмауының себебі – ешқандай түсініктеме жоқ. Оның орнына, әртүрлі шаралар бар – әрбір топ өз мақсаттарын барынша арттыратын шараларды қолданады. Шынында да, біреу біреудің пайдасына немесе қарсы тұруын қалайды, олар көмектесетін шараны таңдайды.

Егер Сіз кіші ғылыми қызметкер болсаңыз, бұл нұсқаулық сізге арналған. Онда шаралар бар, олардың әрқайсысын түсіндіреді және нақты фактілерді береді. Тізімді біле отырып, зерттеу туралы сөйлескенде және соққылардан аулақ болуға көмектесетін кезде басқаларға әсер етесіз.

Журналдың қағаз бетіне көзқарасы

(журнал басқыштарының артықшылығы)

Өлшем: N, жарияланған жұмыстардың жалпы саны.
Ақылдасу: Жаңа идеяны шығаратын зерттеуші қағазды жазады, ол кейіннен құрдастарымен қаралады және кейіннен мұрағат журналында жарияланады. Осылайша, қағаздардың саны өнімділіктің өлшемі болып табылады.
Нақты фактілер: Жариялау стандарттары кеңінен өзгереді, кейбір конференциялар мен журналдар барлық ұсыныстарды қабылдайды, ал кейбіреулері тек бірнеше адамды қабылдайды. Ең маңыздысы, барлық зерттеулердің пайдасыздығы; ешкім шынымен де қағазды оқи алмайды. (Орташа алғанда, зерттеудің орташа есеппен 5 адам оқыды, олардың саны мыңдаған оқырмандардың қағаздарымен жоғары көтерілді).
Ескертулер: Олар басқаша мәлімдеме жасағанымен, қызмет көрсету жөніндегі комитеттер осы шараны қолданады, себебі олардың жұмысын бағалаудан гөрі құжаттарды санау оңайырақ. Сұр шашты адамдар бұл шараны әсіресе ұнататынын ескере отырып, олар жеңіске жету арқылы жеңіске жетеді – олардың N-нің жеке құндылығы жас зерттеушілерден әлдеқайда жоғары. Бұл шараны пайдаланған кезде, автордың авторлары туралы мақтанбаңыз, себебі қағазда бірнеше авторлар болғанда кредит азаяды.

Жариялау тәсілі

(жас зерттеушілердің қолайлығы)

Өлшем: N/T, жарияланымдардың жарияланымдары жарияланған уақытқа қатынасы.
Ақылдасу: Қағаз саны жеткіліксіз, себебі ол өнімділікті өлшейді – егер зерттеуші бір жылда 10 қағаз шығарса, олар өте өнімді, бірақ олар өмір бойы 10 қағаз шығарса, олар өте нәтижелі емес.
Нақты фактілер: зерттеушінің жариялау жылдамдығы уақыт өте өзгереді; нақты шыңдар жеке адам көтерілу үшін қарастырылғанға дейін жүреді және зейнеткерлікке шыққанға дейінгі кезеңде бұл көрсеткіш әдеттегідей күрт өзгереді. Осылайша, зерттеуші ғасырлар бойы олар N/T туралы сөйлесуді тоқтатады және өлшеуді қайтарады. Назар аударыңыз: Тұрғын үй комитеттері бұл шараны келтіргендердің бәріне абай. Бұдан басқа, шынайы болыңыз – сұр шашты, кәрі жігіттер сізден жоғары бағамға ие бола алмайды, олар өздері төмендетілген тарифке тап болады.

Салалық жариялау тәсілі

(аккредиттеу агенттіктерінің таңдауы бойынша)

Өлшем: W, жарияланған қағаздарға тағайындалған салмақтардың сомасы.
Ақылдасқан сөздер: Кейбір құжаттар басқа адамдарға қарағанда интеллектуалды жетістікке ие болғандықтан, әр қағазға оның сапасына пропорционалды салмақ қою керек. Құжаттарды санаудың орнына, салмақтардың сомасы пайдаланылуы керек. Мысалы, зерттеуге жатпайтын құжаттарды нөлдік немесе жақын нөлдік салмақпен тағайындауға болады.
Нақты фактілер: Әрбір жеке есепті бағалаудың орнына, бұл әдісті қолданатын адамдар әр журналға өзінің беделіне сәйкес салмақты тағайындайды және журналда пайда болатын кез-келген қағаз үшін мәнді пайдаланады. Әрине, журналдың мәртебесі уақыт өте келе өзгеріп отырады, және барлық қағаздар бірыңғай сапа болатын журналы сияқты нәрсе жоқ, бірақ бұл маңызды емес көрінеді. Шарадағы сұлулық, көптеген басылымды ескере отырып, тізімнің жақсы немесе жаман көрінуі үшін салмақты таңдай алады.
Ескерту: Бұл шараны талқылағанда, салмақты таңдау ерікті болып табылады және жеке адам өз таңдауларын негіздеу үшін дәлелдемелер ұсынуы мүмкін болса да, әркім әрқайсысы жеке басылымдар тізімін жоғары деңгейде беретін салмақ жиынтығын қолдайтын сияқты.

Миллиондаған маймылдық тәсіл

(үкіметтік агенттіктердің артықшылықтары)

Өлшем: G, зерттеуге бөлінген салық төлеушінің жалпы сомасы.
Ақылдасу: Ұзақ уақытты ескере отырып, пернетақтада кездестіретін зерттеушілердің кездейсоқ жиынтығы, ақырында елге пайда болатын нәрсе туралы қағазды жазады. Көптеген зерттеушілерді көбірек құжаттарды шығаруды ынталандыру үшін, үкімет ұсыныстар жинайды және «жақсы» деп ақша береді.Әлбетте, көбірек ақша беру, елге пайда әкелетін көп қағаздарды ынталандырады.
Нақты фактілер: Грант жүйесі лотереяға ұлттық пайдадан гөрі жақындайды. Үкіметтік органдар көбінесе саяси күн тәртібін ұстануды көздейді, бұл грант алу ықтималдығы мекеменің мөлшері, географиялық орналасуы, нәсілі және жынысы сияқты факторларға байланысты болуы мүмкін дегенді білдіреді. төтенше жағдайда, өтініш беруші грантқа іріктеліп алынғандарын ескертетін хаттарға ие болады, бірақ олардың ұсынысын қайта қарау қажет, себебі ғылыми мазмұнды қабылдау мүмкін емес.
Ескерту: Өзіңізді бір жаққа қабылдамаңыз, немесе біреуі – мемлекеттік субсидиямен марапаттау міндетті емес, сізде жақсы идея бар дегенді білдірмейді және мемлекеттік субсидияны беруден бас тарту идеяның пайдасыз екенін білдіреді.

Тікелей қаржыландыру көзқарас

(бөлім басшылары қолдайтындар)

Өлшем: D, зерттеуші сатып алған гранттық қаражаттың жалпы сомасы.
Зерттеу: Зерттеу үшін грант алған зерттеушілер жақсы идеяларға ие болуы тиіс (немесе беру агенттігі ақшаны бермеді). Осылайша, көп ақша көбірек идеяларды білдіреді.
Нақты фактілер: Кафедра меңгерушілері декандар мен бөлім басшыларын басқа мекемелерде таңдандырып қана қоймайды – олар өз бөлімінің барлық мүшелерімен әкелінген грант қаражатының жалпы сомасын мақтан тұтады. Өкінішке орай, жинақталуы мүмкін грант қаражатының мөлшері ұсынылған зерттеулер сапасына қарағанда қол жетімді мөлшерге байланысты. Үкімет олардың ақшалары толған кезде көп нәрсені бөледі (немесе мұны кейбір саяси артықшылығы бар); Өнеркәсіптің пайдасы жоғары болған кезде әлдеқайда көп (немесе салықты есептен шығара алады).
Ескерту: Тағы да, гранттарға тым көп оқымаңыз – қандай да бір адам айтпаса да, сіз алатын ақшаның сомасы (аз немесе көп) әрқашан сіздің идеяларыңыздың сапасына сәйкес келмейді.

Жанама қаржыландыру көзқарас

(университет әкімшіліктерінің таңдауы бойынша)

Өлшем: O, жалпы үстеме АҚШ доллары.
Зерттеу: Егер зерттеуші мемлекеттік жәрдем ақшасының N долларына ие болса, оның 1/3 бөлігі кеңсе, электр энергиясы және есепшоттар сияқты нәрселерді төлейтін «жанама шығындар» немесе «% грант бойынша шығыстар. Тасымалдау – зерттеушінің мекемеге қанша рет әкелгені.
Нақты фактілер: Кеңсе кеңістігі гранттармен немесе онсыз қажет, ал үлкен зерттеу институттары қазірдің өзінде бухгалтерлік рәсімдер мен жүйелерді өзінде бар. Осылайша, жанама шығындар мекеменің ғылыми гранттардан ақшаны алып тастауға мүмкіндік береді.
Ескерту: Жабдықты гранттар жанама шығындардан босатылады, сондықтан үлкен жабдықтарды беру туралы әкімгерге мақтанбаңыз – олар таңданбайды. Сондай-ақ, жанама шығындар ақшаны жұмсаған кезде емес, марапатталған кезде жасалады. Осылайша, сіз желтоқсан айында емес, қаңтарда грант ақшасын жұмсайтын болсаңыз, онда үстеме жаңа жылға емес, ескі емес.

Төменгі сызықтық тәсіл

(өнеркәсіптік зерттеу зертханаларының артықшылықтары)

Өлшем: P, патенттер немесе зерттеулер нәтижесінде пайда болатын өнімдер арқылы пайда.
Зерттеу: Өнеркәсіп бизнестің пайдасына пайда табу үшін зерттеу зертханасын жасайды, тек артық пайда табудың тәсілі ретінде емес. Осылайша, индустриалды әлемде зерттеуді төменгі сызыққа қалай көмектесетіні бойынша өлшеуге болады.
Нақты фактілер: Компанияның пайдасына дерлік ешбір зерттеу нақты әсер етпейді. Тіпті ғылыми-зерттеу идеясы, ақыр соңында, өнімге жол ашса да, пайда болатын табыс негізгі идеяның сапасына қарағанда маркетингке қарағанда әлдеқайда көп (өнім сапасы мен пайда арасындағы кері байланыстың кейбір дәлелі бар).
Ескерту: Табыс – бұл зерттеудің сапалы түрлерінің бірі, себебі ақымақ немесе тривиальды идеялар көп пайда әкеледі; идеяны ешқандай ғылыми құндылыққа ие емес деп ойлаған жоқпыз, себебі ол ақша жасайды және басқалай болмаса, басқаша қабылдамайды.

Импульсті бағалаудың бағасы

(бірдеңеге қол жеткізген бірнеше зерттеушілердің артықшылығы)

Өлшем: I/R, жұмысты оның генерациялау үшін қолданылатын ресурстардың мөлшеріне қатынасы.
Зерттеу: Бұл саладағы зерттеудің «әсері» жалпы құндылықты жақсы бағалауға мүмкіндік береді, мысалы: жұмыс басқаларға да әсер етті ме, немесе жұмыс туралы айтылып, пайдаланылды ма? демалыс күндері жұмыс істейтін жеке тұлғамен жүргізілген зерттеулерге он миллион доллар шығын келтіретін жабдықты пайдаланатын жиырма төрт зерттеуші топпен жүргізілген зерттеуді салыстыру мүмкін емес, сондықтан әділ баға беруге, ресурстарға әсер ету.
Нақты фактілер: әсер ету және ресурстарды өлшеу қиын. Ең бастысы, «үлкен ғылым» көбінесе көп әсер етеді, себебі ол көп жариялылық тудырады.
Ескерту: Бұл шара ең әділ болса да, бұл популярлы емес. Әкімшілері бұл шараны ұнатпайды, өйткені қаржыландырудың көлемі – олар баса назар аударғысы келетін тармақ – нақышта пайда болады, яғни осы гранттық қаражаттың аз мөлшеріне қол жеткізген зерттеуші осы шара бойынша жоғары баға алады! Зерттеушілердің көпшілігі бұл шараны ұнатпайды, себебі ол кіріс туралы деректерді баса атап көрсетеді – нақты нәтижелерге қол жеткізуге қарағанда, қаржыландыруды алу оңайырақ.

Қорытынды

Егер сіздің зерттеулеріңіз қолданыстағы шара бойынша жақсы болмаса, мүмкін, шараны өзгерту уақыты келді!