第六章 社會學領域之資料分析與詮釋
第四節 建議
由於人文社會學研究之特性及引文資料庫本身之限制,引文分析無法完全 適用於社會科學之評鑑,於前述實證研究中更可發現社會科學學者於被引次數 及同儕評鑑結果上的差異,故質的同儕評鑑方式在社會科學之學術評鑑上顯得 更加重要。雖然同儕評鑑在人力、時間及金錢上耗費甚大,但在學術評鑑目的 上能否更完整反映學術現況應是更重要的考量。評鑑學者研究成果本應完整考 量各面向的學術成就,因此為了配合研究成果及其研究活動之多元發展特性,
學術評鑑指標並不適合僅使用單一指標,而應進一步將學術與非學術、著作或 編輯、區域性、特別性、多元性等人文社會學特性一併納入考量,再整合各種 角度,讓量化數據更具有質的意義,以求更完整呈現人文社會學者研究成果之 面貌。
而針對人文社會科學學科之特性,本研究整理學術評鑑指標之考量建議如 下。
一、考慮人文社會學科領域之研究與使用特性,區分各種出版品的品質及重要 性權重配置
出版品在學術評鑑佔有最重要之地位,許多學者均建議應區分各種出版品 間的品質及重要性之差異,並以權重值之數值來具體表示當中之相對差距,使 其在客觀量化評鑑上,也能加入品質之考量。尤其在前述經濟學與社會學之引 用文獻分析實證中,可明顯發現經濟學領域偏重利用期刊文獻、社會學領域特 別重視圖書文獻,加以人文社會學科領域中由於其區域性、特別性、多元性等 研究特性,於設計出版品之分類及權重配置時,須有彈性考慮各學門出版品研 究品質之差異及使用習慣,使品質與重要性能透過權重值清楚呈現。
二、分類及權重值之概念亦可應用於非出版品之評鑑指標
由於上述分類及權重值配置之作法在細分不同出版品間的類型與品質差 異,但除出版品外,在人文社會學領域中,個人獎項、專業活動等其他非研究 出版品,亦可利用分類及權重值的機制配合評鑑標準,追求讓整個量化之制式 評鑑表,可以呈現更精細之品質差異。另一方面,在表現研究品質之分類系統 暨權重值之配置中,雖然已考量研究出版品、研究活動或個人學術象徵指標等 性質差異,在數量統計上加入品質或重要性之區分,但是對出版量較多或研究 活動活躍的學者而言,可能較容易有高的總分,故在研究品質之考量下,必須
再加上專家對學者個人整體表現或是最具代表性之重要著作進行品質之評鑑,
一起作為整體學術表現之依據,以符合前述多元指標之優點,並強調品質重於 數量之概念。
三、結合書目計量與同儕評鑑指標
由於學科專家最具評鑑特定學科研究出版品品質之能力,故理論上,專家 評鑑仍被認為是最理想的學術評鑑方式。但為減低同儕評鑑中專家本身之限制 及可能缺失,在選擇評鑑專家時,應特別注意專家之知識背景與被評鑑者研究 主題之吻合度,才能藉由專家對被評鑑主題之熟悉,發揮預期功效,且為了確 保評鑑專家能更清楚掌握被評鑑者及所屬次領域之現況,書目計量仍具有呈現 被評鑑者過去特定期間之部分研究表現情形之參考性。此外,從另一種角度來 看,由於人文社會學科之特性使然,僅以與引用有關之書目計量指標進行評鑑 會產生許多誤差,導致人文社會學者之評鑑對專家評鑑之需求性更高;但在人 文社會學科研究議題較具區域性,無太多一致性之理論及定論情形下,相對而 言,人文社會學者之間的觀點差異性會較大,亦即本身均具有較主觀的想法,
故為使學術評鑑結果更具客觀性,書目計量指標也有參考之必要性,簡言之,
兩者需互相配合,達相輔相成之效。
綜言之,為能符合人文社會科學之特性,同儕評鑑與書目計量指標必須並 重,無法僅直接套用書目計量指標進行評估,且因為學術評鑑結果有學門之獨 特性,各評鑑指標之比重須視各學門之特性而彈性調整。此外,針對學術評鑑 最重視的品質指標,利用分類及權重值的概念區分品質之間的差異,可兼具質 與量之考慮,尤其人文社會科學領域中專家評鑑之仰賴較高,而為減低專家評 鑑之可能主觀偏見,結合書目計量及慎選參與評鑑的專家均為提升人文社會學 者學術評鑑素質之方式。
參考書目
一、中文部分
(一) 期刊論文
吳玉山。「國內政治學期刊專業評比」。臺北市:中央研究院政治學研究所 籌備處,民國 92 年。國科會專題研究計畫成果報告,
NSC91-2414-H-001-028。
呂美霓。「大學競爭力指標之分析」。國立暨南國際大學教育政策與行政研究所,
碩士論文,民國 93 年。
張小虹。「學術國際在地化與學科差異」。人文與社會科學簡訊 5 卷 1 期(民 92 年 6 月):頁 13。
傅雅秀。「以同儕評審或科學計量的方法進行學術評估」。資訊傳播與圖書館學 6 卷 2 期 (民 88 年 12 月):頁 31。
黃慕萱。「書目計量與學術評鑑—國內七所研究型大學論文發表概況分析」。在 引文分析與學術評鑑研討會論文集,臺北市,民國 93 年 5 月 7 日,國立 政治大學圖書資訊與檔案學研究所編,頁 136-152。臺北市:國家圖書 館,2004。
劉益東。「問題譜系比較評議法—同行評議方法新探」。自然辯證法研究 14 卷 10 期 (民國 87 年):頁 31。
羅於陵、洪文琪、蔡旻樺。「以國際共通指標衡量台灣學術研究」。在引文分析 與學術評鑑研討會會議論文集,台北市,民國 93 年 5 月 7 日,國立政治 大學圖書資訊與檔案學研究所編,頁 159-161。台北市:國家圖書館,
民 93。
(二) 電子資源
任東來。「社會科學的雙重性」。北美行 58 期(2004 年 5 月)。
<http://www.usacn.com/bmx/bmx058/5803.htm>(2005 年 7 月 30 日)
朱淵壽。「學科分類與基礎研究的資助」。中國社會科學院通訊,2003 年 12 月 22 日。
<http://www.cass.cn/webnew/zhinengju/2_keyanju/show_News.asp?id=809
>(2005 年 7 月 30 日)。
李大正、張麗鵑、蔣東霖。「大學教育評鑑的實然與應然」。網路社會學通訊 期刊 23 期(民 91 年 5 月 15 日)。
<http://mail.nhu.edu.tw/~society/e-j/23/18.htm>(2004 年 9 月 22 日)。
高建平。「人文科學與社會科學」。中國社會科學院通訊。
<http://www.cass.net.cn/show_News.asp?id=883>(2005 年 7 月 30 日)。 黃世鑫。「經濟學:社會科學的女皇?杜鵑窩裏的真實」,反思台灣的(人文
及社會)高教學術評鑑研討會,台北市。民 93 年 9 月 25 日至 26 日。
<http://www.hss.nthu.edu.tw/~apcs/pages/act/2004-9-25-15-黃世鑫.doc>
(民 94 年 7 月 30 日)。
國立台灣大學圖書館。國立台灣大學圖書館。
<http://140.112.113.9/dbs/manual/JCR.htm>(2005 年 7 月 30 日)。
二、英文部分
(一) 圖書
Kruytbosch,CarlosE.“TheRoleand EffectivenessofPeerReview.”in The Evaluation of Scientific Research, ed. David Evered and Sara Harnett (Chichester, N. Y.: J. Wiley, 1989), 69.
M. Luwel, H.F. Moed, A. J. Nederhof, V. De Samblanx, K. Verbrugghen, L.J. van derWurff,“TowardsIndicatorsofResearch Performancein theSocial Sciences and Humanities:An Exploratory Study in the Fields of Law and Linguistics at Flemish Universities. CWTS,1999.
(二) 期刊論文
ksnes,Dag W.,and RandiElisabeth Taxt.“Peerreviewsand bibliometric indicators:
a comparative study at a Norwegian university,”Research Evaluation 13:1 (April 2004), 33-40
Andersen,Heine.“Influenceand Reputation in the SocialSciences–How Much Do Scientometrics 37:3 (1996): 475-481.
Burnhill, P. M., and M. E. Tubby-Hille.“On Measuring theRelation Between Social Science Research Activity and ResearchPublication.”Research Evaluation 4:3(1994): 130-152.cited by DianaHicks.”TheDifficulty ofAchieving Full Coverage of International Social Science Literature and the Bibliometric Consequences.”Scientometrics44:2 (1999):197.
Carotenuto, Gianfranco, Mariagloria Lapegna, Giuseppe Zollo, Alberto Di Donato, and Luigi Nicholais. “Evaluating Research Performance:theStrategy ofthe University ofNaplesFederico II(Italy).”HigherEducation Policy 14 (2001): 75-85.
Choi,Jin M.“Citation AnalysisofIntra-and Interdisciplinary Communication PatternsofAnthropology in theU.S.A..”Behavioral& SocialSciences Librarian 6:3/4 (1988): 72.
Colman,A.M.,DebraDhillon,and B.Coulthard.“A BibliometricEvaluation ofthe Research Performance of British University Politics Departments:
Publicationsin Leading Journals.”Scientometrics32:1 (1995):52.
Cronin,Blaise,and HerbertSnyder.“Comparative Citation RankingsofAuthorsin Monographic and Journal Literature:A Study ofSociology.”Journalof Documentation 53:3 (June 1997): 263-270.
C.Y.K.So,“Citation Ranking VersusExpertJudgmentin Evaluating Communic Ation Scholars: Effects of Research Specialty Size and Individual
Prominence.”Scientometrics41:3 (1998):325. Scientometrics 19 (1990): 412.
Finkenstaedt, Th., and M. Fries. “ZurForschungsmessung in den
Geisteswissenschaften.”Das Beispiel Anglistik, ad acta, (1978): 110-164.
cited by T.Finkenstaedt.“Measuring Research Performancein the Humanities.”Scientometrics19 (1990):411.
Fletcher,John.“A View oftheLiteratureofEconomics.”JournalofDocumentation 28:4(December 1972): 286.
Frost,Carolyn O.“TheUseofCitation in Literary Research:A Preliminary Classification ofCitation Functions.”Library Quarterly 49:4 (1979):413.
Glanzel, Wolfgang, and Urs Schoepflin. “A BibliometricStudy ofReference Literature in theSciencesand SocialSciences.”Information Processing and Management 35 (1999): 31-44.
Guha,Martin.”LiteratureUseby European Sociologists.”International Library Review 3 (1971): 445-452.
Haiqi,Zhang.“Research Performancein Key MedicalUniversities in China Observed form theScientificProductivity.”Scientometircs 37:1 (1996):
p.177-190.
Harris,G.T.“Research Outputin Australian University EconomicsDepartment, 1974-83.”Australian Economic Papers 27 (June 1988): 102-110.
Heinzkill, Richard.”CharatertisticsofReferencesin Selected Scholarly English Literary Journals.”Library Quarterly 50:3 (1980): 352-365.
Hicks,Diana.“TheDifficulty ofAchieving FullCoverageofInternationalSocial Science Literature and the Bibliometric Consequences.”Scientometrics 44:2
(1999): 194-203.
Hider,Philip M.“ThreeBibliometricAnalysesofAnthropology Literature.” Behavioral & Social Sciences Librarian 15:1 (1996): 3-4.
Ho,Kwok Keung.“Research OutputAmong theThreeFacultiesofBusiness, Education, Humanities&SocialSciencesin Six Hong Kong Universities.” Higher Education 36 (1998): 195-208.
Hodges,Sally,B.Hodges,A.J.Meadows,MichelineBeaulieu,and D.Law.“The Useofan AlgorithmicApproach fortheAssessmentofResearch Quality.” Scientometrics 35:1 (1996): 4.
Jauch,LawrenceR.,and William F.Glueck.“Evaluation ofUniversity Professors’ Chemistry Department, Seoul National University, Korea, 1992-1998.” Journal of Information Science 26:2 (2000): 111-119.
King,Jean.“A review ofBibliometricand OtherScienceIndicatorsand TheirRole in Research Evaluation,”Journal of Information Science 13 (1987): 264.
Kyvik,Svein.“Internationality oftheSocialSciences:theNorwegian Case.” International Social Science Journal 115 (Feb. 1988): 165-171.
Macharzina, Klaus and Michael-J. Oesterle.“Internationalcomparativeevaluation of North-American and German research output in Business and
Management.”Management Internal Review 34 (March 1994): 258.
Makino,Junichiro.“Productivity ofResearch Groups–Relation Between Citation Analysisand Reputation Within Research Communities.”Scientometrics 43:
1 (1998): 87-93.
Martin,B.R.“TheUseofMultipleIndicatorsin theAssessmentofBasicResearch.” Scientometrics 36:3 (1996): 349.
Meho,Lokman I.,and aDianeH.Sonnenwald.“Citation ranking versusPeer Evaluation of Senior Faculty Research Performance: A Case Study of Kurdish Scholarship.”Journal of the American Society for Information
Science 51:2 (2000): 123-138.
Murphy,PenelopeS.“Benchmarking AcademicResearch Outputin Australia.” Assessment & Evaluation in Higher Education 20:1(Apr. 1995): 45-57.
Nederhof, A. J., and R. A. Zwaan. “Quality JudgementofJournalsasIndicatorsof Research Performance in the Humanities and the Social a nd Behavioral Sciences.”Journal of the American Society for Information Science 42 (1991): 332-340.
Nederhof, A. J., R.A. Zwaan, R. E. De Bruin, and P.J. Dekker. “Assessing the Usefulness of Bibliographic Indicators for the Humanities and the Social and BehavioralSciences:A ComparativeStudy.”Scientomotrics 15:5/6(1989):
425-428.
Nederhof,Anton J.“Booksand ChaptersareNotto BeNeglected in Measuring Research Productivity.”American Psychologist 44:4 (April 1989): 734-735.
Ng,Ying Chu,and Sung Ko Li.“Measuring theResearch Performance of Chinese Higher Education Institutions: An Application of Data Envelopment Analysis.”Education Economics 8:2 (2000): 139-156.
Norris, Michael, and Charles Oppenheim.“Citation Counts and the Research Assessment Exercise V: Archaeology and the2001 RAE.”Journalof
Norris, Michael, and Charles Oppenheim.“Citation Counts and the Research Assessment Exercise V: Archaeology and the2001 RAE.”Journalof