Samstag, 2. April 2005
Kontrolle der vielen Augen versus Kontrolle der qualifizierten Augen
florian_heuse_salzburg, 22:27h
Im akademisch-wissenschaftlichen Bereich sind schon lange Peer-Reviews bei wissenschaftlichen Zeitungsartikeln üblich. Bei Peer-Reviews werden die Artikel vor der Veröffentlichung von zwei oder drei unabhängigen Experten aus demselben Fachgebiet des Artikels durchgesehen, die Verbesserungsvorschläge machen oder das endgültige Ok für die Veröffentlichung erteilen. Die Unabhängigkeit des Gutachters ist dabei sehr wichtig und ein wesentliches Kriterium des Peer-Review. Die Anonymität des Verfassers muss nicht gegeben sein und durch diese Methode können auch keine Fälschungen aufgedeckt werden, da der Gutachter auf die Richtigkeit der Fakten und Daten vertrauen muss. Auch das wohl bekannteste Wikiweb, nämlich Wikipedia hat diese Idee der Peer-Review-artigen Qualitätssicherung aufgegriffen und nennt das Verfahren Wikipedia Review. Artikel, die man selber verfasst hat und an denen man nichts mehr auszusetzen hat, oder wo man sich ausserstande sieht gewisse Aspekte selber zu behandeln, sollen nochmals anderen vorgelegt werden und auch mit einer Literaturliste im Wikipedia üblichen Format versehen werden. Durch die Einbeziehung von Fachfremden verspricht sich Wikipedia eine Auflockerung im Sinne einer für alle verständlichen Sprache. Experten sollen den Artikel nochmals inhaltlich fundieren. Jeder Wikipedia Nutzer hat die Möglichkeit besonders gute Artikel in eine Liste einzutragen, wo dann darüber abgestimmt wird, ob er als exzellenter Artikel im Wikipedia aufgenommen wird. Wikipedia schweigt sich allerdings darüber aus, wer den nun qualifiziert genug ist bei der Abstimmung teilzunehmen, allerdings werden Mindestanforderungen die ein Artikel haben muss angeführt. Qualitäsmerkmale exzellenter Artikel Exzellente Artikel sollten zumindest ein paar dieser Merkmale erfüllen, siehe auch Wie schreibe ich gute Artikel, The perfect article und Brilliant prose. Über diese Empfehlungen kann auf Wikipedia Diskussion:Kandidaten für exzellente Artikel diskutiert werden. Einige Regeln gibt es auch zur Abstimmung. Diese will ich hier aber nicht explizit aufführen und für interessierte sind sie hier nachlesbar. Beim klassischen Peer-Review System gibt es natürlich auch Nachteile. Abweichende Forschungsansätze könnten natürlich negativ bewertet werden. Die subjektive Meinung spielt als auch hier eine große Rolle und ein Vorteil der Kontrolle durch die vielen Augen ist, dass die subjektive Meinung abgeschwächt wird, oder man kann auch sagen, dass sie in der Masse untergeht. Ich habe hier im Weblog explizit die Qualitätsmerkmale exzellenter Artikel, herausgegeben durch Wikipedia, aufgelistet, da sie sehr wohl auch auf unser Projekt zutreffen. Peer-Reviews waren jahrelang das Rückgrat wissenschaflticher Arbeiten und obwohl viele renomierte Autoren und Wissenschaftler auf das Open-Source System drängen, werden sich in absehbarer Zeit die Bewertung der Qualitätsmerkmale nicht völlig ändern. Das System des Peer-Review bleibt erhalten, wenn auch nicht mehr in der konservativen Form. Es werden sich Content Pools bilden in denen Wissenschaftler im Sinne des Open Source Prinzips veröffentlichen und natürlich auch selber darin lesen. Im Sinne der freien Marktwirtschaft wird sehr schnell eine Polarisation von statten gehen und auf Grund der Teilnehmer kann man bestimmt Rückschlüsse auf die Qualität dieser Content Pools ziehen. Vereinfacht gesagt, stimmt die Qualität auf der Plattform nicht, werden keine Leser kommen oder umgekehrt. Kuhlen meinte ja in dem Artikel sinngemäß, dass es gerade für uns Europäer so wichtig ist, dass eine Arbeit genau identifizierbar ist und dass sein eigener Text einem genau zugeordnet werden können muss. Die Anonymität im Internet oder in solchen Content Pools ist aber nicht zwingend notwendig und durch das Tool, das uns Herr Herzog vorgestellt hat, besitzt man ja die Möglichkeit gewisse Meinungsmacher, oder wie ich sie bezeichnen würde Alpha-Tierchen sichtbar zu machen. Das es solche Meinungsmacher auch im virtuellen Raum gibt ist unumstritten und die Gefahr besteht, dass nun sie für die Qualitäskriterien verantwortlich sind und ihnen die „unwissende“ Masse der User folgen. Es kann sogar zu einem Phänomen der Schweigespirale kommen. Gerade bei kontroversen Themen kann es passieren, dass Menschen, deren Meinung nicht mit der von der Masse repräsentierten Mehrheitsmeinung übereinstimmt, zum Schweigen motiviert werden; damit könnte letztlich sogar eine schweigende Mehrheit entstehen. Eine Minderheitenmeinung wird von der Masse im Keim erstickt. Natürlich sind auch Experten auf einem Gebiet von diesem Problem betroffen. Als Beispiel: 100 Leute schreiben einen Beitrag und 99 Leute definieren einen Begriff ähnlich, und nur ein Kollaborateur veröffentlicht eine richtige Definition zu einem ihnen völlig unbekannten Begriff, dann werden auch Sie der Mehrheit glauben schenken. Ich will mich nicht darauf festlegen, dass es nicht möglich ist, dass die Masse für die Erhaltung der Qualität verantwortlich ist, aber ich denke, dass es einfach Vorreiter geben muss. Viele Wissenschaftler begrüßen die Open-Source Bewegung, so wie ich und ich sage, dass es nicht reicht, dass sie ihre Werke öffentlich zugänglich machen und sich dann wieder zurückziehen. Ich bin für die Errichtung von Content-Pools, wo die Autoren aktiv teilnehmen im Sinne eines kolaborativen Arbeitens. Die Experten kritisieren und ergänzen sich selbst. Es ist nun mal so, dass die breite Masse zu wenig qualifiziert ist für spezielle Themen und da braucht es Experten. Wir sind Kommunikationswissenschafter, weil wir für dieses Sachgebiet ausgebildet werden und darum fehlt uns einfach die nötige Kompetenz um mit ausgebildeten Physikern ernsthaft über die spezielle Relativitätstheroie zu diskutieren. Es ist aber durchaus möglich und sehr bereichernd, dass keine Experten auch ihre Statements in Form von Kommentaren etc. abgeben können. Dies kann zu neuen Gedankenexperimenten führen oder zu praktischen Anwendungen von gewissem Wissen. Es bedarf aber Moderatoren und auch in unserem Projekt ist ein Moderator, bzw. mehrere Moderatoren notwendig. Ein anderes Gedankenexperiment von mir wäre einfach die Erschaffung eines ersten allgemein zugänglichen Content-Pools. Ein ausgewählter Personenkreis, deren Kompetenz hinsichtlich des Themas nachgewiesen ist, fungiert als Moderator und selektiert den Inhalt des ersten Content-Pools. Bei einer Diskussion würde, dies zum Beispiel bedeuten, dass die Moderatoren die Aussagen klar auf eine Pro- und auf eine Contra Seite schieben. Diese Zusammenfassung wird nun neuerlich in einem zweiten Content-Pool, der periodisch aktualisiert wird veröffentlicht. Der erste Content-Pool wäre nun für Jederfrau/mann zugänglich und dort könnte frei ab von jeglichen Regeln (bis auf wenige Ausnahmen) diskutiert werden. Das wäre dann die Arbeitsplattform für das kolaborative Lernen. In großen Konzernen wäre das die Arbeit von internen Gruppen, die man aber dort normalerweise nicht sieht, sondern nur das Ergebnis und in dem besagten Fall, wäre das Ergebnis der zweite Content-Pool. Abschliessend will ich dazu sagen, dass eben immer mehr Stimmen für eine Open-Source Bewegung laut werden und es tut sich auf diesem Bereich zum Glück einiges, aber Teilbereiche, wie die nötige Qualitätssicherung werden entweder sehr stiefmütterlich behandelt oder gar ausser Acht gelassen, was natürlich zur Qualitätskatasthrophe führen kann. Quellen(alle aufgerufen am 2.April 2005)OQ1 Peer-Review OQ2 Wikipedia-Review OQ3 Kanditat OQ4 OPEN OQ5 Intelligence, ... comment
carolin.wieser.uni-sbg,
Dienstag, 26. April 2005, 12:41
LesenSchreibenLesen ...
Ich finde, dass du einen guten Überblick über die Qualitätsmerkmale eines Artikels gegeben hast, die sicher für das Konzept unserer "Bürgerzeitung" anwendbar sind. Weiters finde ich, dass du einen guten Einblick in das Peer-Review System gegeben hast und um was es dabei überhaupt geht.
Allerdings bin ich nicht der Meinung, dass dies zu 100% auf unsere Bürgerzeitung anwendbar und geeignet ist. Ich vertrete die Meinung, dass durch die Kulturtechnik LesenSchreibenLesen ... der Lesen dazu aufgefordert wird, nicht alles sofort für "wahre Münze" zu nehmen, was in einem Weblob veröffentlicht wird, sonder zu hinterfragen und dadurch können Fehlermeldungen durch das Verfassen eines neuen Beitrages berichtigt werden. [hier gibt es mehr dazu] Allerdings wurde in diesem Weblog das Thema aufgegriffen, dass es für Themen zu Randgebieten und spezialisierten Themengebieten einen Spezialisten geben sollte, welcher den Beitrag auf die Richtigkeit prüft. Sozusagen eine Art Mischform. Ich denke, dass dies eine geeignete Form der Kontrolle für unser Projekt "Bürgerzeitung" wäre. Primär durch LesenSchreibenLesen und weiters durch einen Spezialisten, der spezielle unbekanntere Themengebiete prüft. ... link
florian_heuse_salzburg,
Montag, 2. Mai 2005, 23:00
Diese Mischform, die du als geeignet ansiehst habe ich bereits in meinem Beitrag gefordert !! Das Peer-Review System muss adaptiert werden, ist aber für unsere Zwecke anwendbar und in gewissem Maße brauchbar !! Das habe ich bereits erwähnt. Radngebiete sind ein heickles Thema und es kann schnell zu (falschen) Emotionen kommen. Siehe auch die das Phänomen der Schweigespirale!
... link ... comment
benedikt_greimler_salzburg,
Sonntag, 1. Mai 2005, 20:04
Mein Problem mit Peer-Review
Wie schon in einem vorherigen Kommentar erwähnt, sehe ich - wie ich in dieser Story erkläre - ein gewisses Problem in Peer-Review als Qualitätssicherungsinstrument.
Die Frage, die ich mir stelle, ist: "Hat die Community genug Kompetenz um in jedem Themengebiet mögliche Fehler zu finden?" Ich glaube nicht! ... link
florian_heuse_salzburg,
Montag, 2. Mai 2005, 23:00
Ich glaube auch nicht, darum plädiere ich ja in meinem Artikel für eine Mischform, also eine adpatierte Form des Peer-Review Systems !!
... link ... comment |
Hallo
Online for 7676 days
Name:Florian Heuse
Location:Salzburg, Austria
ICQ#:65671162
Last update: 2006-06-26 15:35 You're not logged in ... login
Probleme eines öffentlichen Mediums
Die Schweigespirale, ein Begriff aus den Medienwissenschaften, ... by florian_heuse_salzburg @ 2006-06-26 15:35 Fachtagung - Social Skills durch Social Software
Salzburg Research organisierte eine spannende interdisziplinäre ... by florian_heuse_salzburg @ 2006-06-12 18:28 Speakers Box
Begeistert von der Idee einer Speakersbox und voller ... by florian_heuse_salzburg @ 2006-06-12 17:27 großes Lob ..
.. gebührt der Initiative und den Akteuren! H. ... by Hans.Mittendorfer.Uni-Linz @ 2006-05-24 15:59 Alle Achtung!
Auf dem letzten Bild kommt ja direkt Volksfest-Atmosphäre ... by wolfgang.erharter.salzburg @ 2006-05-20 15:29 Friendlist
LV BegleitblogNemosomeN by Sabine Klein |