Überblick
Bewertungskriterien legen fest, nach welchen Maßstäben Gutachter:innen eingereichte Beiträge bewerten. Viele dieser Kriterien werden später auch vom Programmkomitee in der finalen Bewertung verwendet. Sie können Kriterien flexibel aufbauen – von freiem Kommentar bis zu strukturierter Bewertung mit Punktwerten und Effekten.
Kriterien können in Kriteriengruppen organisiert werden. Die Bezeichnungen dieser Gruppen werden im Frontend als Überschriften angezeigt und strukturieren dort die Bewertungsmaske für Gutachter:innen.
Voraussetzungen
Zugriff auf Konfiguration → Beitragsbewertung → Bewertungskriterien
Eine bereits eingerichtete Beitragsbewertung
Bei Kriterien des Typs Präsentation: konfigurierte Präsentationsformen aus der Beitragseinreichung
Konfiguration / Vorgehen
Öffnen Sie Konfiguration → Beitragsbewertung → Bewertungskriterien.
Prüfen Sie zunächst die vorhandenen Kriteriengruppen und legen Sie bei Bedarf weitere Gruppen an. Die Gruppenbezeichnungen erscheinen im Frontend als Überschriften.
Klicken Sie auf „Neuen Eintrag erstellen“, um ein neues Bewertungskriterium anzulegen.
Pflegen Sie die Felder am Kriterium:
Interne Bezeichnung (Unterscheidung im Backoffice)
Bezeichnung im Frontend (Anzeige im Frontend)
Beschreibung (zusätzliche Infos)
Wählen Sie den Bezug des Kriteriums:
Abstract
Manuscript
Sollen dieselben Kriterien in beiden Bewertungsphasen verwendet werden, muss der Bezug vor Beginn der Manuscript-Bewertung angepasst werden.
Wählen Sie die Art des Kriteriums:
Note/Qualität
Klassifikation
Präsentation
Interner Kommentar
Legen Sie fest, ob das Kriterium ein Pflichtfeld ist:
Immer Pflicht
Optional
Pflicht, wenn Beitrag nicht akzeptiert wird
Optional, wenn Beitrag nicht akzeptiert wird
Ordnen Sie das Kriterium einer Kriteriengruppe zu und hinterlegen Sie bei Bedarf einen Kurztitel. Der Kurztitel wird in der finalen Bewertung als Spaltentitel verwendet.
Konfigurieren Sie anschließend die inhaltlichen Optionen passend zur gewählten Kriterienart.
Kriterientyp: Note/Qualität
Öffnen Sie den Bereich Antworten des Kriteriums.
Legen Sie pro Antwort einen Namen und einen numerischen Wert fest.
Wählen Sie den Effekt:
Kein Effekt - wenn die Antwort mit dem angegebenen Wert in die Punkteberechnung einfließen soll.
Punktwertung nicht zutreffend - wenn eine Antwort zwar auswählbar sein soll, aber nicht in die Durchschnittsberechnung einfließen darf. Das ist z.B. sinnvoll für Enthaltungen, wenn die Antwort nicht gezählt werden soll.
Kriterientyp: Klassifikation
Öffnen Sie den Bereich Antworten des Kriteriums.
Hinterlegen Sie für jede Auswahl einen Namen und einen Effekt:
Kein Effekt
Bewertung abgelehnt
akzeptiert
Warteliste
überarbeiten
nicht akzeptiert
Stellen Sie sicher, dass die Effekte fachlich korrekt gesetzt sind. Diese Effekte werden auch in Arbeitsabläufen verwendet, z.B. für die Einordnung von Beiträgen in Schritt 3 Phase: Finale Beitragsbewertung.
Kriterientyp: Präsentation
Legen Sie ein Kriterium vom Typ Präsentation an, wenn das Programmkomitee die Präsentationsform in der finalen Bewertung anpassen können soll.
Ordnen Sie den verfügbaren Präsentationsformen passende Effekte zu. Diese Effekte beziehen sich auf die in der Beitragseinreichung konfigurierten Präsentationsformen.
Kriterientyp: Interner Kommentar
Wählen Sie, ob der interne Kommentar als einzeiliges oder mehrzeiliges Eingabefeld angelegt werden soll.
Nutzen Sie diesen Kriterientyp für Hinweise oder Einschätzungen der Gutachtenden an das Programmkomitee.
Anwendungsfälle
Sie möchten die Fachqualität eines Beitrags mit Noten und Punktwerten bewerten.
Sie möchten Beiträge über eine Klassifikation für weitere Arbeitsabläufe einordnen.
Sie möchten für die finale Bewertung eine Präsentationsform vorschlagen oder ändern.
Sie möchten interne Hinweise für das Programmkomitee erfassen.
Hinweise
Prüfen Sie vor Start der Bewertung, ob die Kriterien vollständig und in der gewünschten Reihenfolge/gruppiert sind, da sie die Arbeitsweise der Gutachter:innen im Frontend bestimmen.
Die Effekte des Kriteriums Klassifikation beeinflussen auch die farbliche Darstellung bewerteter Beiträge im Gutachter-Frontend.
Inhalte des Kriteriums Interner Kommentar können nicht an Autor:innen gesendet werden.
Achtung: Es zwingend erforderlich, genau ein Kriterium der Art Klassifikation anzulegen und mit passenden Effekten zu konfigurieren, sonst funktionieren Beitragsbewertung und Arbeitsabläufe ggf. nicht korrekt.
FAQs
Kann ein interner Kommentar an Autor:innen übermittelt werden?
Nein, Inhalte des Bewertungskriteriums „Interner Kommentar“ können nicht an Autor:innen gesendet werden.
Wofür werden Kriteriengruppen verwendet?
Kriteriengruppen strukturieren Bewertungskriterien im Frontend. Die Gruppenbezeichnungen werden dort als Überschriften angezeigt.
Wann benötige ich ein Kriterium vom Typ „Präsentation“?
Sie benötigen diesen Kriterientyp, wenn die Präsentationsform in der finalen Bewertung durch das Programmkomitee angepasst werden können soll.
Kann ein interner Kommentar an Autor:innen übermittelt werden?
Nein. Inhalte des Kriteriums Interner Kommentar können nicht an Autor:innen gesendet werden.
Was bewirkt „Punktwertung nicht zutreffend“?
Diese Einstellung sorgt dafür, dass ein zugeordneter Wert nicht in die Bewertung einfließt und den Durchschnitt nicht verzerrt.