DE202018002612U1 - Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format - Google Patents
Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format Download PDFInfo
- Publication number
- DE202018002612U1 DE202018002612U1 DE202018002612.3U DE202018002612U DE202018002612U1 DE 202018002612 U1 DE202018002612 U1 DE 202018002612U1 DE 202018002612 U DE202018002612 U DE 202018002612U DE 202018002612 U1 DE202018002612 U1 DE 202018002612U1
- Authority
- DE
- Germany
- Prior art keywords
- correction
- computer
- programmed
- examination
- forces
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 47
- 238000012937 correction Methods 0.000 claims abstract description 100
- 238000012360 testing method Methods 0.000 claims abstract description 45
- 230000007246 mechanism Effects 0.000 claims abstract description 7
- 230000004044 response Effects 0.000 claims abstract description 7
- 238000004891 communication Methods 0.000 claims description 12
- 238000012550 audit Methods 0.000 description 5
- 238000000034 method Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 3
- 241001295925 Gegenes Species 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000011511 automated evaluation Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011158 quantitative evaluation Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/20—Education
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
- G06Q10/06398—Performance of employee with respect to a job function
Landscapes
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Engineering & Computer Science (AREA)
- Educational Administration (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- General Health & Medical Sciences (AREA)
- Educational Technology (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
Automatisierte Vorrichtung, um fachunabhängig Prüfungsleistungen, welche auf Grundlage einer oder mehrerer Prüfungsfragen in Form einer offenen oder mehrerer offener Frage(n) im Freitextformat bearbeitet werden, bezüglich ihres gesamten Aussagegehaltes zu erfassen, zu bewerten, auszuwerten und um die Bewertung zu kommunizieren, wobei die Vorrichtung folgende Merkmale aufweist:
einen Computer mit einprogrammierter, fachunabhängiger Korrektur-Software, welche in der Lage ist, einer Korrekturkraft bzw. mehreren Korrekturkräften in Bezug auf eine Prüfung alle oder wesentliche für die Bewertung der Leistung eines Prüfungskandidaten erforderlichen Prüfungsanforderungen darzustellen und welche es der Korrekturkraft bzw. den Korrekturkräften ermöglicht, mittels eines Eingabemechanismus quantitative und qualitative Angaben zu den Prüfungsleistungen eines bestimmten Prüfungskandidaten zu machen und diese Eingaben zu speichern, wobei die Angaben der Korrekturkraft bzw. der Korrekturkräfte insbesondere durch Auswahl aus vorgegebenen Auswahlmöglichkeiten erfolgen, wobei der programmierte Computer darauf ausgelegt ist, die Eingaben der Korrekturkraft bzw. der Korrekturkräfte in Bezug auf die Prüfungsleistung(en) zu bewerten diese Bewertungen zu speichern, wobei der programmierte Computer darauf ausgelegt ist die gespeicherten Bewertungsdaten mehrerer Prüfungsleistungen auszuwerten und in systematisierter Form an einem an dem Computer angeschlossenen Ausgabegerät darzustellen oder auszugeben, wobei der programmierte Computer in der Lage ist, der Korrekturkraft bzw. den Korrekturkräften an einem an dem Computer angeschlossenen Ausgabegerät einen die Bewertung der Prüfungsleistung(en) reflektierenden Text darzustellen oder auszugeben und wobei die im Computer einprogrammierte Korrektur-Software Zugriff auf gespeicherte Daten hat, welche die der Korrekturkraft bzw. den Korrekturkräften zur Auswahl anzuzeigenden vorgegebenen Antwortmöglichkeiten, internen Kriterien zur Bewertung und -benotung von Prüfungsleistungen, von der Korrekturkraft bzw. den Korrekturkräften getätigte Eingaben und von der die im Computer einprogrammierten Korrektur-Software gespeicherte Bewertungen beinhalten.
Automated device for independently recording, evaluating, evaluating and communicating assessment services based on one or more examination questions in the form of one open or several open questions in free text format and communicating the assessment, the Device has the following features:
a computer with programmed, discipline-independent correction software, which is able to represent one or more correction forces in relation to a test all or essential for the evaluation of the performance of an examination candidate required examination requirements and which allows the correction force or the correction forces to make by means of an input mechanism quantitative and qualitative information about the examinations of a particular candidate and to store these entries, the information of the correction force or the correction forces in particular by selecting from predetermined choices, the programmed computer is designed to the inputs of the To value the correction force or the correction forces with respect to the test performance (s) to store these ratings, the programmed computer is designed to the stored rating data of several Prüfun evaluate and output in systematized form on an output device connected to the computer, the programmed computer being capable of displaying to the correction force (s) on an output device connected to the computer a text reflecting the assessment of the test performance (s) and wherein the computer-programmed correction software has access to stored data, the predetermined response options to be displayed to the correction force or forces, internal criteria for rating and grading exam performance, inputs made by the correction force (s) and from which the computer-programmed correction software contains stored ratings.
Description
Gebiet der ErfindungField of the invention
Die vorliegende Offenbarung betrifft ein fachunabhängiges System zur Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation der Bewertung von Prüfungsleistungen, welche auf Grundlage einer offenen Frage bzw. mehrerer offenen Fragen im Freitextformat erbracht werden, wobei das System der Korrekturkraft bzw. den Korrekturkräften der Prüfungsleistung die mit der Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation der Bewertung von Prüfungsleistungen verbundene Arbeit erleichtert.The present disclosure relates to a subject-independent system for recording, evaluating and evaluating examination results and communicating the evaluation of examination results which are provided on the basis of an open question or several open questions in free-text format, the system being the correction force or correction forces of the examination performance facilitates the work involved in the collection, evaluation and evaluation of examinations as well as communication in the assessment of examinations.
Hintergrund der ErfindungBackground of the invention
Für Prüfungsaufgaben auf Grundlage von geschlossenen Fragen (d.h. Prüfungsaufgaben mit eindeutigem, begrenztem Lösungsraum und vorgegebenen Antwortalternativen, z.B. im Single- oder Multiple-Choice-Format) sind bereits zahlreiche Verfahren zur voll-oder teilautomatisierten Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation des Prüfungsergebnisses bzw. der Prüfungsergebnisse bekannt. Voll- oder teilautomatisierte Systeme zur Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation der Bewertung von Prüfungsleistungen, welche auf Grundlage einer offenen Frage bzw. auf offenen Fragen im Freitextformat erbracht werden, sind bislang nur in Formen bekannt, bei welchen sog. Oberflächenparameter (z.B. Wortanzahl, Satzstruktur) erfasst und bewertet werden (sog. Automated Essay Scoring - EAS). Voll- oder teilautomatisierte Systeme zur Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation der Bewertung von Prüfungsleistungen, welche auf Grundlage einer offenen Frage bzw. auf offenen Fragen im Freitextformat erbracht werden und durch welche die Prüfungsleistungen bezüglich ihres gesamten Aussagegehaltes erfasst, bewertet und ausgewertet werden und welche die Bewertungen selbständig kommunizieren können, sind indes bislang nicht bekannt.For exam questions on the basis of closed questions (ie exam tasks with a clear, limited solution space and given answer alternatives, eg in single- or multiple-choice-format) there are already numerous methods for fully or partially automated recording, evaluation and evaluation of examinations as well as for the communication of the Examination result or test results. Fully or partially automated systems for recording, evaluating and evaluating examinations as well as for communicating the evaluation of examinations, which are performed on the basis of an open question or open questions in free text format, are so far known only in forms in which so-called surface parameters ( eg word count, sentence structure) are recorded and evaluated (so-called Automated Essay Scoring - EAS). Fully or partially automated systems for recording, evaluating and evaluating examinations as well as for communicating the assessment of examinations, which are provided on the basis of an open question or open questions in free text format and by which the examinations are recorded, evaluated and evaluated with regard to their overall content and which the reviews can communicate independently, are not yet known.
Zusammenfassung der ErfindungSummary of the invention
Die vorliegende Offenbarung betrifft eine automatisierte Vorrichtung, um fachunabhängig Prüfungsleistungen, welche auf Grundlage einer oder mehrerer Prüfungsfragen in Form einer offenen oder mehrerer offener Frage(n) im Freitextformat bearbeitet werden, bezüglich ihres gesamten Aussagegehaltes zu erfassen, zu bewerten, auszuwerten und um die Bewertung zu kommunizieren, wobei die Vorrichtung folgende Merkmale aufweist:
einen Computer mit einprogrammierter, fachunabhängiger Korrektur-Software, welche in der Lage ist, einer Korrekturkraft bzw. mehreren Korrekturkräften in Bezug auf eine Prüfung alle oder wesentliche für die Bewertung der Leistung eines Prüfungskandidaten erforderlichen Prüfungsanforderungen darzustellen und welche es der Korrekturkraft bzw. den Korrekturkräften ermöglicht, mittels eines Eingabemechanismus quantitative und qualitative Angaben zu den Prüfungsleistungen eines bestimmten Prüfungskandidaten zu machen und diese Eingaben zu speichern, wobei die Angaben der Korrekturkraft bzw. der Korrekturkräfte insbesondere durch Auswahl aus vorgegebenen Auswahlmöglichkeiten erfolgen, wobei der programmierte Computer darauf ausgelegt ist, die Eingaben der Korrekturkraft bzw. der Korrekturkräfte in Bezug auf die Prüfungsleistung(en) zu bewerten diese Bewertungen zu speichern, wobei der programmierte Computer darauf ausgelegt ist die gespeicherten Bewertungsdaten mehrerer Prüfungsleistungen auszuwerten und in systematisierter Form an einem an dem Computer angeschlossenen Ausgabegerät darzustellen oder auszugeben, wobei der programmierte Computer in der Lage ist, der Korrekturkraft bzw. den Korrekturkräften an einem an dem Computer angeschlossenen Ausgabegerät einen die Bewertung der Prüfungsleistung(en) reflektierenden Text darzustellen oder auszugeben und wobei die im Computer einprogrammierte Korrektur-Software Zugriff auf gespeicherte Daten hat, welche die der Korrekturkraft bzw. den Korrekturkräften zur Auswahl anzuzeigenden vorgegebenen Antwortmöglichkeiten, internen Kriterien zur Bewertung und -benotung von Prüfungsleistungen, von der Korrekturkraft bzw. den Korrekturkräften getätigte Eingaben und von der die im Computer einprogrammierten Korrektur-Software gespeicherte Bewertungen beinhalten.The present disclosure relates to an automated device for independently recording, evaluating, evaluating and evaluating examination services which are processed on the basis of one or more examination questions in the form of one open or several open questions in free text format to communicate, the device having the following features:
a computer with programmed, discipline-independent correction software, which is able to represent one or more correction forces in relation to a test all or essential for the evaluation of the performance of an examination candidate required examination requirements and which allows the correction force or the correction forces to make by means of an input mechanism quantitative and qualitative information about the examinations of a particular candidate and to store these entries, the information of the correction force or the correction forces in particular by selecting from predetermined choices, the programmed computer is designed to the inputs of the To value the correction force or the correction forces with respect to the test performance (s) to store these ratings, the programmed computer is designed to the stored rating data of several Prüfun evaluate and output in systematized form on an output device connected to the computer, the programmed computer being capable of displaying to the correction force (s) on an output device connected to the computer a text reflecting the assessment of the test performance (s) and wherein the computer-programmed correction software has access to stored data, the predetermined response options to be displayed to the correction force or forces, internal criteria for rating and grading exam performance, inputs made by the correction force (s) and from which the computer-programmed correction software contains stored ratings.
Gemäß einem weiteren Aspekt der Offenbarung ist die im Computer einprogrammierte, fachunabhängige Korrektur-Software in der Lage, Eingaben des Erstellers bzw. der Ersteller einer Prüfung mittels eines Eingabemechanismus zu der Korrekturkraft bzw. den Korrekturkräften anzubietenden, vorgegebenen Auswahlmöglichkeiten sowie zu den Korrekturkräften nicht anzuzeigenden, internen Kriterien zur Bewertung und -benotung von Prüfungsleistungen zu erfassen und zu speichern.According to another aspect of the disclosure, the computer-programmed, non-point-specific correction software is able to offer inputs of the creator of an examination by means of an input mechanism to the correction force or the correction forces, predetermined choices and not to be displayed on the correction forces, to record and store internal criteria for the evaluation and grading of examinations.
Gemäß einem weiteren Aspekt der Offenbarung ist die fachunabhängige, einprogrammierte Korrektur-Software in der Lage, dem Ersteller einer Prüfung in Bezug auf den für die Prüfung einschlägigen Fachbereich typische, der Korrekturkraft bzw. den Korrekturkräften anzubietenden, vorgegebenen Auswahlmöglichkeiten zur qualitativen und quantitativen Bewertung von Prüfungsleistung(en) sowie zu den Korrekturkräften nicht anzuzeigenden, internen Kriterien zur Bewertung und -benotung von Prüfungsleistungen anzuzeigen und ermöglicht es dem Ersteller der Klausur, diese auszuwählen oder anzupassen und zu speichern.In accordance with another aspect of the disclosure, the off-the-shelf, programmed proofing software is capable of providing the creator of a test with the typical range of qualitative and quantitative assessments of exam performance that is typical of the subject of the exam and the corrective or corrective forces to be offered (s) and internal criteria for the evaluation and grading of non-indicative View exam performance and allow the creator of the exam to select or customize and save it.
Gemäß einem weiteren Aspekt der Offenbarung ist der programmierte Computer darauf ausgelegt, die Eingaben der Korrekturkraft bzw. der Korrekturkräfte in Bezug auf die Prüfungsleistung(en) zu bewerten, wobei der programmierte Computer Zugriff auf die vom Ersteller der Prüfung zuvor eingegebenen bzw. ausgewählten Bewertungskriterien hat und wobei der Computer diese Bewertung speichert.In accordance with another aspect of the disclosure, the programmed computer is configured to evaluate the inputs of the correction force (s) with respect to the exam performance (s), the programmed computer having access to the judging criteria previously entered or selected by the creator of the exam and wherein the computer stores this rating.
Gemäß einem weiteren Aspekt der Offenbarung ist der programmierte Computer darauf ausgelegt, die gespeicherten Bewertungsdaten mehrerer Prüfungsleistungen auszuwerten und in systematisierter Form an einem an dem Computer angeschlossenen Ausgabegerät darzustellen oder auszugeben.In accordance with another aspect of the disclosure, the programmed computer is configured to evaluate the stored rating data of multiple exam performances and to display or output in a systemized form to an output device connected to the computer.
Gemäß einem weiteren Aspekt der Offenbarung hat die einprogrammierte, fachunabhängige Korrektur-Software Zugriff auf die gespeicherten Daten zur Bewertung der Prüfungsleistung(en) und ist in der Lage, der Korrekturkraft bzw. den Korrekturkräften auf Grundlage der gespeicherten Bewertungsdaten an einem an dem Computer angeschlossenen Ausgabegerät jeweils die Bewertung der Prüfungsleistung(en) eines einzelnen Prüfungskandidaten reflektierende, von der im Computer einprogrammierten Korrektur-Software automatisch generierte Texte darzustellen oder auszugeben.In accordance with another aspect of the disclosure, the programmed, off-the-shelf, correction software has access to the stored test performance evaluation data and is capable of applying the correction force (s) based on the stored evaluation data to an output device connected to the computer to display or output the texts automatically reflecting the evaluation of the examination (s) of an individual candidate, automatically generated by the correction software programmed in the computer.
Gemäß eines weiteren Aspekts der Offenbarung kann der Computer von mehreren Korrekturkräften, die mit der Korrektur von auf derselben bzw. denselben Prüfungsaufgabe(n) beruhenden Prüfungsleistungen befasst sind, gleichzeitig und/oder parallel zur Eingabe und Speicherung von quantitativen und qualitativen Angaben zu den Prüfungsleistungen genutzt werden.In accordance with another aspect of the disclosure, the computer may be used by multiple correctional personnel involved in correcting audit services based on the same audit task (s) simultaneously and / or in parallel with inputting and storing quantitative and qualitative information about the audit services become.
Gemäß eines weiteren Aspekts der Offenbarung kann der mit der Korrektur-Software programmierte Computer von mehreren Erstellern von unterschiedlichen Prüfungsleistungen genutzt werden, um Eingaben mittels eines Eingabemechanismus zu der Korrekturkraft bzw. den Korrekturkräften anzubietenden, vorgegebenen Auswahlmöglichkeiten sowie zu den Korrekturkräften nicht anzuzeigenden, internen Kriterien zur Gesamtbewertung und -benotung von Prüfungsleistungen zu erfassen und zu speichern.According to another aspect of the disclosure, the computer programmed with the correction software may be used by multiple creators of different exam performances to provide input to the correction force or forces by means of an input mechanism, predetermined choices, and internal criteria not to be displayed on the correction forces To record and save overall assessment and grading of examinations.
Gemäß eines weiteren Aspekts der Offenbarung kann die im Computer einprogrammierte Korrektur-Software in folgenden Betriebsmodi betrieben werden: (i) im Eingabemodus werden Angaben des Erstellers der Prüfung bzw. der Ersteller der Prüfung zu den Rahmendaten der Prüfung, dem Inhalt der Prüfung, zu den der Korrekturkraft anzuzeigenden bzw. den Korrekturkräften anzuzeigenden Antwortmöglichkeiten sowie den internen Bewertungskriterien erfasst und gespeichert; (ii) im Korrekturmodus werden Eingaben einer Korrekturkraft auf Grundlage von vorgegebenen Auswahlmöglichkeiten zu quantitativen und qualitativen Aspekten der Prüfungsleistungen eines bestimmten Prüfungskandidaten erfasst und gespeichert; (iii) im Bewertungsmodus werden die einzelnen, von der Korrekturkraft bzw. den Korrekturkräften getätigten Eingaben zu den jeweiligen Prüfungsleistungen anhand der von dem Ersteller der Prüfung bzw. den Erstellern der Prüfung getätigten oder ausgewählten Bewertungskriterien bewertet, dem jeweiligen Prüfungskandidaten zugeordnet und gespeichert; (iv) im Auswertungsmodus werden die gespeicherten Bewertungsdaten mehrerer Prüfungsleistungen ausgewertet und in systematisierter Form an einem an dem Computer angeschlossenen Ausgabegerät dargestellt oder ausgegeben; (v) im Kommunikationsmodus werden der Korrekturkraft bzw. den Korrekturkräften auf Grundlage der gespeicherten Bewertungsdaten an einem an dem Computer angeschlossenen Ausgabegerät jeweils die Bewertung der Prüfungsleistung(en) eines einzelnen Prüfungskandidaten reflektierende, von der im Computer einprogrammierten Korrektur-Software automatisch generierte Texte dargestellt oder ausgegeben.According to a further aspect of the disclosure, the computer-programmed correction software can be operated in the following operating modes: (i) in the input mode, indications of the creator of the test or the creator of the test are the frame data of the test, the content of the test recorded and stored the corrective power to be displayed or the correction forces to be displayed and the internal evaluation criteria; (ii) in the correction mode, inputs of a correction force are captured and stored based on predetermined choices on quantitative and qualitative aspects of the examinations of a particular candidate; (iii) in the evaluation mode, the individual inputs to the respective examinations made by the correction force or correction forces are assessed on the basis of the assessment criteria made or selected by the examiner or examiners of the examination and assigned to the respective examiner; (iv) in the evaluation mode, the stored rating data of a plurality of exam performances are evaluated and displayed or output in a systemized form to an output device connected to the computer; (v) in the communication mode, the correction force or correction forces based on the stored evaluation data are displayed on an output device connected to the computer, respectively, the evaluation of the examination performance (s) of a single exam candidate reflective, automatically generated by the computer programmed in the correction software texts or output.
Gemäß eines weiteren Aspekts der Offenbarung kann der mit der Korrektur-Software programmierte Computer in unterschiedlichen, fachbereichsspezifischen Betriebsarten betrieben werden, in welchen dem Ersteller von Prüfungsleistungen typische, der Korrekturkraft bzw. den Korrekturkräften anzubietenden, vorgegebenen Auswahlmöglichkeiten zur qualitativen und quantitativen Bewertung von Prüfungsleistung(en) aus dem jeweiligen Fachbereich sowie den Korrekturkräften nicht anzuzeigende, interne Kriterien zur Gesamtbewertung und -benotung von Prüfungsleistungen aus dem jeweiligen Fachbereich angezeigt und zur Auswahl gestellt werden.According to a further aspect of the disclosure, the computer programmed with the correction software can be operated in different, field-specific operating modes in which typical options for the qualitative and quantitative evaluation of examination performance (s ) from the respective department as well as the correctional forces not to be displayed, internal criteria for the overall assessment and grading of examinations from the respective field are displayed and put to the selection.
Gemäß einem weiteren Aspekt der Offenbarung ist der Computer ein Personal Computer (PC) und/oder eine Server-/Host-Kombination und/oder ein Mobiltelefon (Smartphone) und/oder ein Tablet Computer und/oder ein Personal Digital Assistant (PDA).According to another aspect of the disclosure, the computer is a personal computer (PC) and / or a server / host combination and / or a mobile phone (smartphone) and / or a tablet computer and / or a personal digital assistant (PDA).
Gemäß einem weiteren Aspekt der Offenbarung läuft das Programm auf einem oder mehreren Computern und/oder auf einem Host und/oder ganz oder zumindest teilweise auf einem Server, über ein Netzwerk mit dem Host verbunden ist, wobei das Netzwerk ein Intranet und/oder das Internet ist.According to another aspect of the disclosure, the program runs on one or more computers and / or on a host and / or entirely or at least partially on a server connected to the host via a network, the network being an intranet and / or the Internet is.
Figurenliste list of figures
-
1 : Arbeitsablauf-Diagramm zur Erfassung, Bewertung und Auswertung sowie zur Kommunikation des Ergebnisses von Prüfungsleistungen, welche auf Grundlage von offenen Fragen zur Freitextbearbeitung ausgegeben werden.1 : Workflow Diagram for the recording, evaluation and evaluation as well as for the communication of the result of examinations, which are issued on the basis of open questions about the free text editing.
Ausführliche Beschreibung der exemplarischen AusführungsformDetailed description of the exemplary embodiment
Die vorliegende Offenbarung beruht zu einem Aspekt auf der Erkenntnis, dass nicht nur Prüfungsleistungen, welche in Beantwortung von in Form von geschlossenen Fragen gestellten Prüfungsaufgaben erbracht werden, sondern auch Prüfungsleistungen, welche in Beantwortung von in Form von offenen Fragen gestellten Prüfungsaufgaben und im Freitextformat erbracht werden, in teil- oder vollautomatisierter Weise erfasst, bewertet und ausgewertet werden können und dass auch bei derartigen Prüfungsaufgaben die Kommunikation der Prüfungsergebnisse in automatisierter Weise erfolgen kann.The present disclosure is based, in one aspect, on the recognition that not only are examinations performed in response to exam questions given in the form of closed questions, but also examinations that are performed in response to open-question questions and in free-text format , can be recorded, evaluated and evaluated in a partially or fully automated manner and that the communication of the examination results can be carried out in an automated manner even with such examination tasks.
Ein weiterer Aspekt der Offenbarung betrifft die Erkenntnis, dass die Korrektur von Prüfungsleistungen, welche in Beantwortung von in Form von offenen Fragen gestellten Prüfungsaufgaben und im Freitextformat erbracht werden, nach konventioneller Art und ohne den Einsatz eines wie in dieser Offenbarung dargestellten Computers mit einprogrammierter Korrektursoftware hohe Kosten verursacht, dass eine einheitliche und objektive Korrektur von Prüfungsleistungen insbesondere bei Einsatz mehrerer Korrekturkräfte nicht sichergestellt ist und dass eine nachträgliche Anpassung bereits erfolgter Korrekturen nur schwer möglich ist.Another aspect of the disclosure concerns the recognition that the correction of examinations performed in response to open-question questions and in free-text format is conventional and without the use of a computer with programmed correction software as set forth in this disclosure Costs mean that a uniform and objective correction of examinations is not ensured, especially when multiple correctional forces are used, and that retrospective adjustment of already made corrections is difficult.
Das System stellt einen neuen und fachunabhängigen Ansatz zur Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie zur Kommunikation des Ergebnisses bzw. der Ergebnisse von Prüfungsleistungen, welche auf Grundlage einer offenen Frage bzw. mehrerer offenen Fragen im Freitextformat erbracht werden, dar. Das System verbessert den Prozess der Korrektur von Prüfungsleistungen. Einerseits ermöglicht es eine schnellere und damit kostengünstigere Korrektur, da es durch Automatisierung die Korrekturkraft bzw. die Korrekturkräfte weitgehend von der Arbeit der Benotung und Kommunikation von einzelnen Prüfungsleistungen sowie der Auswertung von mehreren gleichartigen Prüfungsleistungen weitgehend entbindet. Andererseits erhöht es die Transparenz und die Gleichwertigkeit von Prüfungsbewertungen, da Prüfungsleistungen anhand zentraler, zuvor festgelegter Kriterien bewertet werden.The system introduces a new and independent approach to the collection, assessment and evaluation of examinations as well as the communication of the result or results of examinations, which are based on an open question or open questions in free text format Process of correction of examinations. On the one hand, it allows a faster and thus more cost-effective correction, since it largely relieves the correction force or the correction forces largely by the work of grading and communication of individual examinations and the evaluation of several similar examinations by automation. On the other hand, it increases the transparency and equivalence of audit evaluations by assessing audit performance against a set of pre-defined criteria.
Nachfolgend erfolgt eine Definition von in der vorliegenden Offenbarung verwendeten Begriffen:
- 1. „Prüfung“: Eine Aufgabe, welche einem Prüfungskandidaten mit dem Ziel der Bewertung des Leistungsniveaus des Prüfungskandidatens gestellt wird.
- 2. „Prüfungskandidat“: Person, welche die Prüfung zum Zweck der Bewertung ihres eigenen Leistungsniveaus bearbeitet.
- 3. „Ersteller einer Prüfung“: Person oder Personen, welche die Prüfung konzipieren und ausarbeiten.
- 4. „Prüfungsleistung“: Die Antwort bzw. die Antworten eines Prüfungskandidaten, welche vom Prüfungskandidaten in Bearbeitung der Prüfung erbracht wird.
- 5. „Offene Frage“: Eine Frage, welche die zutreffende Antwort bzw. die zutreffenden Antworten oder mögliche Antworten weder vorgibt noch impliziert.
- 6. „Freitextformat“: Modus der Beantwortung einer Frage oder Prüfung, bei welcher die Bearbeitung ohne oder mit nur sehr beschränkter Vorgabe der Bearbeitungsform in Textform oder in Form von mathematischen Formeln erfolgt, wobei die Formulierung der Antwort vom Bearbeiter ganz oder weitgehend frei von Vorgaben erfolgen kann.
- 7. „Korrekturkraft“: Person, welche mit der Erfassung, Bewertung und Auswertung von Prüfungsleistungen sowie der Kommunikation der Bewertung betraut ist.
- 8. „Erfassung von Prüfungsleistungen“: Erfassung des Inhalts einer Prüfungsleistung durch eine Korrekturkraft.
- 9. „Bewertung von Prüfungsleistungen“: Bewertung einer oder mehrerer Prüfungsleistungen durch eine Korrekturkraft.
- 10. „Auswertung von Prüfungsleistungen“: Zusammenfassende Analyse der Ergebnisse von mehreren Prüfungsleistungen durch eine Korrekturkraft.
- 11. „Kommunikation der Bewertung von Prüfungsleistungen“: Kommunikation des Ergebnisses der Bewertung einer Prüfungsleistung gegenüber dem Prüfungskandidaten.
- 1. "Examination": a task which is assigned to an examiner with the aim of assessing the performance level of the candidate.
- 2. "Candidate" means the person who examines for the purpose of assessing their own performance level.
- 3. "Creator of an examination" means the person or persons who design and elaborate the examination.
- 4. "Examination performance": The answer or answers of an examination candidate, which is provided by the candidate in process of the examination.
- 5. "Open Question": A question that neither sets nor implies the applicable answer or answers or possible answers.
- 6. "free text format" means the mode of answering a question or an exam in which the processing is done without or with very limited specification of the processing form in text form or in the form of mathematical formulas, whereby the formulation of the answer by the processor is completely or largely free of specifications can be done.
- 7. "Correctional force" means a person who is entrusted with the recording, evaluation and evaluation of examinations as well as the communication of the assessment.
- 8. "Recording of examinations": recording the content of an examination by means of a correction.
- 9. "Assessment of Examinations": Assessment of one or more examinations by a correctional force.
- 10. "Evaluation of Examinations": Summary analysis of the results of several examinations by a correctional force.
- 11. "Communication of the assessment of examinations": Communication of the result of the assessment of an examination performance against the candidate.
Es folgt eine Beschreibung von Funktionalität und Arbeitsabläufen von wesentlichen Betriebsabläufen des Korrektur-Programms gemäß einer Ausführungsform (Fachbereich Rechtswissenschaften, 1. Staatsexamen, Bundesrepublik Deutschland) dieser Offenbarung.The following is a description of functionality and operations of essential operations of the correction program according to one embodiment (Department of Law, 1st State Examination, Federal Republic of Germany) of this disclosure.
Um der Korrekturkraft bzw. den Korrekturkräften eine Nutzung des Systems zu ermöglichen, muss der Ersteller bzw. müssen die Ersteller der Prüfung zunächst im Betriebsmodus „Eingabemodus“ des Systems Angaben zu den Rahmendaten der Prüfung, dem Inhalt der Prüfung, zu den der Korrekturkraft anzuzeigenden bzw. den Korrekturkräften anzuzeigenden Auswahlmöglichkeiten sowie den internen Bewertungs- und Benotungskriterien tätigen und speichern. Hierbei umfassen die Rahmendaten der Prüfung allgemeine Angaben etwa zu Titel, Datum und Ort der Prüfung sowie zum allgemeinen Erwartungshorizont in Bezug auf die gestellten Aufgaben. Zum Inhalt der Prüfung werden mindestens vom System erfasst die Prüfungsfrage(n), die einzelnen Prüfungsschritte sowie bei der Möglichkeit von alternativen Lösungswegen die unterschiedlichen Lösungswege und deren Verhältnis untereinander als Bedingung(en). Beispielsweise kann eine Prüfungsfrage nebst Prüfungsschritten im Fachbereich Rechtswissenschaften wie folgt eingegeben werden:
- Prüfungsfrage: „Kann A von B Herausgabe des PKW verlangen?“
- Prüfungspunkt
1 : „Anspruch von A gegen B auf Herausgabe des PKW aus § 985 BGB“ - Prüfungspunkt
1.1 : „A Eigentümer?“ - Prüfungspunkt
1.2 : „B Besitzer?“ - Prüfungspunkt
1.3 : „B ohne Recht zum Besitz?“ Prüfungspunkt 2 „Anspruch von A gegen B auf Herausgabe des PKW aus § 861 BGB“- (...)
- Prüfungspunkt n (...)
- Bedingung
1 : „keine“ - (...)
- Bedingung n: (...)
- Examination question: "Can A demand the release of the car from B?"
- check point
1 : "Claim of A against B on publication of the car from § 985 BGB" - check point
1.1 : "A owner?" - check point
1.2 : "B owner?" - check point
1.3 : "B without right to possession?" - check
point 2 "Claim from A to B on surrender of the car from § 861 BGB" - (...)
- Test point n (...)
- condition
1 : "none" - (...)
- Condition n: (...)
Hierbei kann der Ersteller der Prüfung bzw. können die Ersteller der Prüfung beispielsweise in der Betriebsart „Rechtswissenschaften, 1. Staatsexamen, Bundesrepublik Deutschland“ entweder eigene Eingaben tätigen oder aus einer Liste bereits einprogrammierter Ansprüche auswählen.In this case, the creator of the examination or the creators of the examination can, for example, in the mode of "law, 1. State Examination, Federal Republic of Germany" either make their own entries or select from a list of already programmed claims.
Daneben sind Angaben des bzw. der Ersteller(s) der Prüfung zu denjenigen Parametern erforderlich, welche der Korrekturkraft bzw. den Korrekturkräften im Rahmen der Korrektur angezeigt werden. Diese sind entweder frei wählbar oder können bei Wahl einer fachbereichsspezifischen Betriebsart von dem bzw. den Ersteller(n) der Prüfung angepasst werden. In der Betriebsart „Rechtswissenschaften, 1. Staatsexamen, Bundesrepublik Deutschland“ können dies beispielsweise sein:
- Frage n, Anspruch n
- Bewertung der Übersichtlichkeit der Gliederung (
Auswahlmöglichkeit zwischen 1=schlechteste Bewertung und 4=beste Bewertung) - Bewertung der Rechtschreibung (
Auswahlmöglichkeit zwischen 1=schtechteste Bewertung und 4=beste Bewertung) - Bewertung der Grammatik (
Auswahlmöglichkeit zwischen 1=schlechteste Bewertung und 4=beste Bewertung) - Bewertung des Schriftbildes (
Auswahlmöglichkeit zwischen 1=schlechteste Bewertung und 4=beste Bewertung) - Bewertung des Prüfungsaufbaus (
Auswahlmöglichkeit zwischen 1=schlechteste Bewertung und 4=beste Bewertung) - Anpassung der Bewertung der Teilleistung durch die Korrekturkraft (Auswahlmöglichkeit zwischen -100 bis + 100)
- Freitexteingabe der Korrekturkraft (Möglichkeit der Freitexteingabe durch den Korrektor)
- Prüfungspunkt
1 : Vom Prüfungskandidaten geprüft? (Auswahlmöglichkeit ja/nein); Welches Gesamtergebnis wird vom Prüfungskandidaten vertreten? (Auswahlmöglichkeit „+“, „-“, „+/-“); - Prüfungspunkt
1.1 : Vom Prüfungskandidaten geprüft? (Auswahlmöglichkeit ja/nein); Welches Ergebnis wird vom Prüfungskandidaten vertreten? (Auswahlmöglichkeit „+“, „-“, „+/-“); Bewertung der Einhaltung des Gutachtenstils? (Auswahlmöglichkeit zwischen 1=schlechteste Bewertung und 4=beste Bewertung) - Prüfungspunkt
1.2 : (...) - Prüfungspunkt n: (...)
- Question n, claim n
- Evaluation of the clarity of the structure (choice between 1 = worst rating and 4 = best rating)
- Spelling evaluation (choice between 1 = least scored rating and 4 = best rating)
- Grammar rating (choice between 1 = worst rating and 4 = best rating)
- Rating of the typeface (choice between 1 = worst rating and 4 = best rating)
- Assessment of the exam structure (choice between 1 = worst rating and 4 = best rating)
- Adjustment of the partial performance by the correction force (choice between -100 to + 100)
- Free text input of the correction force (possibility of free text input by the proofreader)
- check point
1 : Examined by the candidate? (Choice yes / no); Which overall result is represented by the candidate? (Choice "+", "-", "+/-"); - check point
1.1 : Examined by the candidate? (Choice yes / no); Which result is represented by the candidate? (Choice "+", "-", "+/-"); Assessment of compliance with the assessment style? (Choice between 1 = worst rating and 4 = best rating) - check point
1.2 : (...) - Test point n: (...)
Weiterhin sind Angaben des bzw. der Ersteller(s) der Prüfung zu Parametern erforderlich, welche der Korrekturkraft bzw. den Korrekturkräften im Rahmen der Korrektur jedoch nicht angezeigt werden. Diese sind entweder frei wählbar oder können bei Wahl einer fachbereichsspezifischen Betriebsart von dem bzw. den Ersteller(n) der Prüfung angepasst werden. In der Betriebsart „Rechtswissenschaften, 1. Staatsexamen“ sind dies beispielsweise:
- Globalparameter: Vergabe einer Note „Ausreichend, untere Grenze“ (
4 Punkte) ab wieviel Rohpunkten (Skala von 0-100)?; Maximaler Punkteabzug von Leistungsquote zulässig in den Bereichen Übersichtlichkeit der Gliederung, Rechtschreibung, Grammatik, Schriftbild, Prüfungsaufbau, Gutachtenstil? (Auswahlmöglichkeit jeweils auf einer Skala von 0-100); - Fragen
1 - n: Anteil der Frage an der Gesamtbewertung? (Auswahlmöglichkeit auf einer Skala von 0 - 100%) - Frage n, Anspruch n: Anteil des Anspruchs an der Gesamtbewertung? (Auswahlmöglichkeit auf einer Skala von 0 - 100%)
- Frage n, Anspruch n
- Prüfungspunkt
1 : Schwerpunkt der Prüfung? (Auswahlmöglichkeit ja/nein); Rohpunkte für Prüfung des Anspruchs (Auswahlmöglichkeit auf einer Skala von 0-100); Alternative Prüfungsmöglichkeit (Auswahlmöglichkeit ja/nein); Wenn alternative Prüfungsmöglichkeit: welche? (Auswahl aus Prüfungspunkten1 - n.n) - Prüfungspunkt
1.1 : Schwerpunkt der Prüfung? (Auswahlmöglichkeit ja/nein); Rohpunkte für Prüfung des Prüfungspunktes (Auswahlmöglichkeit auf einer Skala von 0-100); Alternative Prüfungsmöglichkeit (Auswahlmöglichkeit ja/nein); Wenn alternative Prüfungsmöglichkeit: welche? (Auswahl aus Prüfungspunkten1 - n.n) - Prüfungspunkt n: (...)
- Global parameter: Assigning a grade "Sufficient, lower limit" (
4 Points) from how many raw points (scale from 0-100) ?; Maximum point deduction of benefit rate permissible in the areas of clarity of structure, spelling, grammar, typeface, exam structure, appraisal style? (Choice on a scale of 0-100); - ask
1 - n: share of the question in the overall rating? (Choice on a scale of 0 - 100%) - Question n, Claim n: Share of the claim to the overall rating? (Choice on a scale of 0 - 100%)
- Question n, claim n
- check point
1 : Focus of the exam? (Choice yes / no); Raw points for examination of the claim (selection on a scale of 0-100); Alternative examination possibility (choice yes / no); If alternative examination option: which? (Selection from examination points1 - nn) - check point
1.1 : Focus of the exam? (Choice yes / no); Raw points for examination of the examination point (optional on a scale of 0-100); Alternative examination possibility (choice yes / no); If alternative examination option: which? (Selection from examination points1 - nn) - Test point n: (...)
Nach vollständiger Eingabe der Prüfung durch den bzw. die Ersteller der Prüfung kann das System zur Benutzung durch die Korrekturkraft bzw. die Korrekturkräfte freigegeben werden. Diese nutzen das System im Betriebsmodus „Korrekturmodus“, wobei ihnen die vom Ersteller der Prüfung bzw. den Erstellern der Prüfung ausgewählten Parameter (s.o.) angezeigt werden. Nach Eingabe einer Identifikation des Prüfungskandidaten (z.B. Prüfungsnummer oder Matrikelnummer) sowie der Korrekturkraft selbst (z.B. Namenskürzel) erfolgt die Eingabe von Angaben zur jeweils bewerteten Prüfungsleistung durch Auswahl der angezeigten, vorausgewählten Auswahlmöglichkeiten.Upon completion of the test by the test maker (s) of the test, the system may be released for use by the correction force (s). These use the system in the "correction mode" operating mode, displaying the parameters selected by the creator of the check or the creators of the check (see above). After entering an identification of the candidate (e.g., exam number or matriculation number) and the corrective force itself (e.g., abbreviation abbreviation), inputting details of the respective graded exam is made by selecting the displayed preselected choices.
Hierbei ist die auf dem Computer einprogrammierte Korrektur-Software in der Lage, der Korrekturkraft bzw. den Korrekturkräften bei zuvor eingegebenen alternativen Lösungswegen auch diejenigen Prüfungspunkte anzuzeigen, welche lediglich alternativ zu prüfen sind. So wird beispielsweise Prüfungsalternative B der Korrekturkraft nur dann angezeigt, wenn von der Korrekturkraft zuvor die Frage nach der Bearbeitung von Prüfungsalternative A negativ beantwortet wurde. Nach Abschluss der Bearbeitung durch die Korrekturkraft bzw. die Korrekturkräfte besteht die Möglichkeit zur Speicherung der Eingaben.In this case, the correction software programmed on the computer is able to display the correction force or the correction forces in the case of previously entered alternative solution paths also those test points which are only to be tested alternatively. For example, examination alternative B of the correction force is displayed only if the question of the processing of examination alternative A was answered in the negative by the correction force beforehand. After completing the processing by the correction force or the correction forces, it is possible to save the inputs.
Im Betriebsmodus „Bewertungsmodus“ der auf dem Computer einprogrammierten Korrektur-Software erfolgt automatisch, ohne dass es hierfür einer zusätzlichen Eingabe durch die Korrekturkraft bzw. die Korrekturkräfte oder den Ersteller der Prüfung bzw. die Ersteller der Prüfung bedarf, die Bewertung der Prüfung nach Maßgabe der vom Ersteller der Prüfung bzw. den Erstellern der Prüfung festgelegten Parametern. Das System kann vom Ersteller der Prüfung bzw. den Erstellern der Prüfung so konfiguriert werden, dass der Korrekturkraft bzw. den Korrekturkräften die Endnote und/oder die Rohpunkte der Bewertung während des Eingabeprozesses angezeigt wird, um gegebenenfalls eine Korrektur durch Eingabe von Anpassungswerten zu ermöglichen. Die Berechnung der Bewertung und Benotung erfolgt hierbei insbesondere unter Berücksichtigung der von dem Ersteller der Prüfung bzw. den Erstellern der Prüfung zuvor eingegebenen Prüfungsalternativen.
- Im Betriebsmodus „Auswertungsmodus“ kann der bzw. können die Ersteller der Prüfung im Falle der Korrektur von mehreren Prüfungsleistungen innerhalb einer Prüfung auf eine automatisierte Auswertung zurückgreifen, welche in der Betriebsart „Rechtswissenschaften, 1. Staatsexamen, Bundesrepublik Deutschland“ mindestens folgende Angaben enthält:
- Gesamtübersicht: Anzahl der erfassten Prüfungsleistungen = n; Notendurchschnitt = n;
- Notenverteilung: 0 Punkte = n Prüfungskandidaten, 1 Punkt = n Prüfungskandidaten (...)
- Korrekturkraft
1 : Anzahl der erfassten Prüfungsleistungen = n; Notendurchschnitt = n; - Notenverteilung: 0 Punkte = n Prüfungskandidaten, 1 Punkt = n Prüfungskandidaten (...)
- Korrekturkraft
2 : Anzahl der erfassten Prüfungsleistungen = n; Notendurchschnitt = n; - Notenverteilung: 0 Punkte = n Prüfungskandidaten, 1 Punkt = n Prüfungskandidaten (...)
- Korrekturkraft n: Anzahl der erfassten Prüfungsleistungen = n; Notendurchschnitt = n;
- Notenverteilung: 0 Punkte = n Prüfungskandidaten, 1 Punkt = n Prüfungskandidaten (...)
- In the operating mode "evaluation mode", the examiner (s), in the case of the correction of several examination performances within an examination, can resort to an automated evaluation, which contains at least the following information in the operating mode "Law, 1st State Examination, Federal Republic of Germany":
- Overview: Number of examinations = n; Grade point average = n;
- Grading: 0 points = n Candidates, 1 point = n Candidates (...)
- correcting force
1 : Number of examinations recorded = n; Grade point average = n; - Grading: 0 points = n Candidates, 1 point = n Candidates (...)
- correcting force
2 : Number of examinations recorded = n; Grade point average = n; - Grading: 0 points = n Candidates, 1 point = n Candidates (...)
- Correction force n: number of examinations = n; Grade point average = n;
- Grading: 0 points = n Candidates, 1 point = n Candidates (...)
Daneben ist das System in der Lage, eine Liste der häufigsten Fehlerpunkte der Prüfung zu erstellen. Die vorgenannten Informationen werden vom System dargestellt und auf Wunsch als Datei oder auf einem Ausgabegerät ausgegeben.In addition, the system is able to generate a list of the most frequent error points of the test. The above information is displayed by the system and, if desired, output as a file or on an output device.
Im Betriebsmodus „Kommunikationsmodus“ können sowohl der bzw. die Ersteller der Prüfung wie auch die Korrekturkraft bzw. -kräfte auf eine vom System vollautomatisch generierte Darstellung von Texten zurückgreifen, welche die Bewertungen der jeweiligen erfassten Prüfungsleistungen reflektieren. Hierzu verfügt das System über einen Algorithmus, welcher vom Ersteller bzw. von den Erstellern der Prüfung entweder frei programmierbar ist oder im Rahmen der Fachbereichsbetriebsart als vorformuliertes Modul ausgewählt werden kann. In der Betriebsart „Rechtswissenschaften, 1. Staatsexamen, Bundesrepublik Deutschland“ wird beispielsweise ausgegeben:
- WENN Eingabe zu Prüfungspunkt n =„nicht geprüft“ DANN Ausgabe „Verf. prüft Prüfungspunkt n nicht.“
- IF input to checkpoint n = "not checked" THEN edition "Verf. does not check exam point n. "
Das in der vorliegenden Offenbarung beschriebene System kann auf zahlreichen Hardware-Plattformen implementiert und betrieben werden. So kann das System beispielsweise auf einem einzelnen Gerät, zum Beispiel einem Personal Computer (PC), einem Mobiltelefon (Smartphone) einem Tablet Computer oder einem Personal Digital Assistant (PDA) vollständig installiert und betrieben werden. Es kann jedoch auch auf einer Server/Host-Kombination installiert und betrieben werden, wobei das Programm auf einem Server-Computer installiert und betrieben wird und den Nutzern (dem Ersteller bzw. den Erstellern von Prüfungen sowie der Korrekturkraft bzw. den Korrekturkräften) über ein Netzwerk auf Host-Computern zugänglich gemacht wird. Hierbei kann es sich bei dem Netzwerk beispielsweise um das Internet oder das Intranet einer Universität handeln. Auch ist es beispielsweise möglich, nur Teile des Programms auf dem Server-Computer zu installieren und zu betreiben und andere Teile auf den Host-Computern. Hierbei kann das System zur Zugriffskontrolle Passwörter vorsehen. Das dieser Offenbarung zugrundeliegende System kann in einer Vielzahl von Programmiersprachen programmiert und/oder Mithilfe einer Vielzahl von Programmen erstellt worden sein, beispielsweise C, C++, Basic, Visual Basic, Java, Java-Script, MS-Excel, MS-Access.The system described in the present disclosure can be implemented and operated on a variety of hardware platforms. For example, the system can be fully installed and operated on a single device, such as a personal computer (PC), a mobile phone (smartphone), a tablet computer, or a personal digital assistant (PDA). However, it may also be installed and operated on a server / host combination, with the program being installed and operated on a server computer, and the users (the creator or examiners of the tests, and the correction force or correction forces) via a Network on host computers. In this case, the network can be, for example, the Internet or the intranet of a university. It is also possible, for example, to install and operate only parts of the program on the server computer and other parts on the host computers. Here, the access control system may provide passwords. The system underlying this disclosure may have been programmed in a variety of programming languages and / or created using a variety of programs, such as C, C ++, Basic, Visual Basic, Java, Java Script, MS Excel, MS Access.
Die in dieser Offenbarung beschriebenen Betriebsarten, Betriebsmodi und Ausführungsformen sind lediglich exemplarisch und dienen lediglich der Umschreibung. Solche Modifikationen, Variationen oder Modi, welche von einem Fachmann erstellt werden können, ohne von Geist und/oder Umfang der vorliegenden Offenbarung abzuweichen, befinden sich innerhalb des Umfangs der Offenbarung.The modes of operation, modes of operation, and embodiments described in this disclosure are merely exemplary and are for purposes of description only. Such modifications, variations, or modes that may be made by one skilled in the art without departing from the spirit and / or scope of the present disclosure are within the scope of the disclosure.
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE202018002612.3U DE202018002612U1 (en) | 2018-05-30 | 2018-05-30 | Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE202018002612.3U DE202018002612U1 (en) | 2018-05-30 | 2018-05-30 | Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format |
Publications (1)
Publication Number | Publication Date |
---|---|
DE202018002612U1 true DE202018002612U1 (en) | 2018-07-13 |
Family
ID=63045714
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE202018002612.3U Active DE202018002612U1 (en) | 2018-05-30 | 2018-05-30 | Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE202018002612U1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191002A (en) * | 2021-05-04 | 2021-07-30 | 河南环球优路教育科技有限公司 | Examination simulation method and system |
-
2018
- 2018-05-30 DE DE202018002612.3U patent/DE202018002612U1/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191002A (en) * | 2021-05-04 | 2021-07-30 | 河南环球优路教育科技有限公司 | Examination simulation method and system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11328231B2 (en) | Method of matching employers with job seekers | |
Hatcher et al. | A step-by-step approach to using SAS for factor analysis and structural equation modeling | |
Euwals et al. | Training intensity and first labor market outcomes of apprenticeship graduates | |
DE112008001066T5 (en) | Method and system for providing a virtual job market | |
DE102007039191A1 (en) | Calibration curve fitting method and apparatus | |
DE112020000004T5 (en) | Information delivery system and information delivery process | |
DE112020000003T5 (en) | Information delivery system and information delivery process | |
DE102022105049A1 (en) | METHOD, DEVICE AND SYSTEM FOR RECOMMENDED A KIT OF REHABILITATION PROGRAMS FOR A WORKER INJURED IN A WORKPLACE ACCIDENT | |
Roth et al. | Who ru?: On the (in) accuracy of incumbent-based estimates of range restriction in criterion-related and differential validity research. | |
AU2006269287A1 (en) | Computer system for resource management | |
DE202018002612U1 (en) | Subject-independent system for the content registration, evaluation and evaluation of examinations, which are provided on the basis of an open question or several open questions in the free text format | |
DE102021124445A1 (en) | META-FEATURE TRAINING MODELS FOR MACHINE LEARNING ALGORITHMS | |
Dunakhir et al. | Cultural Values and Perceived Audit Quality: A Conceptual Framework | |
DE102020206584A1 (en) | Machine learning data acquisition system and method for collecting data | |
DE102019217595A1 (en) | DOMAIN-SPECIFIC PREDICTION OF PROCESS DIFFICULTY | |
YÜRÜM et al. | Assessing Software Processes over a New Generic Software Process Assessment Tool | |
Sureth | Venturing Into Uncharted Territory–Exploring the Psychological Implications of AI-Driven Automation for Employees | |
Ozgul et al. | High-skilled human workers in non-routine jobs are susceptible to AI automation but wage benefits differ between occupations | |
WO2003009187A1 (en) | An evaluation system and method therefor | |
DE202018103078U1 (en) | System for the automation of the examination of communicative foreign language competence | |
DE102023107344A1 (en) | Method for creating and comparing personality profiles and corresponding database, computer program product, user interface and use | |
DE202023101465U1 (en) | Computer program product for creating and matching personality profiles and related database, user interface and use | |
Bowles et al. | ADSO/FEMA specialty workshop on risk assessment for dams | |
DE102022126561A1 (en) | Database system for recording competencies existing within an organization | |
DE102023200300A1 (en) | Training a conversation system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R207 | Utility model specification | ||
R150 | Utility model maintained after payment of first maintenance fee after three years | ||
R151 | Utility model maintained after payment of second maintenance fee after six years |