RU2610685C2 - Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов - Google Patents

Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов Download PDF

Info

Publication number
RU2610685C2
RU2610685C2 RU2012131996A RU2012131996A RU2610685C2 RU 2610685 C2 RU2610685 C2 RU 2610685C2 RU 2012131996 A RU2012131996 A RU 2012131996A RU 2012131996 A RU2012131996 A RU 2012131996A RU 2610685 C2 RU2610685 C2 RU 2610685C2
Authority
RU
Russia
Prior art keywords
document
fragments
expert
rating
versions
Prior art date
Application number
RU2012131996A
Other languages
English (en)
Other versions
RU2012131996A (ru
Inventor
Антон Николаевич Баронов
Василий Владимирович Буров
Ирина Викторовна Глебова
Юрий Валериевич Катков
Елена Георгиевна Кошикова
Юрий Леонидович Льноградский
Александр Анатольевич Ослон
Роман Викторович Парфёнов
Евгений Дмитриевич Патаракин
Original Assignee
Общероссийский общественный фонд "Общественное мнение"
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Общероссийский общественный фонд "Общественное мнение" filed Critical Общероссийский общественный фонд "Общественное мнение"
Priority to RU2012131996A priority Critical patent/RU2610685C2/ru
Publication of RU2012131996A publication Critical patent/RU2012131996A/ru
Application granted granted Critical
Publication of RU2610685C2 publication Critical patent/RU2610685C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N5/00Computing arrangements using knowledge-based models
    • G06N5/04Inference or reasoning models
    • G06N5/043Distributed expert systems; Blackboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Document Processing Apparatus (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Изобретение относится к экспертно-аналитической информационной системе удаленной рейтинговой оценки законопроектов с участием территориально удаленных экспертов. Технический результат заключается в автоматизации процесса формирования документа за счет декомпозиции документа на логически связанные фрагменты, формирования версий фрагментов документа и возможности компоновки итогового документа из различных версий фрагментов документа с наибольшими рейтингами. Система содержит объединенные сетью передачи данных центральный сервер, модули информационного взаимодействия, входящие в состав блоков системы, средство хранения информации, удаленное автоматизированное рабочее место зарегистрированного участника-эксперта, при этом центральный сервер включает блок декомпозиции исходного документа на фрагменты, обеспечивающий автоматизированную структурную фрагментацию исходного документа, блок формирования рейтинга исходных и авторских версий фрагментов, обеспечивающий корректировку рейтингов и определение версий фрагментов документов с наибольшим количеством баллов, блок формирования итогового проекта документа, обеспечивающий компоновку итоговой версии проекта документа из версий фрагментов, набравших наибольшее количество баллов, блок аутентификации и формирования рейтинга экспертов. 6 з.п. ф-лы, 1 ил.

Description

Изобретение относится к области информационных технологий и вычислительной техники, а именно к экспертно-аналитической информационной системе удаленной рейтинговой оценки и доработки законопроектов с участием территориально удаленных экспертов.
Из уровня техники известна система оценивания, содержащая, по меньшей мере, сервер с блоком оценки результатов, блоком анализа и обработки результатов, блоком выдачи результатов, соединенный через сеть передачи данных, по меньшей мере, с одним устройством ввода данных, отличающаяся тем, что блок оценки результатов выполнен, по меньшей мере, в виде последовательно соединенных блока расчета с применением переходной матрицы, блока распределения полученных результатов по параметрам сертификационной оценки и блока экспертной оценки и корректировки полученных результатов, причем один из выходов блока экспертной оценки и корректировки полученных результатов соединен с одним из входов блока распределения полученных результатов по параметрам сертификационной оценки, а блок анализа и обработки результатов выполнен в виде последовательно соединенных блока расчета с применением обобщенной матрицы и блока распределения общей оценки знаний по параметрам сертификационной оценки, блока экспертной оценки и коррекции итоговых результатов, вход которого соединен с выходом блока распределения общей оценки знаний по параметрам сертификационной оценки и с входом блока выдачи результатов, выполненного в виде блока выдачи результатов по параметрам сертификационной оценки, а вход блока расчета с применением обобщенной матрицы соединен с выходами каждого блока распределения полученных результатов по параметрам сертификационной оценки (RU 77716 U1, МПК: G09B 7/00, опубликован 27.10.2008).
Известно техническое решение, относящееся к устройству для принятия решений в экспертных системах, которое может быть использовано для согласования оценок и визуального контроля в экспертных системах коллективного пользования. Известное решение содержит группу блоков ввода оценок параметров объекта, группу блоков ввода оценок компетентности эксперта, группу задатчиков ранга эксперта, группу блоков сравнения, блок индикации, две группы коммутаторов, блок управления, группу блоков формирования оценок. В устройство введены три регистра рангов, регистр числа оцениваемых параметров, регистр общего числа экспертов, регистр фактического числа экспертов, четыре коммутатора, две группы блоков усреднения, два блока усреднения, блок формирования оценки (SU 1770961 A1, G06F 13/00, G06F 15/20, опубликовано 23.10.1992 г.).
Общим недостатком указанных решений является то, что рассмотренные системы имеют узкую специализацию и не могут быть использованы для целей экспертной оценки и доработки проектов нормативно-правовых актов.
Наиболее близким аналогом заявленного технического решения по своей структуре является система поддержки сетевых экспертных процедур с участием территориально удаленных экспертов. Указанная система содержит сервер, по крайней мере, одно автоматизированное рабочее место эксперта, по крайней мере, одно автоматизированное рабочее место руководителя, по крайней мере, одно автоматизированное рабочее место модератора, по крайней мере, одно автоматизированное рабочее место оператора, базу данных экспертов, базу данных тезауруса, базу данных иерархических и/или когнитивных моделей, блок формирования рейтинга экспертов, блок формирования взвешенных оценок экспертов, а также блок формирования стратегических экспертных оценок с применением моделирования, причем, сервер включен в глобальную и/или локальную сеть пользователей (патент РФ №104344 U1, МПК 12: G06F 17/30, опубликовано 10.05.2011 г.).
Недостатком известной системы является то, что она предназначена только для проведения экспертизы при принятии управленческих решений и не предусматривает процедуру оценки документа, фрагментов документа, возможность формирования авторских версий фрагментов, а также их рейтинга с возможностью создания улучшенной версии исходного документа.
Технический результат заключается в автоматизации процесса формирования документа за счет декомпозиции документа на логически связанные фрагменты, формирования версий фрагментов документа и возможности компоновки итогового документа из различных версий фрагментов документа с наибольшими рейтингами.
Устройство и дизайн технологической платформы обеспечивают декомпозицию исходного варианта документа, визуализацию внутренних и внешних связей, коллективное конструирование улучшенных статей законопроекта и создание («сборку») единого итогового документа.
Объектом автоматизации является процесс коллективного редактирования и согласования версий структурных элементов (фрагментов) нормативно-правовых документов авторизованными пользователями (участниками).
Входящие в состав системы блоки в процессе функционирования осуществляют обмен информацией на основе открытых форматов обмена данными, используя для этого входящие в их состав модули информационного взаимодействия.
Для обеспечения информационного обмена блоки системы работают в составе единой вычислительной сети, построенной по технологии Интернет/интранет.
В качестве основного средства связи между блоками системы используется локальная вычислительная сеть, построенная по технологии Ethernet.
В качестве базового протокола сетевого и межсетевого взаимодействия используется ТСР/IP (Transfer Control Protocol/Internet Protocol - протокол управления передачей/протокол-Интернет) - стек протоколов Интернет.
Заявленная система обеспечивает:
- создание единой среды для проведения общественной экспертизы нормативных актов в Интернет;
- повышение качества нормативных актов за счет более широкого привлечения заинтересованных сторон и, как следствие, повышение эффективности отрасли и уровня общественной поддержки внедряемых решений ведомства;
- расширение экспертной базы ведомств за счет формирования пула «народных экспертов» из числа наиболее конструктивных и продуктивных участников экспертной системы.
Экспертно-аналитическая система может быть использована:
а) в решении задач различных министерств и ведомств в рамках ведущейся ими нормотворческой деятельности;
б) в решении задач выработки стратегических документов крупных корпораций;
в) в решении задач формулирования консолидированного мнения институтов гражданского общества;
г) в иных научных и технических разработках в сфере социально-сетевых технологий и краудсорсинговых систем.
Указанный технический результат достигается тем, что заявленная экспортно-аналитическая система содержит объединенные сетью передачи данных центральный сервер, по меньшей мере одно средство хранения информации и, по меньшей мере, одно удаленное автоматизированное рабочее место эксперта. При этом центральный сервер включает блок декомпозиции исходного документа на фрагменты, блок формирования рейтинга исходных и авторских версий фрагментов, блок формирования итогового проекта документа, блок аутентификации и формирования рейтинга экспертов. Средство хранения информации включает блок хранения исходных и авторских версий фрагментов, блок хранения информации об экспертах и их рейтингах, блок хранения индивидуальных оценок и рейтингов фрагментов.
На Фиг. 1 показана структурная схема заявленной экспертно-аналитической системы.
Система состоит из следующих обязательных компонентов, объединенных сетью передачи данных:
- центральный сервер,
- по меньшей мере, одно средство хранения информации и,
- по меньшей мере, одно удаленное автоматизированное рабочее место зарегистрированного участника-эксперта.
Центральный сервер включает:
1) блок декомпозиции исходного документа на фрагменты,
2) блок формирования рейтинга исходных и авторских версий фрагментов,
3) блок формирования итогового проекта документа,
4) блок аутентификации и формирования рейтинга экспертов.
Средство хранения информации включает:
1) блок хранения исходных и авторских версий фрагментов документа,
2) блок хранения информации об экспертах и их рейтингах,
3) блок хранения индивидуальных оценок и рейтингов фрагментов документа.
Автоматизированное рабочее место эксперта представляет собой набор необходимых средств, обеспечивающих возможность участия любого зарегистрированного лица в процедуре сетевой экспертной оценки. В обычном случае автоматизированное рабочее место подразумевает собой персональный компьютер с установленным на нем минимальным набором программного обеспечения и средств коммуникации, позволяющих получать, вводить и передавать соответствующую информацию, касающуюся предмета сетевой экспертной процедуры.
В зависимости от конкретной ситуации и предъявляемых требований к процедуре в состав экспертно-аналитической системы может дополнительно входить автоматизированное рабочее место администратора, руководителя или фасилитатора либо любая их комбинация.
В качестве эксперта в указанной системе может принимать участие любое заинтересованное лицо, которое в установленном порядке прошло регистрацию в данной системе и отвечает ее обязательным требованиям. После успешной аутентификации в системе с удаленного компьютера любой зарегистрированный пользователь может принимать равноправное участие в сетевой процедуре, оценивать исходные и авторские версии документа, самостоятельно формировать и размещать в открытый доступ участников системы авторские версии исходных фрагментов документа.
Количество экспертов, принимающих участие в работе системы, может быть неограниченным и, по существу, определяется только техническими возможностями системы.
Блок декомпозиции исходного документа отвечает за автоматизированную первичную обработку исходного документа с целью его структурной фрагментации на основании логических и семантических связей между отдельными текстовыми участками документа. В качестве анализируемого документа в данной системе предпочтительно рассматривается проект нормативно-правового акта.
Результатом указанной декомпозиции документа является его разбивка на фрагменты и визуальное представление отдельных фрагментов и структуры документа, а также логических и других связей между ними. Такая форма представления информации облегчает участникам возможность изучать и оценивать отдельно каждый обособленный фрагмент документа и присваивать ему определенный рейтинг.
Фрагменты исходного документа поступают на хранение в Блок хранения исходных и авторских версий фрагментов документа. В этом блоке хранятся все исходные фрагменты, а также все модифицированные версии фрагментов, предложенные самими участниками процедуры.
Вся информация об участниках и их рейтингах хранится в Блоке хранения информации об участниках и их рейтингах. Эта информация постоянно дополняется и обновляется в связи с появлением новых участников и необходимостью корректировки рейтингов ранее зарегистрированных участников.
Блок аутентификации и формирования рейтинга участников обеспечивает возможность регистрации новых участников (экспертов), авторизации ранее зарегистрированных участников, а также автоматизированную обработку данных по каждому участнику с целью определения его рейтинга. Рейтинг определяется по совокупности критериев, таких как количество выставленных оценок, их качественные показатели, такие как обоснованность и др., количество созданных авторских версий фрагментов, рейтинг авторских версий, созданных конкретным участником.
Блок формирования рейтинга исходных и авторских фрагментов документа обеспечивает обработку индивидуальных оценок и рейтингов, выставленных участниками в отношении исходного фрагмента или его авторской версии. Исходные оценки, а также результаты математической обработки индивидуальных оценок поступают на хранение в Блок хранения индивидуальных оценок и рейтингов фрагментов. В свою очередь, информация из указанного блока хранения постоянно поступает в Блок формирования рейтинга исходных и авторских фрагментов для корректировки рейтингов и выделения лидирующих по количеству баллов версий фрагментов документов.
Версии фрагментов документов, набравшие наибольшее количество баллов в результате индивидуальных оценок участников, поступают в Блок формирования итогового проекта документа. В этом блоке происходит компоновка итоговой версии проекта документа из «лидирующих» версий фрагментов.
Работа заявленной экспертно-аналитической системы в целом выглядит следующим образом.
Исходный документ, например законопроект, вводится в блок декомпозиции, где он проходит автоматизированную обработку и на выходе представляет собой набор отдельных фрагментов текста, разделенных чаще всего на основании одного наиболее весомого критерия.
Однако заявленная система подразумевает возможность выделения отдельных фрагментов исходного документа на основании нескольких критериев. Любой участник может выбрать наиболее удобную для себя форму декомпозиции документа, а также задать параметры и уровень глубины декомпозиции документа.
Вся информация об отдельных фрагментах и их связях между собой представлена в графическом виде, что облегчает навигацию и не требует специальных навыков работы с системой.
Все фрагменты после декомпозиции хранятся в специальном Блоке хранения вместе с авторскими версиями фрагментов. Выход из блока декомпозиции связан однонаправленно с входом в Блок хранения исходных и авторских версий фрагментов.
В свою очередь, указанный Блок хранения имеет двусторонне направленную связь с Блоком формирования рейтинга исходных и авторских фрагментов документа. В последнем происходит обработка индивидуальных оценок экспертов (участников) и формирование рейтинга фрагментов, поступивших из вышеуказанного Блока хранения.
Индивидуальные оценки участников и рейтинги фрагментов поступают на хранение в Блок хранения индивидуальных оценок и рейтингов фрагмента. Указанный Блок хранения также имеет двусторонне направленную связь с Блоком формирования рейтинга, так как между этими блоками происходит постоянный обмен информацией с постоянной корректировкой рейтингов.
Блок формирования рейтинга исходных и авторских фрагментов имеет двусторонне направленную связь с Блоком аутентификации и формирования рейтинга участников. Из последнего поступает информация в виде индивидуальных оценок и авторских версий участников, а из блока формирования рейтинга исходных и авторских фрагментов в блок аутентификации поступает информация, влияющая на индивидуальный рейтинг участников.
Блок аутентификации имеет двусторонне направленную связь с Блоком хранения информации об участниках и их рейтингах.
Таким образом, с одной стороны, рейтинг каждого эксперта определяется количеством и качеством выставленных им оценок и сформированных авторских версий фрагментов. С другой стороны, рейтинг конкретного фрагмента зависит не только от количества индивидуальных оценок экспертов, но и от рейтинга этих экспертов. Т.е. чем выше рейтинг эксперта, тем выше его вклад в рейтинг конкретного фрагмента документа. И наоборот, чем выше рейтинг конкретного фрагмента, тем выше будет рейтинг эксперта - автора данного фрагмента.
Рейтинг эксперта корректируется после каждой выставленной им оценки с учетом показателей значимости этой оценки для итогового документа, которая может менять свою значимость с течением времени. Тот же принцип действует при формировании экспертом авторской версии фрагмента документа. В этом случае учитывается количество и характер внесенных изменений в исходный фрагмент, оценки других участников авторской версии и др.
Таким образом, система осуществляет индивидуализированное постадийное вычисление рейтинга каждого эксперта, причем наибольший вклад в рейтинг вносят правильно обоснованные и корректные оценки, активный вклад в формирование авторских версий фрагментов исходного документа.
Участники (эксперты), набравшие определенное количество баллов, могут быть ранжированы по нескольким уровням, начиная от «новичка» и заканчивая «экспертом». Участники, набравшие наибольшее количество баллов, могут быть отнесены к группе экспертов, привлекаемых на постоянной основе к оценке наиболее важных документов, разбору сложных ситуаций и др.
Выход из Блока формирования рейтинга исходных и авторских фрагментов связан однонаправленно с входом в Блок формирования итогового проекта документа. В последнем происходит финальная процедура, в результате которой формируется готовый продукт - итоговый улучшенный проект документа. В предпочтительном случае таким документом является проект нормативно-правового акта.

Claims (7)

1. Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов с участием территориально удаленных экспертов, содержащая объединенные сетью передачи данных центральный сервер, модули информационного взаимодействия, входящие в состав блоков системы, по меньшей мере одно средство хранения информации и по меньшей мере одно удаленное автоматизированное рабочее место зарегистрированного участника-эксперта, отличающаяся тем, что центральный сервер включает блок декомпозиции исходного документа на фрагменты, связанный с блоком формирования рейтинга исходных и авторских версий фрагментов, который имеет связь с блоком формирования итогового проекта документа, который имеет связь с блоком аутентификации и формирования рейтинга экспертов; средство хранения информации включает блок хранения исходных и авторских версий фрагментов, который имеет связь с блоком хранения информации об экспертах и их рейтингах, который связан с блоком хранения индивидуальных оценок и рейтингов фрагментов, при этом блок декомпозиции исходного документа обеспечивает автоматизированную структурную фрагментацию исходного документа на основании логических и семантических связей между отдельными текстовыми участками документа, блок формирования рейтинга исходных и авторских фрагментов обеспечивает корректировку рейтингов и определение версий фрагментов документов с наибольшим количеством баллов, блок формирования итогового проекта документа обеспечивает компоновку итоговой версии проекта документа из версий фрагментов, набравших наибольшее количество баллов в результате индивидуальных оценок участников.
2. Система по п. 1, отличающаяся тем, что в качестве эксперта выступает любой удаленный участник, прошедший аутентификацию в системе.
3. Система по п. 1, отличающаяся тем, что она дополнительно содержит автоматизированное рабочее место руководителя.
4. Система по п. 1, отличающаяся тем, что она дополнительно содержит автоматизированное рабочее место фасилитатора.
5. Система по п. 1, отличающаяся тем, что она дополнительно содержит автоматизированное рабочее место администратора.
6. Система по п. 1, отличающаяся тем, что взаимодействие между центральным сервером и по меньшей мере одним удаленным автоматизированным рабочим местом эксперта осуществляется посредством единой вычислительной сети, построенной по технологии Интернет или Интранет.
7. Система по п. 1, отличающаяся тем, что взаимодействие между центральным сервером и средством хранения информации осуществляется посредством локальной вычислительной сети, построенной по технологии Ethernet.
RU2012131996A 2012-07-26 2012-07-26 Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов RU2610685C2 (ru)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2012131996A RU2610685C2 (ru) 2012-07-26 2012-07-26 Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2012131996A RU2610685C2 (ru) 2012-07-26 2012-07-26 Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов

Publications (2)

Publication Number Publication Date
RU2012131996A RU2012131996A (ru) 2014-10-27
RU2610685C2 true RU2610685C2 (ru) 2017-02-14

Family

ID=53380318

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2012131996A RU2610685C2 (ru) 2012-07-26 2012-07-26 Экспертно-аналитическая информационная система удаленной рейтинговой оценки законопроектов

Country Status (1)

Country Link
RU (1) RU2610685C2 (ru)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2666646C1 (ru) * 2017-12-28 2018-09-11 Общество с ограниченной ответственностью "ВикиВот!" Экспертно-аналитическая информационная система формализации задач и выработки решения сформулированных задач

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6327590B1 (en) * 1999-05-05 2001-12-04 Xerox Corporation System and method for collaborative ranking of search results employing user and group profiles derived from document collection content analysis
RU104344U1 (ru) * 2011-01-14 2011-05-10 Некоммерческое партнерство по научным исследованиям и социальному развитию АНАЛИТИЧЕСКОЕ АГЕНТСТВО "НОВЫЕ СТРАТЕГИИ" Система поддержки сетевых экспертных процедур
US8122367B2 (en) * 2003-07-08 2012-02-21 Us Lynx Llc Automated publishing system that facilitates collaborative editing and accountability through virtual document architecture
US20120185759A1 (en) * 2011-01-13 2012-07-19 Helen Balinsky System and method for collaboratively editing a composite document

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6327590B1 (en) * 1999-05-05 2001-12-04 Xerox Corporation System and method for collaborative ranking of search results employing user and group profiles derived from document collection content analysis
US8122367B2 (en) * 2003-07-08 2012-02-21 Us Lynx Llc Automated publishing system that facilitates collaborative editing and accountability through virtual document architecture
US20120185759A1 (en) * 2011-01-13 2012-07-19 Helen Balinsky System and method for collaboratively editing a composite document
RU104344U1 (ru) * 2011-01-14 2011-05-10 Некоммерческое партнерство по научным исследованиям и социальному развитию АНАЛИТИЧЕСКОЕ АГЕНТСТВО "НОВЫЕ СТРАТЕГИИ" Система поддержки сетевых экспертных процедур

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2666646C1 (ru) * 2017-12-28 2018-09-11 Общество с ограниченной ответственностью "ВикиВот!" Экспертно-аналитическая информационная система формализации задач и выработки решения сформулированных задач

Also Published As

Publication number Publication date
RU2012131996A (ru) 2014-10-27

Similar Documents

Publication Publication Date Title
Toh et al. Creativity in design teams: the influence of personality traits and risk attitudes on creative concept selection
Jia et al. What makes employees more proactive? Roles of job embeddedness, the perceived strength of the HRM system and empowering leadership
Sharkey et al. An approach to consensus building using the Delphi technique: developing a learning resource in mental health
Turan et al. A methodological framework to analyze stakeholder preferences and propose strategic pathways for a sustainable university
Theodoraki et al. The effectiveness of incubators’ co-opetition strategy in the entrepreneurial ecosystem: Empirical evidence from France
Heims Explaining coordination between national regulators in EU agencies: The role of formal and informal social organization
Schmidthuber et al. Trajectories of local open government: An empirical investigation of managerial and political perceptions
US20130074180A1 (en) User certification in a structure design, analysis, and implementation system
Woodworth et al. Development and pilot testing of entrustable professional activities for US anesthesiology residency training
Ogbeifun et al. Achieving consensus devoid of complicity: Adopting the Delphi technique
Kyei-Poku et al. Authentic leadership and citizenship behavior: A path through fairness and belongingness
Kiger et al. A new method for group decision making and its application in medical trainee selection
Stoyanov et al. Concept mapping—An effective method for identifying diversity and congruity in cognitive style
Nasiritousi Shapers, brokers and doers: The dynamic roles of non-state actors in global climate change governance
Sousa‐Vieira et al. Mining relationships in learning‐oriented social networks
US8285521B1 (en) Certification controls for a structure design, analysis, and implementation system
Uneke et al. Promoting evidence informed policymaking for maternal and child health in Nigeria: lessons from a knowledge translation workshop
Hegele Explaining bureaucratic power in intergovernmental relations: A network approach
Fırtın et al. Calculating pay in Swedish schools: Accounting, performativity, and misfires
Rochmansjah et al. The Digitalization of Public Service Assurance
Williams et al. Factors associated with staff perceptions of the effectiveness of family group conferences
Famenka Research ethics in the context of transition: gaps in policies and programs on the protection of research participants in the selected countries of central and eastern Europe
Navarro et al. Analysis of the prevalence, evolution, and severity of dishonest behaviors of Spanish graduate students: the vision of academic heads
Mamokhere Leaving no one behind in a participative integrated development planning process in South Africa
Bhakta et al. Training needs of early career researchers in research-intensive universities