16 июня 2021, среда, 18:00
VK.comFacebookTwitterTelegramInstagramYouTubeЯндекс.ДзенОдноклассники

НОВОСТИ

СТАТЬИ

PRO SCIENCE

МЕДЛЕННОЕ ЧТЕНИЕ

ЛЕКЦИИ

АВТОРЫ

01 апреля 2009, 07:54

Еще один журнал из «списка ВАК» опубликовал сгенерированную компьютером статью

История с «Корчевателем» не пошла впрок. «Вестник Томского государственного университета (Философия, социология, политология)» опубликовал статью «Дарвинизм» (*.pdf), явно сгенерированную компьютером. Однако, в отличие от случая с «Журналом научных публикаций аспирантов и докторантов», исключенным из списка ВАК, это не имело для журнала никаких административных последствий.

Напомним, что в сентябре-октябре 2008 года получила широкую известность история с публикацией в псевдонаучном «Журнале научных публикаций аспирантов и докторантов» (ЖНПАД) статьи «Корчеватель: алгоритм типичной унификации точек доступа и избыточности». Журнал входил по ряду дисциплин в рекомендательный список ВАК, и опубликованные в нем статьи предоставляли их авторам право подачи документов на защиту диссертации. После скандала, когда оказалось, что опубликованная статья была сгенерирована компьютером, но прошла научное "рецензирование", журнал исключили из списка ВАК. Само же слово «Корчеватель» стало в научной среде нарицательным.

Целью авторов проведенного научного розыгрыша было продемонстрировать низкий уровень рецензирования в журналах из списка ВАК. В генерации псевдонаучного текста участвовала программа SCIgen, созданная группой студентов Массачусетского технологического института (США), а также российская программа ЭТАП-3, разработанная в Лаборатории компьютерной лингвистики ИППИ РАН. Подробности этой истории освещались на «Полит.ру» и были обнародованы в газете «Троицкий вариант» (№13, 2008).

После этого случая  Рособрнадзор совместно с Комиссией РАН по борьбе с лженаукой создали специальную рабочую группу, которой было поручено провести аналогичные проверки (путем рассылки «для публикации» сгенерированных компьютером квазинаучных текстов) всех научных журналов списка ВАК, являющихся академическими или университетскими изданиями.

Оказалось, что из первых 50 проверенных журналов ВАКовского списка теста на научность не прошел лишь один: «Вестник Томского государственного университета (философия, социология, политология)». Он опубликовал статью «Дарвинизм», содержащую набор псевдонаучных высказываний такого содержания:

«1. Сатана. Надо было начать разговор о Дарвине прямо с Сатаны. Прямее дорога» (С. 89);

«Скажу по секрету: зубы, их первое появление и превращение в челюсть лично для меня − самый непроходимый момент, опровержение дарвинизма. И сами дёсна. Они же из другого вещества, нежели мясо, которым набито наше тело. Это вещество твердое, почти как кость, а когда зуб вырвут, оно рыхлое и кровь течет. Как это все на эволюционном пути в рот существам залетело и там закрепилось? Эволюционно. Не было, не было, а потом постепенно стало. Ерунда, чепуха. Детский лепет» (С. 104);

 «Какие-то «учёные» (огурцы мочёные)…Что про этих футурологов мочёных сказать? Дарвинисты!»  (С. 107);

«И боюсь даже произнести слово «мозг». Два килограмма весом несимпатичного вещества. Похож на кучу дерьма. Но не пахнет, думает!» (С. 108);

 «И чего я такой бешеный? Что это я так разволновался из-за дарвинизма? Тоже мне цацу нашёл. Ну, не цаца, а бяка, что ж печалиться о том?» (C. 111).

Судьба «Вестника Томского университета» и его редколлегии во главе с проф. С.С.Аванесовым висела на волоске. Журнал спасли юридические тонкости. Дело в том, что программа SCIgen, использованная для «Корчевателя», может генерировать тексты только в области computer science. Поэтому рабочая группа Рособрнадзора и  Комиссии РАН по борьбе с лженаукой воспользовалась для создания псевдонаучных текстов в различных областях науки другой программой – РОДОС, порождающей ерунду путем независимого комбинирования мелких фрагментов чужих исходных текстов. Программа была разработана группой аспирантов и студентов Московского Физико-технологического института и Института информационных проблем РАН.

Для создания текстов на темы биологии и эволюции компьютер использовал отдельные цитаты с креационистских сайтов и форумов русскоязычного Интернета (antidarvin.ru и т.п.). В результате у ряда членов рабочей группы возникли опасения: достаточно ли мелко были нарезаны исходные тексты, чтобы конечный продукт можно было считать заведомой бессмыслицей? Рабочей группе не удалось найти юридически точной формулировки.

Это не стало бы серьезным препятствием к принятию административных мер, если бы не недавнее обращение главного редактора «Журнала научных публикаций аспирантов и докторантов» В.В. Иванова в арбитражный суд с иском к Минобрнауки. Редактор «прославившегося»  журнала оспаривал исключение своего издания из списка ВАК, утверждая, что тем самым ограничивается свободная конкуренция и нарушается антимонопольное законодательство. Хотя суд вынес решение в пользу ответчика – Минобрнауки, ВАК решил не принимать мер в отношении томского журнала, тем более, что намечается общий пересмотр всего списка, и осенью 2009 г. будет объявлен новый список ВАК.

«Полит.ру» также публикует комментарий члена рабочей группы по проверке качества журналов, разработчика программы РОДОС, к.т.н. Михаила Ковалева. Беседовал Кирилл Бочаров.

Комментарий Михаила Ковалева

Вы удовлетворены результатами эксперимента?

И да, и нет. Как российский ученый, я рад, что уровень первых проверенных нами 50 научных журналов оказался не таким ужасным, как все думали после истории с «Корчевателем». А как автор программы я, конечно, хотел бы, чтобы порождаемые ею тексты были более похожи на настоящие. Должен сказать, что по результатам работы в следующую версию программы будут внесены некоторые изменения.

Зачем? Кто-то планирует продолжать испытывать журналы на прочность?

Да, насколько мне известно, эта работа продолжается. Есть еще и чисто научный интерес – тест Тьюринга никто не отменял. И потом, на свете есть не только журналы – есть стостраничные отчеты, которые вынуждены во множестве писать научные институты, есть патенты, тезисы конференций, в конце концов, есть студенческие рефераты и большие монографии...

Кажется, студенты обходятся просто скачиванием готовых рефератов с Интернета.

Да, но такие рефераты легко поймать при помощи Google или разных «антиплагиаторских» программ. А РОДОС делает текст неузнаваемым.

 РОДОС –  как расшифровывается это название?

Никак. Это не аббревиатура, а имя греческого острова. Когда случилась история с «Корчевателем», мы говорили, что не очень сложно написать программу, генерирующую человекоподобные тексты, а коллеги вспомнили басню Эзопа «Хвастун». Там рассказывается, как человеку, хваставшемся необыкновенными прыжками на далеком острове, сказали: ««Здесь Родос, здесь прыгай!» (Hic Rhodus, hic salta).

То есть, вы написали эту программу «на слабо»?

Не совсем так. Наша группа уже давно работает в области генерации связных текстов. Но поводом для написания этой программы, действительно, послужил «Корчеватель».

В чем отличие вашей программы от той, которая написала «Корчевателя»?

Программа SCIgen использует контекстно-свободную грамматику. Это хорошо известная алгоритмическая техника. В принципе, поскольку исходный код доступен, можно было бы переобучить программу на новом материале. Но это потребовало бы слишком больших усилий. Поэтому мы пошли другим путем. Мы использовали два известных алгоритма, которые были разработаны для других целей, но, как оказалось, подходят и в нашем случае, и, главное, не нуждаются в переобучении под каждую новую область.

Один алгоритм используется в известной библиографической биомедицинской базе данных PubMed, в которой есть понятие «близких по содержанию статей» (related articles). Алгоритм анализирует резюме статей и группирует их по сходству содержания. В нашей программе этот алгоритм составляет основу для статьи – последовательность фрагментов, в которых говорится про одно и то же.

Второй алгоритм называется «Марковский морфологический анализатор». Это лингвистическая техника, которая в нашем случае осуществляет редактирование последовательных фрагментов так, чтобы не было противоречий в грамматике – предложения должны согласовываться по времени, числу и т.п. Попросту говоря, текст должен быть «гладким».

Вам удалось этого добиться?

Мне кажется, да. Посмотрите сами – текст статьи доступен в Интернете.

Какие тексты бы брали в качестве исходных?

В основном использовались различные псевдонаучные Интернет-сайты и форумы. Кроме того, «для оживления слога» были добавлены «Письмо к ученому соседу» А.П.Чехова и некоторые рассказы М.М. Зощенко.

Вы видели рецензии на статьи, написанные вашей программой?

Да, некоторые из проверенных нами журналов не просто отвергли статьи, но и прислали рецензии. Надо сказать, они были довольно похожи. Как правило, это были довольно короткие тексты, в которых отмечалось отсутствие новизны, иногда – плохой план статьи, общая бессвязность. Многие рецензенты указывали на фактические ошибки, что не удивительно – в качестве источников текстов для статей использовались материалы довольно сомнительного происхождения.

Почему именно ваша разработка была применена?

Частично по стечению обстоятельств. Когда директора нашего института (ИИП РАН) Г.Л.Скуратова-Бельского включили в состав рабочей группы по исследованию качества журналов, он попросил нас ускорить необходимую работу по доводке РОДОСа. С другой стороны, мне не известны другие проекты такого рода.

Ваша программа доступна в Интернете?

Пока нет. На самом деле, мы не уверены, что это было бы правильно. Надо взвесить все за и против.

Обсудите в соцсетях

Главные новости

18:00 В 19:00 начнется трансляция церемонии награждения лауреатов премии «ЛибМиссия»
17:25 LETA: в Латвии по делу о шпионаже задержан гражданин РФ. Ранее по тому же делу задержали депутата латышского Сейма
17:04 Госдума окончательно приняла закон о повышении возраста приобретения охотничьего оружия до 21 года
16:54 Шугалей потребовал признать иноагентом главреда «Медиазоны» Сергея Смирнова
16:38 Сергей Собянин отменил свой запрет сидеть на скамейках в парках Москвы
16:28 Фигуранта дела «Сети» Андрея Чернова без адвоката допрашивали о двойном убийстве под Рязанью
16:20 «Как же так, президент Путин?»: в Женеве перед встречей президентов России и США установили биллборды с вопросами о Навальном
15:44 Участницу Pussy Riot Веронику Никульшину задержала полиция. Ее подозревают в намерении нарушить общественный порядок на Евро-2020
15:38 В Томске вооруженный мужчина ранил росгвардейца
15:05 «По-прежнему речи об этом не идет»: в Кремле прокомментировали возможность введения обязательной вакцинации по всей России
15:00 Китай готовится отправить первый экипаж на новую орбитальную станцию
14:52 Власти Петербурга запретили журналистам писать в чате для СМИ после их вопросов о коронавирусе
14:37 Суд запретил «скопинскому маньяку» Мохову ходить по барам и общаться со СМИ
14:21 «МБХ медиа»: суд отказал исключить «Медузу» из реестра СМИ-иноагентов, сославшись на отсутствующие документы
13:36 «Ему очень сильно угрожают»: мать оппозиционера Протасевича прокомментировала его участие в брифинге белорусских властей
13:29 В Москве и Подмосковье объявлена обязательная вакцинация для 60% работников в отдельных сферах деятельности
13:20 Госдума одобрила поправку о пяти годах колонии за пожертвования «нежелательным» организациям
13:17 Госдума ввела штрафы до 500 тыс. рублей за нарушение требований об обороте оружия
13:00 Пластиковые бутылки были превращены в ванилин с помощью бактерий
12:08 СК Белоруссии обратился к Дурову из-за Telegram-каналов, которые публикуют личные данные силовиков и прокуроров
11:54 Члены избиркомов обратились к Элле Памфиловой. Они предложили отказаться от трехдневного голосования на думских выборах
11:11 В Москве выявили новую разновидность COVID-19
11:03 В Кирове МВД хочет взыскать 283 тысячи рублей с организаторов протестной акции 23 января
10:48 Участницу Pussy Riot Веронику Никульшину оштрафовали второй раз за неделю. Где она сейчас — неизвестно
10:00 Загрязнение воды антидепрессантами делает речных раков смелее
09:50 Мурманских коммунистов оштрафовали за возложение цветов к памятнику Ленину на Первомай
09:25 В Петербурге активистку оштрафовали за одиночный пикет в поддержку художницы Цветковой
08:49 В мэрию Якутска пришли с обысками из-за нарушений при ремонте дорог
08:26 Владельцы взорвавшейся новосибирской АЗС занизили ее класс опасности и вносили неверные данные в документы
08:02 Казанского стрелка доставили в московское СИЗО
07:34 В Женеве накануне встречи Путина и Байдена провели акцию в поддержку Навального
06:57 Президентом Перу избрали кандидата от левой партии Педро Кастильо
06:21 Армия Израиля нанесла серию авиаударов по сектору Газа
05:41 Главу Коми Уйбу госпитализировали с коронавирусом. В феврале он делал прививку «Спутником V»
15.06 21:59 «Назовем это третья волна»: главврач Коммунарки заявил, что в пациентов на ИВЛ в этой больнице больше чем когда-либо ранее
15.06 21:16 Создатели Cyberpunk 2077 заявили о возвращении игры в продажу. Это была самая ожидаемая игра прошлого года
15.06 20:45 Власти согласовали фестиваль «Дикая мята» на фоне третьей волны коронавируса в России. Фестиваль соберет тысячи зрителей
15.06 20:00 Парламент Венгрии запретил пропаганду ЛГБТ в школах
15.06 19:01 Полиция задержала главврача рязанского госпиталя, где при пожаре погибли три человека
15.06 18:37 Минюст признал иноагентом самарское СМИ из-за гранта Союза журналистов России
15.06 18:20 «Дождь» заявил, что никогда не призывал к противоправным действиям
15.06 17:50 Госдума во втором чтении приняла поправку о повышении возраста приобретения охотничьего оружия до 21 года
15.06 17:21 Азербайджан и Турция подписали декларацию о союзнических отношениях
15.06 16:59 Авиакомпания Ryanair заявила о «серьезном давлении» на пилота вынужденно севшего в Минске самолета. На его борту находился Роман Протасевич
15.06 16:44 «МБХ медиа»: мать застреленного милиционерами в 2007 году инвалида выиграла дело в ЕСПЧ
15.06 16:33 В пакистанской провинции Синд будут блокировать телефоны отказавшихся от вакцинации граждан
15.06 16:08 Песков об исключении «Дождя» из кремлевского пула: «Телеканал выступал в роли организатора незаконных акций»
15.06 16:02 «Медиазону» могут признать иноагентом. Комиссия Госдумы послала в «компетентные органы» данные о ее зарубежном финансировании
15.06 15:46 «Левада-Центр»: россияне впервые назвали Чехию враждебным государством
15.06 15:29 Сотрудница МИД получила пять лет колонии за хищение 1$ млн из министерства. Деньги хранились в коробках из-под водки
«АвтоВАЗ» «ВКонтакте» «Газпром» «Зенит» «Мемориал» «Мистраль» «Оборонсервис» «Роснефть» «Спартак» «Яблоко» Абхазия Австралия Австрия Азербайджан Антимайдан Аргентина Арктика Армения Афганистан Аэрофлот Башкирия Белоруссия Бельгия Болгария Бразилия Бурятия ВВП ВКС ВМФ ВПК ВТБ ВЦИОМ Ватикан Великобритания Венгрия Венесуэла Владивосток Внуково Волгоград ГИБДД ГЛОНАСС Генпрокуратура Германия Голливуд Госдеп Госдума Греция Гринпис Грузия ДТП Дагестан Дания Домодедово Донецк ЕГЭ ЕСПЧ Евровидение Еврокомиссия Евромайдан Евросоюз Египет Екатеринбург ЖКХ Израиль Ингушетия Индия Индонезия Интерпол Ирак Иран Испания Италия Йемен КНДР КПРФ Казань Казахстан Калининград Камчатка Канада Каталония Кемерово Киев Кипр Киргизия Китай Коми Конституция Красноярск Кремль Крым Куба Курилы ЛГБТ ЛДПР Латвия Ливия Литва Лондон Луганск МВД МВФ МГУ МКС МОК МЧС Малайзия Мексика Минздрав Минкульт Минобороны Минобрнауки Минпромторг Минсельхоз Минск Минтранспорта Минтруд Минфин Минцифры Минэкономразвития Минэнерго Минюст Молдавия Мосгордума Мосгорсуд Москва НАСА Нигерия Нидерланды Новосибирск Норвегия ОАЭ ОБСЕ ООН ОПЕК Одесса Омск ПДД Пакистан Паралимпиада Париж Пентагон Польша Приморье РАН РЖД РПЦ РФС Росавиация Росгвардия Роскомнадзор Роскосмос Роспотребнадзор Россельхознадзор Россия Росстат Ростех Ростуризм СМИ СССР США Сахалин Сбербанк Севастополь Сербия Сирия Сколково Славянск Сочи Таджикистан Таиланд Татарстан Трансаэро Турция УЕФА Узбекистан Украина ФАС ФБР ФИФА ФСБ ФСИН ФСКН Филиппины Финляндия Франция Хакасия Харьков ЦИК ЦРУ ЦСКА Центробанк Чехия Чечня Швейцария Швеция Шереметьево Эбола Эстония ЮКОС Якутия Яндекс Япония авиакатастрофа автопром алкоголь амнистия арест армия археология астрономия аукционы бактерии банкротство беженцы безработица бензин беспилотник беспорядки биатлон бизнес благотворительность блогосфера бокс болельщики вандализм взрыв взятка вирусы вузы выборы гаджеты генетика гомосексуализм госбюджет госзакупки госизмена демография деньги дети доллар допинг драка евро журналисты законотворчество здоровье землетрясение изнасилование импорт инвестиции инновации интернет инфляция ипотека искусство ислам исследования история казнь кино кораблекрушение коронавирус коррупция космос кража кредиты культура лингвистика литература математика медиа медицина метро мигранты монархия мошенничество музыка наводнение налоги нанотехнологии наркотики наука недвижимость нейробиология некролог нефть образование обрушение общество ограбление оппозиция опросы оружие офшор палеонтология педофилия пенсия пиратство планетология погранвойска пожар полиция похищение правительство право православие преступность продовольствие происшествия психология пытки ракета рейтинги реклама религия ретейл робототехника рубль санкции связь сепаратизм следствие смартфоны смертность социология спецслужбы спутники статистика страхование стрельба строительство суды суицид тарифы театр телевидение теракт терроризм технологии транспорт туризм убийство фармакология физика фоторепортаж футбол хакеры химия хоккей хулиганство цензура школа шпионаж экология экономика экспорт экстремизм этология «Единая Россия» «Исламское государство» «Нафтогаз Украины» «Правый сектор» «Северный поток» «Справедливая Россия» «болотное дело» Александр Бастрыкин Александр Лукашенко Александр Новак Александр Турчинов Алексей Кудрин Алексей Навальный Алексей Улюкаев Алтайский край Амурская область Анатолий Сердюков Ангела Меркель Антон Силуанов Аркадий Дворкович Арсений Яценюк Астраханская область Барак Обама Басманный суд Башар Асад Белый дом Борис Немцов Бутовский полигон Валентина Матвиенко Верховная Рада Верховный суд Виктор Янукович Виталий Милонов Виталий Мутко Владимир Жириновский Владимир Зеленский Владимир Маркин Владимир Мединский Владимир Путин Вячеслав Володин Дальний Восток День Победы Дмитрий Медведев Дмитрий Песков Дмитрий Рогозин Дональд Трамп Евгения Васильева Забайкальский край Интервью ученых Ирина Яровая Иркутская область История человечества Калужская область Кирилл Серебренников Кировская область Конституционный суд Космодром Байконур Краснодарский край Красноярский край Ксения Собчак Ленинградская область МИД России Мария Захарова Михаил Прохоров Михаил Саакашвили Михаил Ходорковский Московская область Мурманская область Надежда Савченко Наталья Поклонская Нижний Новгород Николас Мадуро Нобелевская премия Новосибирская область Новый год Олег Дерипаска Олимпийские игры Ольга Голодец Павел Дуров Палестинская автономия Папа Римский Первый канал Пермский край Петр Порошенко Почта России Приморский край Рамзан Кадыров Реджеп Эрдоган Республика Карелия Ростовская область Самарская область Саратовская область Саудовская Аравия Свердловская область Сергей Лавров Сергей Нарышкин Сергей Полонский Сергей Собянин Сергей Шойгу Следственный комитет Совбез ООН Совет Федерации Ставропольский край Счетная палата Тереза Мэй Тюменская область Франсуа Олланд Хабаровский край Хиллари Клинтон Человек дня Челябинская область Черное море Эдвард Сноуден Элла Памфилова Эльвира Набиуллина Эммануэль Макрон Южная Корея Юлия Тимошенко Юрий Чайка авторское право администрация президента акции протеста атомная энергия баллистические ракеты банковский сектор биология большой теннис визовый режим военная авиация выборы губернаторов газовая промышленность гражданская авиация гуманитарная помощь декларации чиновников домашние животные дороги России информационные технологии климат Земли компьютерная безопасность космодром Восточный крушение вертолета легкая атлетика лесные пожары междисциплинарные исследования мобильные приложения морской транспорт некоммерческие организации общественный транспорт патриарх Кирилл пенсионная реформа пищевая промышленность права человека правозащитное движение преступления полицейских публичные лекции российское гражданство русские националисты русский язык сельское хозяйство сотовая связь социальные сети стихийные бедствия телефонный терроризм уголовный кодекс фигурное катание финансовый рынок фондовая биржа химическое оружие хроники обнуления эволюция экономический кризис ядерное оружие Великая Отечественная война Всемирная организация здравоохранения Вторая мировая война Ирак после войны Ким Чен Ын Революция в Киргизии Российская академия наук Стихотворения на случай Федеральная миграционная служба Федеральная таможенная служба борьба с курением выборы мэра Москвы здравоохранение в России связь и телекоммуникации тюрьмы и колонии Совет по правам человека аварии на железной дороге естественные и точные науки закон об «иностранных агентах» компьютеры и программное обеспечение видеозаписи публичных лекций «Полит.ру» Новые технологии, инновации Сочи 2014 рейтинг Forbes Аль-Каида Кабардино-Балкария Левада-Центр Нью-Йорк Санкт-Петербург отставки-назначения шоу-бизнес Ростов-на-Дону ЧМ-2018 Книга. Знание ВИЧ/СПИД Путин20летназад новость20летназад Apple Bitcoin Boeing Facebook G20 Google iPhone IT Microsoft NATO PRO SCIENCE видео ProScience Театр Pussy Riot Telegram Twitter Wikileaks YouTube

Редакция

Электронная почта: polit@polit.ru
Телефон: +7 929 588 33 89
Яндекс.Метрика Top.Mail.Ru
Свидетельство о регистрации средства массовой информации
Эл. № 77-8425 от 1 декабря 2003 года. Выдано министерством
Российской Федерации по делам печати, телерадиовещания и
средств массовой информации. Выходит с 21 февраля 1998 года.
При любом использовании материалов веб-сайта ссылка на Полит.ру обязательна.
При перепечатке в Интернете обязательна гиперссылка polit.ru.
Все права защищены и охраняются законом.
© Полит.ру, 1998–2021.