19 апреля 2019, пятница, 02:21
VK.comFacebookTwitterTelegramInstagramYouTubeЯндекс.Дзен

НОВОСТИ

СТАТЬИ

PRO SCIENCE

МЕДЛЕННОЕ ЧТЕНИЕ

ЛЕКЦИИ

АВТОРЫ

01 апреля 2009, 07:54

Еще один журнал из «списка ВАК» опубликовал сгенерированную компьютером статью

История с «Корчевателем» не пошла впрок. «Вестник Томского государственного университета (Философия, социология, политология)» опубликовал статью «Дарвинизм» (*.pdf), явно сгенерированную компьютером. Однако, в отличие от случая с «Журналом научных публикаций аспирантов и докторантов», исключенным из списка ВАК, это не имело для журнала никаких административных последствий.

Напомним, что в сентябре-октябре 2008 года получила широкую известность история с публикацией в псевдонаучном «Журнале научных публикаций аспирантов и докторантов» (ЖНПАД) статьи «Корчеватель: алгоритм типичной унификации точек доступа и избыточности». Журнал входил по ряду дисциплин в рекомендательный список ВАК, и опубликованные в нем статьи предоставляли их авторам право подачи документов на защиту диссертации. После скандала, когда оказалось, что опубликованная статья была сгенерирована компьютером, но прошла научное "рецензирование", журнал исключили из списка ВАК. Само же слово «Корчеватель» стало в научной среде нарицательным.

Целью авторов проведенного научного розыгрыша было продемонстрировать низкий уровень рецензирования в журналах из списка ВАК. В генерации псевдонаучного текста участвовала программа SCIgen, созданная группой студентов Массачусетского технологического института (США), а также российская программа ЭТАП-3, разработанная в Лаборатории компьютерной лингвистики ИППИ РАН. Подробности этой истории освещались на «Полит.ру» и были обнародованы в газете «Троицкий вариант» (№13, 2008).

После этого случая  Рособрнадзор совместно с Комиссией РАН по борьбе с лженаукой создали специальную рабочую группу, которой было поручено провести аналогичные проверки (путем рассылки «для публикации» сгенерированных компьютером квазинаучных текстов) всех научных журналов списка ВАК, являющихся академическими или университетскими изданиями.

Оказалось, что из первых 50 проверенных журналов ВАКовского списка теста на научность не прошел лишь один: «Вестник Томского государственного университета (философия, социология, политология)». Он опубликовал статью «Дарвинизм», содержащую набор псевдонаучных высказываний такого содержания:

«1. Сатана. Надо было начать разговор о Дарвине прямо с Сатаны. Прямее дорога» (С. 89);

«Скажу по секрету: зубы, их первое появление и превращение в челюсть лично для меня − самый непроходимый момент, опровержение дарвинизма. И сами дёсна. Они же из другого вещества, нежели мясо, которым набито наше тело. Это вещество твердое, почти как кость, а когда зуб вырвут, оно рыхлое и кровь течет. Как это все на эволюционном пути в рот существам залетело и там закрепилось? Эволюционно. Не было, не было, а потом постепенно стало. Ерунда, чепуха. Детский лепет» (С. 104);

 «Какие-то «учёные» (огурцы мочёные)…Что про этих футурологов мочёных сказать? Дарвинисты!»  (С. 107);

«И боюсь даже произнести слово «мозг». Два килограмма весом несимпатичного вещества. Похож на кучу дерьма. Но не пахнет, думает!» (С. 108);

 «И чего я такой бешеный? Что это я так разволновался из-за дарвинизма? Тоже мне цацу нашёл. Ну, не цаца, а бяка, что ж печалиться о том?» (C. 111).

Судьба «Вестника Томского университета» и его редколлегии во главе с проф. С.С.Аванесовым висела на волоске. Журнал спасли юридические тонкости. Дело в том, что программа SCIgen, использованная для «Корчевателя», может генерировать тексты только в области computer science. Поэтому рабочая группа Рособрнадзора и  Комиссии РАН по борьбе с лженаукой воспользовалась для создания псевдонаучных текстов в различных областях науки другой программой – РОДОС, порождающей ерунду путем независимого комбинирования мелких фрагментов чужих исходных текстов. Программа была разработана группой аспирантов и студентов Московского Физико-технологического института и Института информационных проблем РАН.

Для создания текстов на темы биологии и эволюции компьютер использовал отдельные цитаты с креационистских сайтов и форумов русскоязычного Интернета (antidarvin.ru и т.п.). В результате у ряда членов рабочей группы возникли опасения: достаточно ли мелко были нарезаны исходные тексты, чтобы конечный продукт можно было считать заведомой бессмыслицей? Рабочей группе не удалось найти юридически точной формулировки.

Это не стало бы серьезным препятствием к принятию административных мер, если бы не недавнее обращение главного редактора «Журнала научных публикаций аспирантов и докторантов» В.В. Иванова в арбитражный суд с иском к Минобрнауки. Редактор «прославившегося»  журнала оспаривал исключение своего издания из списка ВАК, утверждая, что тем самым ограничивается свободная конкуренция и нарушается антимонопольное законодательство. Хотя суд вынес решение в пользу ответчика – Минобрнауки, ВАК решил не принимать мер в отношении томского журнала, тем более, что намечается общий пересмотр всего списка, и осенью 2009 г. будет объявлен новый список ВАК.

«Полит.ру» также публикует комментарий члена рабочей группы по проверке качества журналов, разработчика программы РОДОС, к.т.н. Михаила Ковалева. Беседовал Кирилл Бочаров.

Комментарий Михаила Ковалева

Вы удовлетворены результатами эксперимента?

И да, и нет. Как российский ученый, я рад, что уровень первых проверенных нами 50 научных журналов оказался не таким ужасным, как все думали после истории с «Корчевателем». А как автор программы я, конечно, хотел бы, чтобы порождаемые ею тексты были более похожи на настоящие. Должен сказать, что по результатам работы в следующую версию программы будут внесены некоторые изменения.

Зачем? Кто-то планирует продолжать испытывать журналы на прочность?

Да, насколько мне известно, эта работа продолжается. Есть еще и чисто научный интерес – тест Тьюринга никто не отменял. И потом, на свете есть не только журналы – есть стостраничные отчеты, которые вынуждены во множестве писать научные институты, есть патенты, тезисы конференций, в конце концов, есть студенческие рефераты и большие монографии...

Кажется, студенты обходятся просто скачиванием готовых рефератов с Интернета.

Да, но такие рефераты легко поймать при помощи Google или разных «антиплагиаторских» программ. А РОДОС делает текст неузнаваемым.

 РОДОС –  как расшифровывается это название?

Никак. Это не аббревиатура, а имя греческого острова. Когда случилась история с «Корчевателем», мы говорили, что не очень сложно написать программу, генерирующую человекоподобные тексты, а коллеги вспомнили басню Эзопа «Хвастун». Там рассказывается, как человеку, хваставшемся необыкновенными прыжками на далеком острове, сказали: ««Здесь Родос, здесь прыгай!» (Hic Rhodus, hic salta).

То есть, вы написали эту программу «на слабо»?

Не совсем так. Наша группа уже давно работает в области генерации связных текстов. Но поводом для написания этой программы, действительно, послужил «Корчеватель».

В чем отличие вашей программы от той, которая написала «Корчевателя»?

Программа SCIgen использует контекстно-свободную грамматику. Это хорошо известная алгоритмическая техника. В принципе, поскольку исходный код доступен, можно было бы переобучить программу на новом материале. Но это потребовало бы слишком больших усилий. Поэтому мы пошли другим путем. Мы использовали два известных алгоритма, которые были разработаны для других целей, но, как оказалось, подходят и в нашем случае, и, главное, не нуждаются в переобучении под каждую новую область.

Один алгоритм используется в известной библиографической биомедицинской базе данных PubMed, в которой есть понятие «близких по содержанию статей» (related articles). Алгоритм анализирует резюме статей и группирует их по сходству содержания. В нашей программе этот алгоритм составляет основу для статьи – последовательность фрагментов, в которых говорится про одно и то же.

Второй алгоритм называется «Марковский морфологический анализатор». Это лингвистическая техника, которая в нашем случае осуществляет редактирование последовательных фрагментов так, чтобы не было противоречий в грамматике – предложения должны согласовываться по времени, числу и т.п. Попросту говоря, текст должен быть «гладким».

Вам удалось этого добиться?

Мне кажется, да. Посмотрите сами – текст статьи доступен в Интернете.

Какие тексты бы брали в качестве исходных?

В основном использовались различные псевдонаучные Интернет-сайты и форумы. Кроме того, «для оживления слога» были добавлены «Письмо к ученому соседу» А.П.Чехова и некоторые рассказы М.М. Зощенко.

Вы видели рецензии на статьи, написанные вашей программой?

Да, некоторые из проверенных нами журналов не просто отвергли статьи, но и прислали рецензии. Надо сказать, они были довольно похожи. Как правило, это были довольно короткие тексты, в которых отмечалось отсутствие новизны, иногда – плохой план статьи, общая бессвязность. Многие рецензенты указывали на фактические ошибки, что не удивительно – в качестве источников текстов для статей использовались материалы довольно сомнительного происхождения.

Почему именно ваша разработка была применена?

Частично по стечению обстоятельств. Когда директора нашего института (ИИП РАН) Г.Л.Скуратова-Бельского включили в состав рабочей группы по исследованию качества журналов, он попросил нас ускорить необходимую работу по доводке РОДОСа. С другой стороны, мне не известны другие проекты такого рода.

Ваша программа доступна в Интернете?

Пока нет. На самом деле, мы не уверены, что это было бы правильно. Надо взвесить все за и против.

Обсудите в соцсетях

Система Orphus

Главные новости

01:54 Экс-следователь ФСБ арестован по подозрению в особо крупной взятке
01:22 Россреестр создает в России аналог Airbnb с защитой от мошенников
00:55 Писателя Быкова привезли в Москву в стабильно тяжелом состоянии
00:28 Житель Брянской области сжег 1,5 млн рублей со старым диваном
18.04 23:55 Мария Шарапова отказалась от участия в пяти турнирах подряд
18.04 23:28 ФТС «оценила» новые российские санкции против Украины
18.04 22:51 Спецпрокурор Мюллер рассказал о «неадекватном» допросе Трампа
18.04 22:18 Дмитрия Быкова отправили из Уфы в Москву в состоянии комы
18.04 21:46 Мутко подсчитал долг жителей СКФО за газ и электроэнергию
18.04 21:04 СКР сообщил об аресте сотрудника Росавиации за хищение 1 млрд рублей
18.04 20:32 Тимошенко пожаловалась на агитационный звонок робота-Порошенко
18.04 19:54 Из-за программного сбоя «Связной» продавал iPhone8 по 6 тысяч рублей
18.04 19:26 Сотрудников «Росбалта» вызвали на допрос по делу о клевете на Усманова
18.04 18:53 Трамп и Песков прокомментировали оглашение доклада Мюллера
18.04 18:41 Две трети опрошенных россиян похвалили курс Сталина
18.04 18:22 ЦИК Украины установил новое время дебатов Зеленского и Порошенко
18.04 18:08 В борьбу за освобождение россиянки, сидящей в кувейтской тюрьме, включились тяжеловесы
18.04 18:07 Роснефть за двадцать лет увеличила добычу нефти в 19 раз
18.04 18:01 Украина засекретила решение суда о незаконной национализации Приватбанка
18.04 17:42 Двух российских биатлонистов дисквалифицировали
18.04 17:21 Росстат подтвердил снижение реальных доходов россиян
18.04 17:00 Спецпрокурор подтвердил отсутствие сговора Трампа с Россией
18.04 16:40 Треть водки в России оказалась нелегальной
18.04 16:15 Олимпийский комитет России получил новые талисманы
18.04 15:54 Российское ТВ покажет дебаты Зеленского и Порошенко
18.04 15:35 Владимир Путин принял президента Эстонии впервые за 10 лет
18.04 15:11 В Кремле подтвердили встречу с советником Трампа
18.04 14:51 Владимир Путин встретится с Ким Чен Ыном до конца апреля
18.04 14:40 В Петербурге обсудят новые горизонты университетской репутации
18.04 14:32 Опубликован список запрещенного импорта с Украины
18.04 14:15 Россия уступила Венесуэле и Свазиленду в рейтинге свободы прессы
18.04 13:51 Друзья сообщили о кончине вдовы Евгения Евстигнеева
18.04 13:33 Дума разрешила билетерам в кинотеатрах требовать паспорт
18.04 13:10 Число осужденных по экономическим статьям в России поставило рекорд
18.04 12:51 Россия запретила экспорт нефти на Украину
18.04 12:32 Турчинов предложил признать Россию распространителем терроризма
18.04 12:13 В редакцию «Росбалта» в Москве пришли с обыском
18.04 11:51 Дума приняла закон об «ипотечных каникулах»
18.04 11:31 Менее половины опрошенных россиян сочли себя средним классом
18.04 11:10 Врачи из госпиталя Бурденко вылетели в Уфу для лечения Дмитрия Быкова
18.04 11:07 СМИ: «дело Арашуковых» приближается к Туле
18.04 10:52 Замглавы Минкульта опровергла выделение средств на ремонт Нотр-Дама
18.04 10:32 ФСБ выявила хищения у разработчика защиты от биологического оружия
18.04 10:11 ГАЗ попросил у государства 30 млрд рублей из-за санкций
18.04 09:50 СМИ узнали о визите в Москву советника Трампа
18.04 09:32 Михельсон сместил Лисина с первого места в рейтинге богатейших россиян
18.04 09:13 Северная Корея испытала новое тактическое оружие
18.04 07:47 Глава Росводресурсов сообщил о планах по введению нового налога
18.04 07:11 Команда Зеленского опровергла данные о контракте с лоббистами из США
18.04 06:36 В интернете появилось видео ДТП с туристическим автобусом на Мадейре
«ВКонтакте» «Газпром» «Зенит» «Мемориал» «Мистраль» «Оборонсервис» «Роснефть» «Спартак» «Яблоко» Абхазия Австралия Австрия Азербайджан Антимайдан Аргентина Арктика Армения Афганистан Аэрофлот Башкирия Белоруссия Бельгия Бразилия ВВП ВКС ВМФ ВПК ВТБ ВЦИОМ Ватикан Великобритания Венесуэла Владивосток Внуково Волгоград ГИБДД ГЛОНАСС Генпрокуратура Германия Голливуд Госдеп Госдума Греция Гринпис Грузия ДТП Дагестан Домодедово Донецк ЕГЭ ЕСПЧ Евровидение Еврокомиссия Евромайдан Евросоюз Египет Екатеринбург ЖКХ Израиль Ингушетия Индия Индонезия Интерпол Ирак Иран Испания Италия Йемен КНДР КПРФ Казань Казахстан Калининград Камчатка Канада Каталония Кемерово Киев Киргизия Китай Конституция Кремль Крым Куба Курилы ЛГБТ ЛДПР Латвия Ливия Литва Лондон Луганск МВД МВФ МГУ МКС МОК МЧС Малайзия Мексика Мемория Минздрав Минкомсвязи Минкульт Минобороны Минобрнауки Минпромторг Минсельхоз Минтранспорта Минтруд Минфин Минэкономразвития Минэнерго Минюст Молдавия Мосгорсуд Москва НАСА Нигерия Нидерланды Новосибирск Норвегия ОБСЕ ООН ОПЕК Одесса ПДД Пакистан Паралимпиада Париж Пентагон Польша Право Приморье Продовольствие РАН РЖД РПЦ РФС Росавиация Роскомнадзор Роскосмос Роспотребнадзор Россельхознадзор Россия Росстат СМИ СССР США Сахалин Сбербанк Севастополь Сербия Сирия Сколково Славянск Сочи Таджикистан Таиланд Татарстан Трансаэро Турция УЕФА Узбекистан Украина ФАС ФБР ФИФА ФСБ ФСИН ФСКН Филиппины Финляндия Франция Харьков ЦИК ЦРУ ЦСКА Центробанк Чехия Чечня Швейцария Швеция Шереметьево Эбола Эстония ЮКОС Якутия Яндекс Япония авиакатастрофа автопром алкоголь амнистия армия археология астрономия аукционы банкротство беженцы бензин беспилотник беспорядки биатлон бизнес бокс болельщики вандализм взрыв взятка вирусы вузы выборы гаджеты генетика гомосексуализм госбюджет госзакупки госизмена деньги дети доллар допинг драка евро журналисты законотворчество землетрясение импорт инвестиции инновации интернет инфляция ипотека искусство ислам исследования история казнь кино кораблекрушение коррупция космос кража кредиты культура лингвистика литература медиа медицина метро мигранты монархия мошенничество музыка наводнение налоги нанотехнологии наркотики наука недвижимость некролог нефть образование обрушение общество ограбление оппозиция опросы оружие офшор палеонтология педофилия пенсия пиратство планетология погранвойска пожар полиция похищение правительство православие преступность происшествия ракета рейтинги реклама религия ритейл рубль санкции связь сепаратизм следствие смартфоны социология спецслужбы спутники страхование стрельба строительство суды суицид тарифы театр телевидение теракт терроризм технологии транспорт туризм убийство фармакология физика фоторепортаж футбол хакеры химия хоккей хулиганство цензура школа шпионаж экология экономика экспорт экстремизм этология «Единая Россия» «Исламское государство» «Нафтогаз Украины» «Правый сектор» «Справедливая Россия» «болотное дело» Александр Лукашенко Александр Турчинов Алексей Кудрин Алексей Навальный Алексей Улюкаев Амурская область Анатолий Сердюков Ангела Меркель Антон Силуанов Аркадий Дворкович Арсений Яценюк Барак Обама Басманный суд Башар Асад Белый дом Борис Немцов Валентина Матвиенко Верховная Рада Верховный суд Виктор Янукович Виталий Мутко Владимир Жириновский Владимир Маркин Владимир Мединский Владимир Путин Вячеслав Володин Дальний Восток День Победы Дмитрий Медведев Дмитрий Песков Дмитрий Рогозин Дональд Трамп Евгения Васильева Забайкальский край Интервью ученых Ирина Яровая Иркутская область История человечества Кирилл Серебренников Конституционный суд Космодром Байконур Краснодарский край Красноярский край Ксения Собчак Ленинградская область МИД России Мария Захарова Михаил Прохоров Михаил Саакашвили Михаил Ходорковский Московская область Мурманская область Надежда Савченко Николас Мадуро Нобелевская премия Новосибирская область Новый год Олимпийские игры Ольга Голодец Павел Дуров Палестинская автономия Папа Римский Первый канал Петр Порошенко Почта России Приморский край Рамзан Кадыров Реджеп Эрдоган Республика Карелия Ростовская область Саратовская область Саудовская Аравия Свердловская область Сергей Лавров Сергей Нарышкин Сергей Полонский Сергей Собянин Сергей Шойгу Следственный комитет Совбез ООН Совет Федерации Ставропольский край Счетная палата Тереза Мэй Франсуа Олланд Хабаровский край Хиллари Клинтон Челябинская область Черное море Эдвард Сноуден Элла Памфилова Эльвира Набиуллина Южная Корея Юлия Тимошенко авторское право администрация президента акции протеста атомная энергия баллистические ракеты банковский сектор биология большой теннис визовый режим военная авиация выборы губернаторов газовая промышленность гражданская авиация гуманитарная помощь декларации чиновников дороги России информационные технологии климат Земли компьютерная безопасность космодром Восточный крушение вертолета легкая атлетика лесные пожары междисциплинарные исследования мобильные приложения морской транспорт некоммерческие организации общественный транспорт патриарх Кирилл пенсионная реформа пищевая промышленность права человека правозащитное движение преступления полицейских публичные лекции русские националисты сельское хозяйство сотовая связь социальные сети стихийные бедствия телефонный терроризм уголовный кодекс фигурное катание финансовый рынок фондовая биржа химическое оружие эволюция экономический кризис ядерное оружие Великая Отечественная война Вторая мировая война Ирак после войны Ким Чен Ын Революция в Киргизии Российская академия наук Стихотворения на случай Федеральная миграционная служба борьба с курением выборы мэра Москвы здравоохранение в России связь и телекоммуникации тюрьмы и колонии Совет по правам человека аварии на железной дороге естественные и точные науки закон об «иностранных агентах» видеозаписи публичных лекций «Полит.ру» Новые технологии, инновации Сочи 2014 Кабардино-Балкария Левада-Центр Нью-Йорк Санкт-Петербург отставки-назначения шоу-бизнес Ростов-на-Дону ЧМ-2018 Компьютеры, программное обеспечение Книга. Знание ВИЧ/СПИД Apple Bitcoin Boeing Facebook Google iPhone IT NATO PRO SCIENCE видео ProScience Театр Pussy Riot Telegram Twitter

Редакция

Электронная почта: [email protected]
Адрес: 129090, г. Москва, Проспект Мира, дом 19, стр.1, пом.1, ком.5
Телефон: +7 929 588 33 89
Яндекс.Метрика
Свидетельство о регистрации средства массовой информации
Эл. № 77-8425 от 1 декабря 2003 года. Выдано министерством
Российской Федерации по делам печати, телерадиовещания и
средств массовой информации. Выходит с 21 февраля 1998 года.
При любом использовании материалов веб-сайта ссылка на Полит.ру обязательна.
При перепечатке в Интернете обязательна гиперссылка polit.ru.
Все права защищены и охраняются законом.
© Полит.ру, 1998–2019.