Полiт.ua Государственная сеть Государственные люди Войти
17 декабря 2017, воскресенье, 17:14
Facebook Twitter LiveJournal VK.com RSS

НОВОСТИ

СТАТЬИ

АВТОРЫ

ЛЕКЦИИ

PRO SCIENCE

СКОЛКОВО

РЕГИОНЫ

23 января 2007, 09:00

Технологии в социологии: на пути благих намерений

Мы публикует рецензию Ивана Низгораева на книгу известного украинского социолога, недавно скончавшейся Натальи Паниной (Панина Н.В. Технология социологического исследования: Курс лекций. Киев: Институт социологии НАН Украины, 2001. 2-е изд.). Как это часто бывает с зарубежными изданиями, книга Паниной не сразу дошла до российского читателя, но не потеряла своей актуальности, ни в методологическом, ни в политическом контексте. О соотношении российской и украинской социологии читайте также в интервью украинского социолога Евгения Головахи.

Бытует мнение, что науку и практическую жизнедеятельность разделяет пропасть. Одни предпочитают тихую размеренную жизнь в дали от удручающего социума, людских страстей и действий, выходящих за пределы рациональных интерпретаций. Другие ратуют за прикладной характер исследования, за оперативность, гибкость не только во взглядах, но и навыках, за умение угодить заказчику. Курс лекций Н.В. Паниной - не очередная попытка синтеза умозрительных категорий, надежно защищенных от остального мира сеткой догм и тривиальных допущений. Скорее, перед нами внятное описание того, как разработанные и внедренные еще в начале прошлого века количественные процедуры воспроизводятся в веке настоящем, как взгляды на нормы и отклонения социологического исследования формируют представления о качественном научном предприятии: "Качество информации в конечном итоге определяется не отсутствием ошибок и погрешностей (избежать которые практически невозможно), а создаваемыми исследователем условиями, позволяющими учесть влияние этих ошибок на конечный результат" (с. 83).

Если качество опросной технологии является предметом книги, то объектом выступает совокупность смещений, ошибок и ложных представлений, сопровождающих фабрикацию научных или околонаучных выводов: "мы видим свою задачу прежде всего в том, чтобы обратить внимание аудитории на разработанные социологической наукой требования и правила, позволяющие если не избежать, то учесть возможные ошибки социологического исследования при интерпретации полученного материала" (с. 8). Личный опыт, замечания и рекомендации коллег, публицистические и научные статьи служат для Н.В. Паниной исходным материалом для вдумчивого прочтения классических текстов по методике и технике социальных измерений, для воссоздания существующей в среде полстеров и политических аналитиков картины мира. Даже ошибки и недочеты, допущенные в книге играют немаловажную роль. Они точно воспроизводят благие намерения, предрассудки и допущения современных исследователей, тем самым помогая вдумчивому читателю обнаружить границы научного мировоззрения, воплощенного в мечте о надежных и валидных результатах.

Ошибки выборки 

Итак, назвался полстером, беспокойся о репрезентативности. Поскольку наиболее доступная ее оценка - случайная ошибка выборки, то можно ограничиться лишь теоретическим расчетом и не утомлять себя долгими методическими изысканиями. "Надежность информации на этапе формирования выборки обеспечивается учетом случайных ошибок", - пишет Н.В. Панина (с. 77), что верно лишь в модели абсолютно случайной выборки - романтической мечте раннего позитивного мышления. Практическая несостоятельность подобного утверждения в социальных исследованиях не подлежит сомненению (с. 101). Так Х. Кэнтрил, введя в начале прошлого века в широкий обиход различение ошибок на случайные и систематические, утверждал, что "...случайные (статистические) ошибки, прежде всего, сопровождающие реализацию выборочного плана, часто не являются основными. Нестатистические погрешности куда более значительны и "опасны", чем следствия, обусловленные малым объемом выборки (цит. по Докторов, 2005, с. 161). Однако все еще эффекты интервьюера, неответы, давление труднодоступных единиц исследования и другие источники систематических смещений остаются риторическими фигурами, о которых обязательно надо упомянуть, но предложить какие-либо средства для их измерения не получается (с. 80-81). Такое упоминание подобно его отсутствию, поскольку абстрактные риторические фигуры, неподкрепленные технологическим описанием, отторгаются из эмпирических исследований за ненадобностью и практической несостоятельностью. Случайные ошибки - альфа и омега в оценке качества исследования. Отсюда возникает миф о качестве объемных, широкомасштабных исследований, основанных на идеологии "соломенных" опросов: "даже неискушенный в исследованиях человек понимает, что  чем больше опрошено, тем лучше"" (с. 117); "общий принцип сводится к тому, что чем больше выборка, тем более вероятно, что десятые доли процента могут представлять значимое информационное значение" (с. 202). Исследователи забывают, что стремясь увеличить расчетную точность случайной ошибки, они многократно увеличивают систематические смещения. В условиях ограниченных ресурсов рост объема выборки приводит к необходимости привлекать менее квалифицированный персонал, сокращать время на инструктаж, согласование интересов и представлений новых участников опросной процедуры. Аналогичная логика экстенсивного роста лежит в основе рекомендаций по увеличению квотируемых признаков в квотной выборке: "Чем больше пропорций учитывается, тем более вероятно, что выборка будет репрезентативной и по неучитываемым параметрам" (с. 113). Здесь явно не принимается во внимание большая трудоемкость такого подхода, а значит и больший риск недобросовестной работы интервьюеров, накладывающийся на рост количества отказов от интервью. Н.В. Панина подробно излагает разные способы выборочного исследования: одноступенчатую случайную, районированную, гнездовую и многоступенчатую комбинированную, квотную выборки. При этом теоретические фундированные требования уступают место довольно сомнительной аргументации ad praxis: "теоретически это легко опровергнуть, однако практика социологических исследований позволяет доверять этому способу отбора" (с. 114) - речь идет о квотных выборках. Не менее экзотична и рекомендация в выборе квотной или случайной выборке по критерию знакомства исследователя с предметом и объектом исследования: если хорошо знаком, проводи квотную выборку, плохо - случайную (с. 116-117). Как минимум непонятно, каким образом при плохом знакомстве с объектом исследования составлять основу для случайного отбора? Тот факт, что "основным недостатком целенаправленных выборок является необоснованность статистических процедур анализа", сглаживается рекомендацией не обращать на это внимание: "значение статистических показателей следует рассматривать как относительное" (с. 116). Недобросовестность в следовании выборочным процедурам, оправдывается большим соответствием некоторым внешним показателям: "Нарушая определенные формальные требования, исследователь нередко добивается более достоверной информации, что впоследствии подтверждается результатами референдумов и выборов" (с. 110-111). Насколько прогностическая функция, построенная на прямой модели "спросил - подсчитал - предсказал", может играть роль внешней валидности - большой вопрос. При всеобщем падении интереса к выборам, доминировании спонтанных решений, принимаемых непосредственно во время голосования, распространенности этикетных норм, не приветствующих отрицательные ответы на предвыборную тематику, расхождения между заявляемыми и фактическими голосами закономерны и ожидаемы. И скорее отклонения, а не совпадения между ответами, данными в опросах и на избирательных участках, должны определять качество исследования. Напротив, несовершенство процедуры измерения, отсутствие в конкретных исследованиях экспериментального материала, объясняющего разрывы между политическими установками, их репрезентациями и поведением на выборах, приближают подобные прогнозы к алхимическим или астрологическим предсказаниям. Мистическая компонента опроса усиливается, когда речь заходит об экспертной процедуре - приглашение компетентных лиц, желательно по трое, для отбора исследуемых совокупностей (с. 111-112). Зачастую за экспертными мнениями скрывается нежелание исследователя заботить себя поиском и обоснованием критериев отбора.

Ошибки опросного инструмента 

Н.В. Панина выделяет два типа эмпирических исследований: опросы общественного мнения и, собственно, социологическое исследование. В качестве "наиболее важного элемента проекта" первому приписывается проблема репрезентативности, второму - операционализации, поскольку "в опросах общественного мнения необходима лишь редакция информационного запроса в соответствии с основными техническими требованиями и правилами составления анкеты" (с. 24). Значит обоснование показателей не так важно, они подкупают автора своей очевидностью и бесхитростностью: "Так, уверенность в улучшении социально-экономической ситуации непосредственно связана с показателем социального оптимизма и не требует дополнительного обоснования" (с. 30), а избирателю приписан статус рационально мыслящего субъекта, который обязательно мотивирован в выборе того или иного кандидата (с. 40). Пилотаж анкеты редуцируется до перечитывания вопросов, разговоров с родственниками и знакомыми, или экспертного оценивания, теми же знакомыми, только теперь уже имеющими опыт эмпирических исследований, - их уже можно назвать экспертами (с. 68-69). В подобных действиях нет ничего плохого: "анкета нуждается в любой помощи, которую ей могут оказать!", - как эмоционально подытоживает Р. Туранжо (Tourangeau, 2004, p. 210). Однако ограничиваться лишь тривиальными подходами, которые были разработаны в 1930-е годы, подвергнуты критике в 1990-е, а в 2000-х списаны из академически фундированных проектов, непозволительная роскошь даже для сугубо прикладных исследований. Подготовка интервьюера сводится к набору жестких правил, по сути невыполнимых в условиях любой коммуникации. Удивительным образом, уже десятки раз опровергнутые в методических экспериментах утверждения, воспроизводятся в учебных изданиях. Не исключение и курс лекций Н.В. Паниной: "если респондент не понимает вопрос, интервьюер должен повторить его еще раз, помедленнее, не изменяя формы вопросы" (с. 144); "В ходе интервью не должно быть ни обсуждений, ни полемики между интервьюером и респондентом" (с. 145) и т.д. Первый же опыт интервьюирования, если он оказался успешным, учит обходить эти правила, приноравливаться к ситуации интервью, поддерживать беседу с человеком, который всегда может отказаться от ее продолжения. Не удивительно, что после нарушения казалось бы основополагающих допущений стандартизированного интервью любые требования исследователя воспринимаются как пустая, ни к чему не обязывающая формальность. Подобное негативное отношение быстро распространяется на все рекомендации по ведению опроса, включая соблюдение спроектированной выборки и ведение отчетности по неответам. Фальсификация и недобросовестная работа интервьюеров - результат нашей убежденности в давно опровергнутых догматических предположениях.

Ошибки анализа данных

 Обоснование статистического вывода невозможно без принятия случайного отбора, хотя бы в модусе гипотетического "как если бы" исполнения. Так возникает недосказанность, сказать точнее, лукавство многих социологических исследований. С одной стороны, социолог видит невозможность применения статистического аппарата, основанного на идеологии случая и нормальном распределении признака. С другой, формулы безлики и введенные в них цифры дают результаты, которые можно интерпретировать, подводить под собственный набор концепций и теоретических представлений. Точная механика статистического анализа становится фигурой речи, подтверждающей научность проделанной работы, ее статус истинного знания. В этом состоит величайшая драма современной социальной мысли - замена критериев истинности словами о них. Показатель среднего арифметического адекватен лишь для измерения распределений, приближающихся к нормальным, получаемым в результате случайного отбора (с. 210, 221). Поскольку таких распределений найти практически невозможно, то следует оценивать степень приближения фактических распределений к нормальным. И если дела обстоят совсем плохо, то преобразовывать данные, иными словами, подгонять их под теоретическую конструкцию, всеми доступными для этого техническими средствами. Если в обыденном общении сказать, что ответ человек случаен, это будет признано безумием. Но именно на этом допущении построена технология расчета связей между признаками, которые не более чем ответы людей. Безумие научных интерпретаций давно легитимно и стало каноном исследовательской работы. Не удивительно, что одна уступка перед научной истиной порождает другую и заканчивается все абсолютной фальсификацией планируемого научного предприятия, преобразование его в социальное действие, обслуживающего интересы социальных же деятелей. Если очень хочется установить связь между признаками, то можно взять за основу и коэффициент, изначально всего лишь опровергающий нулевую гипотезу об отсутствии связи: "Если значение этого коэффициента (хи-квадрат - Д.Р.) статистически значимо, по крайней мере, на уровне 5%, то исследователь может сделать вывод о том, что между анализируемыми признаками есть определенная связь". Далее очень хочется определится с величиной связи, отсюда: "чем выше значение данного коэффициента, тем более тесная связь между этими двумя признаками" (с. 226), отсюда будем сравнивать коэффициенты полученные в таблицах с разной размерностью (с. 233). Конечно, можно указать на данное утверждение как ошибочное - коэффициент хи-квадрат не измеряет силу связи и зависит от размерности таблицы сопряженности. Но полученная ошибка - лишь отражение общей тенденции заменять критерии словами. Ее возникновение в курсе лекций скорее его достоинство, нежели недостаток, поскольку обнажает запутанную арифметику "как если бы" расчетов, явно указывает к чему приводит путь переименований и уступок. 

Ошибки оформления

 Книгу отличает непозволительная для научного издания библиографическая небрежность. И хотя к каждой главе составлен небольшой список рекомендуемой литературы, в тексте ссылки на первоисточники крайне редки. Вместо них читатель сталкивается с отсылками к некоторым "объективным", закрытым для какой-либо фальсификации субстанциям: "эксперименты в области межличностного общения позволили установить" (с. 42), "анализ отчетов интервьюеров показывает" (с. 55), "в некоторых учебных пособиях по методике проведения социологических опросов указывается" (с. 95) и т.д. Непонятны также источники некоторых методических фактов, приводимых в работе. Например, автор приводит уровень недостижимости респондентов в 10-15% (c. 100), не указывая откуда и как получен показатель. В то время, как в сотнях методических экспериментов, проводимых по всему миру, коэффициент неответов, с учетом самых благоприятных обстоятельств и довольно продолжительного периода полевого этапа - не менее месяца, составляет более 30% (см., например, (Scholl, 2003, S. 44). Если же речь идет об оперативных опросах, полевой этап которых не превышает недели или двух, и в технологии которых не предусмотрены повторные обращения к недостижимым единицам отбора, по оценкам специалистов Фонда "Общественного мнения" коэффициент неответов может достигать 60-70%. Отталкиваясь от подобных прогнозов многие методисты считают оперативные исследования, с полевым этапом менее двух недель, не более чем умелой фабрикацией общественного мнения .

 Резюме 

Наука построена на ошибках и их исправлениях, псевдонаука - на объяснениях и логичных доводах, подтверждающих каждое новое утверждение. Вышедшая в издательстве Института социологии НАН Украины книга - большая удача для русскоговорящей научной аудитории. Она позволяет обнажить разрывы сознания, укорененные в среде социальных наук, проблематизировать очевидные для многих положения, приближающие научное знание к обыденным представлениям и предрассудкам. 

Литература

1 Biemer P.P. Measuring data quality // Telephone survey methodology / Ed. by R.M. Groves, P.P. Biemer, L.E. Lyberg, et al. New York: John Wiley Sons, 2001. P. 273-282

2.Sebold J. Survey period length, unanswered numbers, and nonresponse in telephone surveys // Telephone survey methodology / Ed. by R.M. Groves,.P. Biemer, L.E. Lyberg, et al. New York: John Wiley Sons, 2001. P. 247-256

3.Scholl A. Die Befragung: Sozialwissenschaftliche Methode und kommunikationswissenschaftliche Anwendung. Konstanz: UVK Verlagsgesellschaft mbH, 2003.

4. Tourangeau R. Experimental design considerations for testing and evaluating questionnaires // Methods for testing and evaluating survey questionnaires / Ed. by S. Presser, J.M. Rothgeb, M.P. Couper, et al. Hoboken, NJ: John Wiley Sons, 2004. P. 209-224.

5. Докторов Б.З. Первопроходцы мира мнений: от Гэллапа до Грушина. М.: Институт Фонда "Общественное мнение", 2005

Обсудите в соцсетях

Система Orphus
Loading...

Главные новости

16:47 Прокуратура впервые запросила пожизненный срок для торговца наркотиками
16:24 Курс биткоина превысил 20 тысяч долларов
16:16 Спортсменам РФ разрешили использовать два цвета флага на Олимпиаде
15:13 В Госдуме назвали неожиданностью слежку Финляндии за Россией
14:54 Скончался Георгий Натансон
14:15 В Крыму работы на трассе «Таврида» привели к перебоям с интернетом
13:44 В Москве снова побит температурный рекорд
13:15 СМИ сообщили об убийстве плененного ИГ казака
12:39 Губернатор Подмосковья пообещал избавить жителей региона от вони в начале года
12:07 Правительство Австрии поддержало смягчение санкций против РФ
11:35 Глава МИД Великобритании не увидел фактов влияния РФ на Brexit
11:15 СМИ рассказали о затрате Пентагоном 20 млн долларов на изучение НЛО
10:52 В Финляндии возбуждено дело после публикации данных о контроле разведки над интернетом
10:20 Представители Трампа обвинили спецпрокурора по РФ в незаконном получении документов
09:53 Завершилось голосование по названию моста в Крым
09:34 В Москве побит абсолютный температурный рекорд с 1879 года
09:24 Источник рассказал о переносе с Байконура пилотируемых пусков
09:12 В Дагестане силовики вступили в бой с боевиками
16.12 22:07 Курс биткоина превысил 19 тысяч долларов и вернулся обратно
16.12 21:03 СМИ узнали о «мирном» письме Саакашвили к Порошенко
16.12 19:56 Собчак заявила о готовности не участвовать в выборах
16.12 19:45 ПАРНАС отказался от выдвижения своего кандидата в президенты
16.12 19:28 Галерея-банкрот потребовала 27 млн рублей из Фонда храма Христа Спасителя
16.12 19:14 Российский биатлонист принес сборной первую медаль Кубка мира
16.12 17:07 Володин призвал власти РФ и Белоруссии уравнять граждан в правах
16.12 16:18 Фигуранта дела о контрабанде алкоголя нашли убитым в Ленобласти
16.12 15:13 Экс-сотрудник ФСБ отверг обвинения в хакерских атаках против США
16.12 15:11 Украина составила план покорения Крыма телевидением
16.12 14:07 Ученые из США выложили в сеть видео с ядерным испытанием
16.12 13:55 Овечкина признали одним из величайших игроков в истории НХЛ
16.12 13:12 Борис Джонсон снялся в «рекламе» сока с Фукусимы
16.12 12:53 Глава Минтруда анонсировал выделение 49 млрд рублей на ясли
16.12 11:40 В Москве мошенники забрали 20 млн рублей у покупателя биткоинов
16.12 11:29 Норвегия первой в мире «похоронила» FM-радио
16.12 10:51 Российские военные обвинили США в подготовке «Новой сирийской армии» боевиков
16.12 10:00 Россия вложила в госдолг США 1,1 млрд долларов за месяц
16.12 09:51 Собянин позвал москвичей оценить новогоднюю подсветку
16.12 09:21 Трамп включит «агрессию» КНР в стратегию нацбезопасности
15.12 21:08 Отца предполагаемых организаторов теракта в метро Петербурга выслали в Киргизию
15.12 20:57 Майкл Джордан назван самым высокооплачиваемым спортсменом всех времен
15.12 20:36 Вероника Скворцова обсудила с Элтоном Джоном борьбу с ВИЧ
15.12 20:23 Полиция открыла огонь по мужчине с ножом в аэропорту Амстердама
15.12 20:07 Falcon 9 отправила груз на МКС и вернулась на космодром в США
15.12 19:47 В Пентагоне рассказали о новом сближении с российской авиацией в Сирии
15.12 19:44 ЦБ оценил объем докапитализации Промсвязьбанка в 100-200 млрд рублей
15.12 19:27 Пожизненно отстраненная от Игр скелетонистка Елена Никитина выиграла ЧЕ
15.12 19:18 Косово объявило о создании собственной армии к марту 2018 года
15.12 19:03 В Назарете отменили Рождество
15.12 18:51 В Испании не поверили в угрозу отстранения от ЧМ-2018
15.12 18:35 Программу безопасности на дорогах увеличили на 2 млрд рублей
Apple Boeing Facebook Google IT NATO PRO SCIENCE видео ProScience Театр Pussy Riot Twitter аварии на железной дороге авиакатастрофа Австралия Австрия автопром администрация президента Азербайджан акции протеста Александр Лукашенко Алексей Кудрин Алексей Навальный Алексей Улюкаев алкоголь амнистия Анатолий Сердюков Ангела Меркель Антимайдан Армения армия Арсений Яценюк археология астрономия атомная энергия аукционы Афганистан Аэрофлот баллистические ракеты банковский сектор банкротство Барак Обама Башар Асад Башкирия беженцы Белоруссия Белый дом Бельгия беспорядки бизнес биология ближневосточный конфликт бокс болельщики «болотное дело» большой теннис Борис Немцов Бразилия ВВП Великая Отечественная война Великобритания Венесуэла Верховная Рада Верховный суд взрыв взятка видеозаписи публичных лекций «Полит.ру» видео «Полит.ру» визовый режим Виктор Янукович вирусы Виталий Мутко «ВКонтакте» ВКС Владивосток Владимир Жириновский Владимир Маркин Владимир Мединский Владимир Путин ВМФ военная авиация Волгоград ВТБ Вторая мировая война вузы выборы выборы губернаторов выборы мэра Москвы газовая промышленность «Газпром» генетика Генпрокуратура Германия ГИБДД ГЛОНАСС Голливуд гомосексуализм госбюджет Госдеп Госдума госзакупки гражданская авиация Греция Гринпис Грузия гуманитарная помощь гуманитарные и социальные науки Дагестан Дальний Восток деньги День Победы дети Дмитрий Медведев Дмитрий Песков Дмитрий Рогозин доллар Домодедово Дональд Трамп Донецк допинг дороги России драка ДТП Евгения Васильева евро Евровидение Еврокомиссия Евромайдан Евросоюз Египет ЕГЭ «Единая Россия» Екатеринбург ЕСПЧ естественные и точные науки ЖКХ журналисты Забайкальский край закон об «иностранных агентах» законотворчество здравоохранение в России землетрясение «Зенит» Израиль Индия Индонезия инновации Интервью ученых интернет инфляция Ирак Ирак после войны Иран Иркутская область искусство ислам «Исламское государство» Испания история История человечества Италия Йемен Казань Казахстан казнь Калининград Камчатка Канада Киев кино Киргизия Китай Климат Земли, атмосферные явления КНДР Книга. Знание Компьютеры, программное обеспечение кораблекрушение коррупция космодром Восточный космос КПРФ кража Краснодарский край Красноярский край кредиты Кремль крушение вертолета Крым крымский кризис Куба культура Латвия ЛГБТ ЛДПР Левада-Центр легкая атлетика лесные пожары Ливия лингвистика Литва литература Лондон Луганск Малайзия МВД МВФ медиа медицина междисциплинарные исследования Мексика Мемория метро мигранты МИД России Минздрав Минкомсвязи Минкульт Минобороны Минобрнауки Минтранспорта Минтруд Минфин Минэкономразвития Минюст мировой экономический кризис «Мистраль» Михаил Саакашвили Михаил Ходорковский МКС Молдавия Мосгорсуд Москва Московская область мошенничество музыка МЧС наводнение Надежда Савченко налоги нанотехнологии наркотики НАСА наука Наука в современной России «Нафтогаз Украины» недвижимость некоммерческие организации некролог Нерусский бунт нефть Нигерия Нидерланды Нобелевская премия Новосибирск Новые технологии, инновации Новый год Норвегия Нью-Йорк «Оборонсервис» образование обрушение ОБСЕ общественный транспорт общество ограбление Одесса Олимпийские игры ООН оппозиция опросы оружие отставки-назначения Пакистан палеонтология Палестинская автономия Папа Римский Париж ПДД педофилия пенсионная реформа Пентагон Петр Порошенко пищевая промышленность погранвойска пожар полиция Польша похищение права человека правительство Право правозащитное движение «Правый сектор» преступления полицейских преступность Приморский край происшествия публичные лекции Рамзан Кадыров РАН Революция в Киргизии Реджеп Эрдоган рейтинги религия Реформа армии РЖД ритейл Роскомнадзор Роскосмос Роспотребнадзор Россельхознадзор Российская академия наук Россия Ростов-на-Дону Ростовская область РПЦ рубль русские националисты РФС Санкт-Петербург санкции Саудовская Аравия Сахалин Сбербанк Свердловская область связь связь и телекоммуникации Севастополь сельское хозяйство сепаратизм Сербия Сергей Лавров Сергей Собянин Сергей Шойгу Сирия Сколково Славянск Следственный комитет следствие смартфоны СМИ Совбез ООН Совет по правам человека Совет Федерации сотовая связь социальные сети социология Социология в России Сочи Сочи 2014 «Спартак» спецслужбы «Справедливая Россия» спутники СССР Ставропольский край стихийные бедствия Стихотворения на случай страхование стрельба строительство суды суицид США Таджикистан Таиланд Татарстан театр телевидение телефонный терроризм теракт терроризм технологии транспорт туризм Турция тюрьмы и колонии убийство УЕФА Украина Условия труда ФАС Федеральная миграционная служба физика Филиппины Финляндия ФИФА фондовая биржа фоторепортаж Франсуа Олланд Франция ФСБ ФСИН ФСКН футбол Хабаровский край хакеры Харьков Хиллари Клинтон химическое оружие хоккей хулиганство Центробанк ЦИК Цикл бесед "Взрослые люди" ЦСКА Челябинская область Чехия Чечня ЧМ-2018 шахты Швейцария Швеция школа шоу-бизнес шпионаж Эбола Эдвард Сноуден экология экономика экономический кризис экстремизм Эстония Южная Корея ЮКОС Юлия Тимошенко ядерное оружие Япония

Редакция

Электронная почта: politru.edit1@gmail.com
Адрес: 129090, г. Москва, Проспект Мира, дом 19, стр.1, пом.1, ком.5
Телефон: +7 495 980 1894.
Яндекс.Метрика
Свидетельство о регистрации средства массовой информации
Эл. № 77-8425 от 1 декабря 2003г. Выдано министерством
Российской Федерации по делам печати, телерадиовещания и
средств массовой информации. Выходит с 21 февраля 1998 года.
При любом использовании материалов веб-сайта ссылка на Полит.ру обязательна.
При перепечатке в Интернете обязательна гиперссылка polit.ru.
Все права защищены и охраняются законом.
© Полит.ру, 1998–2014.