Третий класс методов относится к изучению состояния объекта во времени: в прошлом - ретроспекция и в будущем – прогнозирование

Отслеживание, зачастую, в ряде наук является, пожалуй, единственным эмпирическим методом-действием. Например, в астрономии. Ведь астрономы никак не могут пока влиять на изучаемые космические объекты. Единственная возможность - отслеживать их состояние посредством методов-операций: наблюдения и измерения. То же, в значительной мере, отно­сится и к таким отраслям научного знания как география, демография и т.д., где исследователь не может что-либо из­менять в объекте исследования.

Кроме того, отслеживание применяется и тогда, когда ставится цель изучения естественного функционирования объекта. Например, при изучении тех или иных особенностей радиоактивных излучений или при изучении надежности технических устройств, которая проверяется их длительной эксплуатацией.

Обследованиекак частный случай метода отслеживания — это изучение исследуемого объекта с той или иной мерой глубины и детализации в зависимости от поставленных ис­следователем задач. Синонимом слова «обследование» явля­ется «осмотр», что говорит о том, что обследование - это в основном первоначальное изучение объекта, проводимое для ознакомления с его состоянием, функциями, структурой и т.д. Обследования чаще всего применяются по отношению к организационным структурам - предприятиям, учреждениям и т.п. - или по отношению к общественным образованиям, например, населенным пунктам, для которых обследования могут быть внешними и внутренними.

Внешние обследования:

- обследование социокультурной и экономической ситуации в регионе,

- обследование рынка товаров и услуг и рынка труда,

- обследование состояния заня­тости населения и т.д.

Внутренние обследования:

- обследова­ния внутри предприятия, учреждения,

- обследование состояния производственного процесса,

- обследования контингента работающих и т.д.

Обследование проводится посредством методов-операций эмпирического исследования: наблюдения, изуче­ния и анализа документации, устного и письменного опроса, привлечения экспертов и т.д.

Любое обследование проводится по заранее разработан­ной подробной программе, в которой детально планируется содержание работы, ее инструментарий (составление анкет, комплектов тестов, вопросников, перечня подлежащих изу­чению документов и т.д.), а также критерии оценки подлежа­щих изучению явлений и процессов. Затем следуют этапы: сбора информации, обобщения материалов, подведения ито­гов и оформления отчетных материалов. На каждом этапе может возникнуть необходимость корректировки программы обследования, когда исследователь или группа исследовате­лей, проводящих его, убеждаются, что собранных данных не хватает для получения искомых результатов, или собранные данные не отражают картину изучаемого объекта и т.д.

По степени глубины, детализации и систематизации об­следования подразделяют на:

- пилотажные (разведывательные) обследования, прово­димые для предварительной, относительно поверхностной ориентировки в изучаемом объекте;

- специализированные (частичные) обследования, прово­димые для изучения отдельных аспектов, сторон изучаемого объекта;

- модульные (комплексные) обследования - для изучения целых блоков, комплексов вопросов, программируемых ис­следователем на основании достаточно подробного предвари­тельного изучения объекта, его структуры, функций и т.д.;

- системные обследования — проводимые уже как полно­ценные самостоятельные исследования на основе вычленения и формулирования их предмета, цели, гипотезы и т.д., и предполагающие целостное рассмотрение объекта, его систе­мообразующих факторов.

На каком уровне проводить обследование в каждом кон­кретном случае решает сам исследователь или исследователь­ский коллектив в зависимости от поставленных целей и задач научной работы.

Мониторинг. Это постоянный надзор, регулярное отсле­живание состояния объекта, значений отдельных его пара­метров с целью изучения динамики происходящих процессов, прогнозирования тех или иных событий, а также предотвра­щения нежелательных явлений. Например, экологический мониторинг, синоптический мониторинг и т.д.

Изучение и обобщение опыта (деятельности). При прове­дении исследований изучение и обобщение опыта (организа­ционного, производственного, технологического, медицин­ского, педагогического и т.д.) применяется с различными целями:

- для определения существующего уровня детальности предприятий, организаций, учреждений, функционирования технологического процесса,

- выявления недостатков и узких мест в практике той или иной сферы деятельности,

- изучения эффективности применения научных рекомендаций,

- выявле­ния новых образцов деятельности, рождающихся в творче­ском поиске передовых руководителей, специалистов и це­лых коллективов.

Объектом изучения могут быть: массовый опыт - для выявления основных тенденций развития той или иной отрасли народного хозяйства; отрицательный опыт - для выявления типичных недостатков и узких мест; передо­вой опыт, в процессе которого выявляются, обобщаются, становятся достоянием науки и практики новые позитивные находки.

Изучение и обобщение передового опыта является одним из основных источников развития науки, поскольку этот метод позволяет выявлять актуальные научные проблемы, создает основу для изучения закономерностей развития про­цессов в целом ряде областей научного знания, в первую очередь - так называемых технологических наук.

Критерии передового опыта:

1) Новизна. Может проявляться в разной степени: от вне­сения новых положений в науку до эффективного примене­ния уже известных положений.

2) Высокая результативность. Передовой опыт должен давать результаты выше средних по отрасли, группе анало­гичных объектов и т.п.

3) Соответствие современным достижениям нау­ки. Достижение высоких результатов не всегда свидетельст­вует о соответствии опыта требованиям науки.

4) Стабильность - сохранение эффективности опыта при изменении условий, достижение высоких результатов на протяжении достаточно длительного времени.

5) Тиражируемость - возможность использования опыта другими людьми и организациями. Передовой опыт могут сделать своим достоянием другие люди и организации. Он не может быть связан только с личностными особенностями его автора.

6) Оптимальность опыта - достижение высоких результа­тов при относительно экономной затрате ресурсов, а также не в ущерб решению других задач.

Изучение и обобщение опыта осуществляется такими эм­пирическими методами-операциями как наблюдение, опросы, изучение литературы и документов и др.



Недостатком метода отслеживания и его разновидностей - обследования, мониторинга, изучения и обобщения опыта как эмпирических методов-действий - является относительно пассивная роль исследователя - он может изучать, отслежи­вать и обобщать только то, что сложилось в окружающей действительности, не имея возможности активно влиять на происходящие процессы. Подчеркнем еще раз, что этот не­достаток зачастую обусловлен объективными обстоятельст­вами. Этого недостатка лишены методы преобразования объекта:опытная работа и эксперимент.

Итак, к методам, преобразующим объект исследования, относятся опытная работа и эксперимент. Различие между ними заключаются в степени произвольности действий исследователя. Если опытная работа - нестрогая исследователь­ская процедура, в которой исследователь вносит изменения в объект по своему усмотрению, исходя из своих собственных соображений целесообразности, то эксперимент - это совер­шенно строгая процедура, где исследователь должен строго следовать требованиям эксперимента.

Опытная работаэто, как уже было сказано, метод вне­сения преднамеренных изменений в изучаемый объект с известной степенью произвола. Так, геолог сам определяет — где искать, что искать, какими методами - бурить скважины, копать шурфы и т.д. Точно так же археолог, палеонтолог определяет - где и как производить раскопки. Или же в фар­мации осуществляется длительный поиск новых лекарствен­ных средств - из 10 тысяч синтезированных соединений только одно становится лекарственным средством. Или же, например, опытная работа в сельском хозяйстве.

Опытная работа как метод исследования широко исполь­зуется в науках, связанных с деятельностью людей - педаго­гике, экономике, и т.д., когда создаются и проверяются моде­ли, как правило, авторские: фирм, учебных заведений и т.п., или создаются и проверяются разнообразные авторские мето­дики. Или же создается опытный учебник, опытный препарат, опытный образец и затем они проверяются на практике.

Опытная работа в некотором смысле аналогична мыслен­ному эксперименту - и там и там как бы ставится вопрос: «а что получится, если ...?» Только в мысленном эксперименте ситуация проигрывается «в уме», а в опытной работе ситуа­ция проигрывается действием.

Но, опытная работа - это не слепой хаотический поиск путем «проб и ошибок».

Опытная работа становится методом научного исследо­вания при следующих условиях: когда она поставлена на основе добытых наукой данных в соответствии с теоретиче­ски обоснованной гипотезой; когда она сопровождается глу­боким анализом, из нее извлекают выводы и создаются теоре­тические обобщения.

В опытной работе применяются все методы-операции эмпирического исследования: наблюдение, измерение, анализ документов, экспертная оценка и т.д.

Опытная работа занимает как бы промежуточное место между отслеживанием объекта и экспериментом.

Она является способом активного вмешательства иссле­дователя в объект. Однако опытная работа дает, в частности, только результаты эффективности или неэффективности тех или иных инноваций в общем, суммарном виде. Какие из факторов внедряемых инноваций дают больший эффект, какие меньший, как они влияют друг на друга - ответить на эти вопросы опытная работа не может.

Для более глубокого изучения сущности того или иного явления, изменений, происходящих в нем, и причин этих изменений, в процессе исследований прибегают к варьирова­нию условий протекания явлений и процессов и факторов, влияющих на них. Этим целям служит эксперимент.

Ретроспекция - взгляд в прошлое, обозрение того, что было в прошлом. Ретроспективные исследования направлены на изучение состояния объекта, тенденций его развития в прошлом, в истории. Ретроспективные исследования прово­дятся, как правило, методом так называемого ретроспектив­ного анализа.

Прогнозированиеспециальное научное исследование конкретных перспектив развития изучаемого объекта. Под­робнее вопросы прогнозирования рассмотрены в Приложении 2.

Итак, мы попытались описать методы исследования с са­мых общих позиций. Естественно, в каждой отрасли научного знания сложились определенные традиции в трактовании и использовании методов исследования. Так, метод частотного анализа в лингвистике будет относиться к методу отслежива­ния (метод-действие), осуществляемому методами-операциями анализа документов и измерения. Эксперименты принято делить на констатирующие, обучающие, контроль­ные и сравнительные. Но все они являются экспериментами (методами-действиями), осуществляемыми методами-операциями: наблюдения, измерения, тестирования и т.д.


Вопросы

 

1. Понятие методологии научного познания. Определение методологии. Функции методологии. Значение методологии научного познания.

2. Основания методологии науки

3. Научная этика

4. Основные нравственные принципы творческой личности исследователя

5. Нравственные ценности исследователя.

6. Средства научного исследования.

7. Методы научного познания. Требования, предъявляемы к научному методу.

8. Общенаучные методы научного познания

9. Теоретические методы научного познания

10. Эмпирические методы научного познания

11. Научное наблюдение как метод научного познания (определение, виды, структура, достоинства)

12. Эксперимент как метод научного познания


Литература

 

1 Новиков A.M., Новиков Д.А. Методология научного ис­следования. - М.: Либроком. - 280 с.

2 Папковская П.Я. Методология научных исследований: Курс лекций. — Мн.: ООО "Информпресс", 2002.— 176 с.

 


Раздел 4. Планирование эксперимента

4.1 Общие положения теории планирования эксперимента

 

 

Планирование эксперимента, как и вся­кий раздел науки, имеет свою терминологию.

Эксперимент- это метод познания, при помощи которого в контролируемых и управляемых условиях исследуется явление действительности.

Составной частью эксперимента является опыт- воспроизведение исследуемого явления в определенных условиях при возможности регистрации и количественной оценки состояния или результатов функционирования ис­следуемого объекта.

Из названия темы видно, что речь идет об экспериментальных методах. Большинство научных исследований связано с экспери­ментом. Он проводится в лабораториях, на производстве, на опыт­ных полях и участках, в клиниках и т. д. Эксперимент может быть физическим, психологическим или модельным. Он может непо­средственно проводиться на объекте или на его модели. Модель обычно отличается от объекта масштабом, а иногда природой.

Под инженерным экспериментом (ИЭ) понимается совокупность опытов, объ­единенных единой целью и единой системой ограничений в пространстве и во времени.

Рассмотрим следующую классификацию ИЭ:

- качественныйпроводится с целью установления наличия или отсутствия у объекта определенных свойств или характеристик;

- количественный (измерительный)проводится с целью выявления количественных характери­стик исследуемого объекта;

- пассивныйявляется традиционным методом, когда ставится большая серия опытов с поочередным варьированием влияющих факторов;

- активный- ставится по заранее составленному плану эксперимента, при этом предусматривается одновременное изменение всех параметров, влияющих на процесс.

При натурных экспериментах исследователь имеет дело непосредственно с изучаемым объектом и явлением.

Качественный эксперимент устанавливает только сам факт существования какого-либо явления, но при этом не дает никаких количественных характеристик объекта исследования. Любой эксперимент, каким бы сложным он ни был, всегда заканчивается представлением его результатов, формулировкой выводов, выдачей рекомендаций. Эта информация может быть выражена в виде графиков, чертежей, таблиц, формул, статистических данных или словесных описаний. Качественный эксперимент как раз и предусматривает именно словесное описание его результатов.

Однако словесное описание – не самый эффективный и информативный способ представления результатов эксперимента, поскольку он не позволяет дать количественных рекомендаций, проанализировать свойства объекта в иных условиях. Поэтому в инженерной практике основное содержание эксперимента представляется числом и количественными зависимостями.

Количественный эксперимент – не только фиксирует факт существования того или иного явления, но позволяет установить соотношения между количественными характеристиками явления и количественными характеристиками способов воздействия на объект исследования.

Эксперимент занимает центральное место в науке. Однако возникает вопрос, насколько эффективно он используется. Джон Бернал, например, отмечал, что научные исследования органи­зуются и проводятся настолько хаотично, что их коэффициент полезного действия может быть оценен величиной порядка 2%. Для того чтобы повысить эффективность исследований, требуется нечто совершенно новое. Одним из возможных путей является применение математических методов, построение математической теории планирования эксперимента.

Планирование эксперимента — это процедура выбора числа и условий проведения опытов, необходимых и достаточных для реше­ния поставленной задачи с требуемой точностью.При этом су­щественно следующее:

- стремление к минимизации общего числа опытов;

- одновременное варьирование всеми переменными, определяю­щими процесс, по специальным правилам — алгоритмам;

- использование математического аппарата, формализующего многие действия экспериментатора;

- выбор четкой стратегии, позволяющей принимать обоснован­ные решения после каждой серии экспериментов.

Задачи, для решения которых может использоваться планиро­вание эксперимента, чрезвычайно разнообразны:

- поиск оптимальных условий,

- построение интерполяционных формул,

- выбор существенных факторов,

- оценка и уточнение констант теоретических моделей (например, кинетических),

- выбор наиболее приемлемых из некоторого множества гипотез о меха­низме явлений,

- исследование диаграмм состав-свойство.

Можно сказать, что там, где есть эксперимент, имеет место и наука о его проведении - планирование эксперимента.

Поиск оптимальных условий является одной из наиболее рас­пространенных научно-технических задач. Они возникают в тот момент, когда установлена возможность проведения процесса и необходимо найти наилучшие (оптимальные в некотором смысле) условия его реализации.

Пусть, например, у химика возникла гипотеза о том, что при взаимодействии двух веществ должен получаться некоторый интересующий его продукт. Чтобы убедиться в правильности своей гипотезы, он начинает проводить эксперимент. Возможно, что ему повезло и он получил требуемый продукт. Однако выход продукта весьма низок, скажем, 2%. Вот тут-то и возникает задача выбора оптимальных условий. Требуется так подобрать концентрации реагирующих веществ, температуру, давление, время реакции и другие факторы, чтобы сделать выход возможно более близким к 100%. В данном примере находятся условия проведения процесса, оптимальные в смысле максимизация выхода требуемого продукта. Но это далеко не единственно возможная постановка задачи. Найденные условия оказались бы другими, если бы ставилась, например, цель минимизации себестоимости продукта или минимизации количества вредных примесей. Следует подчеркнуть, что всегда необходимо четко формулировать, в каком смысле условия должны быть оптимальными. Этим определяется выбор цели исследования. Точная формулировка цели в значи­тельной мере определяет успех исследования, и мы посвятим этому вопросу следующую главу.

Задачи, сформулированные аналогичным образом, назы­ваются задачами оптимизации. Процесс их решения называется процессом оптимизации или просто оптимизацией. Выбор опти­мального состава многокомпонентных смесей или сплавов, повыше­ние производительности действующих установок, повышение ка­чества продукции, снижение затрат на ее получение — вот при­меры задач оптимизации.

Экстремальный эксперимент - эксперимент, который ставится для решения задач оптимиза­ции. Это название связано с глубокой аналогией между оптимизацией и поиском экстремума некоторой функции. Давайте рассмотрим следующие две задачи.

1. Прочность бетона в значительной степени определяется маркой цемента, количеством наполнителя и количеством воды. Требуется установить связь между прочностью бетона и назван­ными факторами.

2. Надежность некоторого полупроводникового прибора зави­сит от ряда технологических факторов. Требуется так подобрать значения этих факторов, чтобы надежность прибора повысилась.

Как вы думаете, какая из этих задач является экстремальной? Чтобы облегчить вам выбор, укажем на признак, отличающий экстремальные задачи. Задача является экстремальной, если цель ее состоит в поиске экстремума некоторой функции. Чтобы установить, какая из двух задач является экстремальной, надо обратиться к их формулировкам и выяснить, где удовлетворяются требования экстремальности. В задаче 1 требуется установить связь между прочностью бетона и тремя факторами. Здесь не определено, какая прочность является оптимальной, и не тре­буется ее оптимизировать. В задаче 2 необходимо повысить на­дежность прибора. Сама постановка задачи указывает на то, что существующая надежность не удовлетворяет эксперимен­татора и требуется поиск таких условий, при которых ее значения повысятся. Задачи типа 1 мы будем называть интерполяцион­ными, а типа 2 — экстремальными.

При этом механизм изучаемого процесса известен лишь частично или совсем неизвестен. В таких случаях объект исследо­вания можно представить в виде «черного ящика» (рисунок 4.1)- системы внутренних связей, недоступ­ных исследователю. Известны лишь переменные величины, воздействующие на объект ис­следования, и величины, характеризующие его состояние или результаты функционирова­ния. Первые называют входными величинами, или факторами, вторые выходными, или откликом.

Рисунок 4.1 - Модель объекта исследования

Все факторы делятся на три группы:

- группа управляемых факторов X, значения которых выбираются и целена­правленно изменяются в ходе исследования. В каждом конкретном случае ко­личество этих факторов и их числовые значения определены (либо изначаль­но, либо при планировании эксперимента);

- группа неуправляемых факторов W, значения которых известны (температура окружающей среды и т.п.);

- группа неуправляемых случайных факторов Z, значения которых неизвестны (неоднородность материала, колебания скорости потока и т.п.).

В связи с наличием третьей группы факторов отклик - случайная величина, ее математическое ожидание как функция от управляемых факторов называется функцией отклика Y.

Для получения значимых результатов экспериментального исследования важно:

- грамотно сформулировать цель эксперимента;

- определить управляемые и случайные факторы, отклик - величину, характе­ризующую результат исследования, оценить диапазоны их изменения;

- составить схему экспериментальной установки, определить необходимую точность измерения, как следствие - приборную базу;

- составить план эксперимента, то есть определить количество экспериментов, уровни (значения) управляемых факторов;

- провести статистическую обработку результатов эксперимента, опираясь на рекомендации теории;

- наглядно оформить и провести анализ результатов.

Для проведения эксперимента необходимо иметь возможность воздействовать на поведение «черного ящика». Все способы такого воздействия мы обозначаем буквой икс и называем факторами. Их называют также входами «черного ящика».

При решении задачи будем использовать математические модели объекта исследования. Под математической моделью мы понимаем уравнение, связывающее параметр оптимизации с фак­торами. Это уравнение в общем виде можно записать так:

 

y = f(x1, х2 … хn, w) + ε, (4.1)

 

где символ у=(), как обычно в математике, заменяет снова: «функция от». Такая функция называется функцией отклика.

Каждый фактор может принимать в опыте одно из нескольких значений. Такие значения будем называть уровнями. Может оказаться, что фактор способен принимать бесконечно много зна­чений (непрерывный ряд). Однако на практике точность, с которой устанавливается некоторое значение, не беспредельна. Поэтому мы вправе считать, что всякий фактор имеет определенное число дискретных уровней. Это соглашение существенно облегчает построение «черного ящика» и эксперимента, а также упрощает оценку их сложности.

Фиксированный набор уровней факторов (т. е. установление каждого фактора на некоторый уровень) определяет одно из возможных состояний «черного ящика». Одновременно это есть условия проведения одного из возможных опытов. Если перебрать все возможные наборы состояний, то мы получим полное мно­жество различных состояний данного «ящика». Одновременно это будет число возможных различных опытов.

Чтобы узнать число различных состояний, достаточно число уровней факторов (если оно для всех факторов одинаково) воз­вести в степень числа факторов к:

N = рк, (4.2)

где рчисло уровней.

Поупражняйтесь в подсчете числа различных состояний для разных случаев. Это вам пригодится в дальнейшем. Кроме того, вы увидите, что реальные объекты, с которыми вы сталкиваетесь ежедневно, обладают огромной сложностью. Так, на первый взгляд простая система с пятью факторами на пяти уровнях имеет 3125 со­стояний, а для десяти факторов на четырех уровнях их уже свыше миллиона!

В этих условиях мы просто вынуждены отказаться от таких экспериментов, которые включают все возможные опыты: перебор слишком велик. Тогда возникает вопрос: сколько и каких опытов надо включить в эксперимент, чтобы решить поставленную за­дачу? Здесь-то и приходит на помощь планирование эксперимента.

Однако нужно иметь в виду, что при планировании экспери­мента не безразлично, какими свойствами обладает объект иссле­дования. Укажем два основных требования, с которыми прихо­дится считаться. Прежде всего существенно, воспроизводятся ли на объекте результаты эксперимента. Выберем некоторые уровни для всех факторов и в этих условиях проведем эксперимент. Затем повторим егонесколько раз через неравные промежутки времени и сравним значения параметра оптимизации. Разброс этих значений характеризует воспроизводимость результатов. Если он не превышает некоторой заранее заданной величины (наших требований к точности эксперимента), то объект удовлетворяет требованию воспроизводимости результатов, а если превышает, то не удовлетворяет этому требованию. Мы будем рассматривать только такие объекты, для которых требование воспроизводи­мости выполняется.

Планирование эксперимента предполагает активное вмеша­тельство в процесс и возможность выбора в каждом опыте тех уровней факторов, которые представляют интерес. Поэтому такой эксперимент называется активным. Объект, на котором возможен активный эксперимент, называется управляемым. Это и есть второе требование к объекту исследования.

На практике нет абсолютно управляемых объектов. На реаль­ный объект обычно действуют как управляемые, так и неуправ­ляемые факторы. Неуправляемые факторы влияют на воспроизво­димость эксперимента и являются причиной ее нарушения. Если требования воспроизводимости не выполняются, приходится об­ращаться к активно-пассивному эксперименту.

Возможно, плохая воспроизводимость объясняется действием фактора, систематически изменяющегося (дрейфующего) во вре­мени. Тогда нужно обращаться к специальным методам планиро­вания. Наконец, возможно, что все факторы неуправляемы. В этом случае возникает задача установления связи между пара­метром оптимизации и факторовв по результатам наблюдений за поведением объекта, или, как говорят, по результатам пассивного эксперимента. Эти случаи мы не будем рассматривать. Наша цель — изложение методов планирования экстремального экспе­римента для воспроизводимых управляемых статических объектов. Планирование экстремального эксперимента — это метод вы­бора количества и условий проведения опытов, минимально необ­ходимых для отыскания оптимальных условий, т. е. для решения поставленной задачи.

Приступая к знакомству с планированием экстремального эксперимента, надо иметь в виду, что при оптимизации распростра­нен так называемый детерминированный подход, особенно широко используемый в химии. При этом предполагается построение физи­ческой модели процесса на основании тщательного изучения механизма явлений (например, кинетики, гидродинамики), что позволяет получить математическую модель объекта в виде си­стемы дифференциальных уравнений. Несомненно, что детермини­рованный и статистический (связанный с планированием экспери­мента) подходы должны разумно дополнять друг друга, а не противопоставляться, как это иногда делается.

4.2 Формулирование цели эксперимента

 

От этого этапа в значительной степени зависит успех эксперимента. Для грамотного формулирования цели эксперимента необходимо четко представлять себе основные виды экспериментов. Их три:

- задачи, связанные с проверкой статистических гипотез,

- дис­персионный анализ

- регрессионный анализ.

<== предыдущая лекция | следующая лекция ==>
Научное исследование: цели и задачи, предмет и объект научного исследования. Объекты научных исследований в области инженерии. 4 страница | Регрессионный анализ. 1 страница


Дата добавления: 2017-12-05; просмотров: 54; ЗАКАЗАТЬ НАПИСАНИЕ РАБОТЫ


Поиск по сайту:

При помощи поиска вы сможете найти нужную вам информацию, введите в поисковое поле ключевые слова и изучайте нужную вам информацию.

Поделитесь с друзьями:

Если вам понравился данный ресурс вы можете рассказать о нем друзьям. Сделать это можно через соц. кнопки выше.
helpiks.org - Хелпикс.Орг - 2014-2018 год. Материал сайта представляется для ознакомительного и учебного использования. | Поддержка
Генерация страницы за: 0.018 сек.