Фаза проектирования научного исследования

 

Проектирование научного исследования - проектирование системы научного знания, которую намерен получить, построить исследователь.

 

Ключевыми моментами проектирования научного исследования эти являются: формулирование научной проблемы, построение научной гипотезы.

1.1. Концептуальная стадия фазы проектирования исследования

 

Концептуальная стадия проектирования делится на этапы:

- замысел исследования,

- выявление противоречия,

- формулирование проблемы,

- определение цели исследования,

- формирование критериев.

1.1.1. Замысел исследования

 

Определение замысла

 

Естественно, первоначально, приступая к очередной научной работе, любой исследователь имеет замысел – задуманный в самых общих чертах проект – что он хочет получить.

Замысел рождается на основе многих обстоятельств: потребностей практики, логики развития самой науки, предшествующего опыта исследователя – практического и/или научно-исследовательского, а также его личных вкусов и интересов, что является, в общем-то, определяющим фактором: ведь научная деятельность – это творческая деятельность. В отличие, допустим, от токаря, который должен делать изо дня в день заданную ему одну и ту же деталь по готовому чертежу, или от солдата, который беспрекословно должен выполнять приказы командира, исследователь должен иметь определенную свободу выбора направления, содержания, методов научной работы и т.д.

 

Выбор типа исследования

 

Во-первых, в настоящее время общепринята следующая классификация типов исследований по их направленности в цепи «теория – практика»:

 

фундаментальные исследования, направленные на разработку и развитие теоретических концепций науки, ее научного статуса, ее истории. Результаты фундаментальных исследований не всегда находят прямой выход в практику;

прикладные исследования решают в большей мере практические задачи или теоретические вопросы практического направления. Обычно прикладные исследования являются логическим продолжением фундаментальных, по отношению к которым они носят вспомогательный характер;

разработки. Их задача – непосредственное обслуживание практики.

 

Во-вторых, выделяются четыре уровня общности исследований:

 

общеотраслевой уровень значимости – работы, результаты которых оказывают воздействие на всю область той или иной науки;

дисциплинарный уровень значимости характеризует исследования, результаты которых вносят вклад в развитие отдельных научных дисциплин, входящих в научную область;

общепроблемный уровень значимости имеют исследования, результаты которых изменяют существующие научные представления по ряду важных проблем внутри одной дисциплины.

частнопроблемный уровень значимости характеризует исследования, результаты которых изменяют научные представления по отдельным частным вопросам.

1.1.2. Этап выявления противоречий

Противоречие это взаимодействие между взаимоисключающими, но при этом взаимообусловленными противоположностями внутри единого объекта.

 

Противоречие (в точных науках) – это когда что-то одно (высказывание, мысль) исключает что-то другое, несовместимое с ним.

 

В качестве классических иллюстраций противоречий (в строгом смысле) можно привести противоречия, сложившиеся в конце ХIХ в.: между принципом относительности Г. Галилея и системой уравнений Д. Максвелла в электродинамике, которое было разрешено созданной А. Эйнштейном специальной теорией относительности. Или противоречие между корпускулярной и волновой теориями, которое было разрешено созданием квантовой механики.

 

Противоречие (в общественных и гуманитарных науках) – несогласованность, несоответствие между какими-либо противоположностями, несоответствие между желательным (с точки зрения теории) и действительным (имеющимся на практике).

 

Выявление противоречий – это важнейший метод познания. Научные теории развиваются в результате раскрытия и разрешения противоречий, обнаруживающихся в предшествующих теориях или в практической деятельности людей.

 

На основе выявленного противоречия исследователь ставит для себя проблему исследования.

 

1.1.3. Этап постановки (формулирование) проблемы

 

Научная проблема – это такой вопрос, ответ на который не содержится в накопленном обществом научном знании.

 

Научная проблема – это специфическая форма организации знания, объектом которого является не непосредственная предметная реальность, а состояние научного знания об этой реальности (Знание о незнании)

Если мы знаем, что нам неизвестно что-то об объекте, например, какие-либо его проявления или способы связи между его какими-то компонентами, то мы уже имеем определенное проблемное знание.

Например, мы четко знаем, что до конца не известна природа шаровой молнии. Здесь налицо знание о незнании. Оно лежит в основе выдвижения научных проблем.

Проблема возникает в результате фиксации учеными реально существующего или прогнозируемого противоречия, от разрешения которого зависит прогресс научного познания и практики: обобщенно говоря,

 

Научная проблема есть отражение противоречия между знанием и «знанием незнания».

 

Проблема является формой знания, способствующей определению направления в организации научного исследования – она указывает на неизвестное и побуждает к его познанию, развитие науки невозможно без выполнения требования целенаправленности.

Проблема определяет целенаправленность исследования.

В процессе постановки проблемы выделяют следующие этапы формулирование, оценка, обоснование и структурирование проблемы.

 

Этапы постановки проблемы

 

1) Формулирование проблемы.

 

В процессе формулирования проблемы важное значение имеет постановка вопросов. Вопросы могут быть ясно выражены или не высказаны, четко определены или подразумеваться. Постановка проблемы есть, прежде всего, процесс поиска вопросов, которые, сменяя друг друга, приближают исследователя к наиболее адекватной фиксации неизвестного и способов превращения его в известное.

 

Но, во-первых, не всякий научный вопрос есть проблема – он может оказаться всего лишь уточняющим вопросом, или вопросом, вообще неразрешимым для науки на сегодняшний день.

Во-вторых, для постановки проблемы недостаточно вопроса. Требуется еще выявление оснований данного вопроса.

Важное значение для формулирования проблемы имеет построение образа, ожидаемого конечного результата исследования на основе прогноза развития исследования и «фона» данной проблемы. Под «фоном» понимаются все обстоятельства, с которыми связана на данном этапе, а также будет связана в дальнейшем, проблема и которые оказывают и будут оказывать влияние на ход и результаты исследования.

 

Постановка проблемы осуществляется всегда с использованием средств какого-то научного языка.

 

- Выбор средств научного языка

Особенно важно не допустить терминологической путаницы в исходном пункте научного исследования: в процессе постановки проблемы и в ходе ее развертывания необходимо четкое определение всех понятий, имеющих отношение к проблеме. Случается, что неясности, неоднозначные моменты у тех, кто ставит проблему, могут зачастую с успехом быть устранены, если удается изложить проблему без специальных терминов.

Пользу перевода на простой язык можно проиллюстрировать цитатой из известной пародии «Диалоги ХХI века», где высказывания специалиста-ученого переводит на понятный широкой публике язык приспособленный для этого робот: «Лектор: Представьте себе четыре моноциклических агрегата, перемещающихся по эквидистантным траекториям... Робот-переводчик: Представьте себе ... Э ... четыре колеса».

2) Оценка проблемы.

 

В оценку проблемы входит определение всех необходимых для ее решения условий:

 

- определение методов исследования,

- источников информации,

- состава научных работников,

- организационных форм, необходимых для решения проблемы,

- источников финансирования,

- видов научного обсуждения

- программы и методик исследования,

- промежуточных и конечных результатов,

- перечня необходимого научного оборудования,

- необходимых площадей,

- партнеров вероятной кооперации по проблеме и т.д.

 

3) Обоснование проблемы.

 

Обоснование проблемы подразумевает:

 

- определение связей данной проблемы с другими – ранее решенными и решаемыми одновременно с данной, а также теми, решение которых станет возможным в зависимости от решения данной проблемы;

 

- поиск аргументов в пользу необходимости решения проблемы (научная или практическая ценность ожидаемых результатов);

 

Для снижения субъективности оценки проблемы важное значение имеет выдвижение, как самим исследователем, так и его коллегами, всевозможных возражений против проблемы.

 

- коллективное обсуждение, выдвижение противоположных суждений.

 

Под сомнение ставится все, что относится к существу проблемы, условиям постановки и следствиям ее разрешения:

есть ли проблема?

имеется ли практическая или научная потребность в ее разрешении?

возможно ли ее разрешение при современном состоянии науки?

посильна ли эта проблема данному исследователю или данному научному коллективу?

какова возможная ценность планируемых результатов?

 

Правильная постановка проблемы предполагает состязание аргументов «за» и «против». Именно в фокусе противоположных суждений рождается правильное представление о сути проблемы, необходимости решения и ее ценности, ее теоретической и практической значимости.

 

4) Структурирование проблемы.

 

Исходным пунктом структурирования проблемы является ее расщепление, или «стратификация» проблемы.

 

- Расщепление (стратификация, декомпозиция) – поиск дополнительных вопросов (подвопросов), без которых невозможно получить ответ на центральный – проблемный – вопрос.

В исходной позиции редко можно сформулировать все подвопросы проблемы. Это происходит в значительной мере в ходе самого исследования. В начале часто оказывается чрезвычайно трудным предугадать все, что потребуется для решения проблемы. Поэтому стратификация (расщепление, декомпозиция) относится ко всему процессу решения проблемы. В исходном же пункте ее постановки речь идет о поиске и формулировании всех возможных и необходимых подвопросов, без которых нельзя начать исследование и рассчитывать на получение ожидаемого результата.

 

Далее, в процессе расщепления проблемы необходима ее локализация.

 

- Локализация – ограничение объекта изучения реально обозримыми и посильными для исследователя пределами.

 

Исследователю крайне важно уметь отказаться от того, что может быть само по себе чрезвычайно интересно, но затруднит получение ответа на тот проблемный вопрос, ради которого организуется исследование.

 

За отграничением, локализацией проблемы следует упорядочение всего набора вопросов (подвопросов) проблемы.

 

- Упорядочение вопросов– выстраивание «графика» решения вопросов проблемы.

 

1.1.4. Этап определения объекта, предмета и темы исследования

 

Объект исследования в гносеологии – теории познания – это то, что противостоит познающему субъекту в его познавательной деятельности.

 

Объект исследования – окружающая действительность, с которой исследователь имеет дело.

Предмет исследования – это та сторона, тот аспект, та точка зрения, «проекция», с которой исследователь познает целостный объект, выделяя при этом главные, наиболее существенные (с точки зрения исследователя) признаки объекта.

 

Один и тот же объект может быть предметом разных исследований или даже целых научных направлений. Так, объект «учебный процесс» может изучаться дидактами, методистами, психологами, физиологами, гигиенистами и т.д. Но у них у всех будут разные предметы исследования.

Предмет одного исследования может служить объектом другого (более частного) исследования. Например, объект «качество жизни» изучается в медицине, экономике, социологии и т.д. Такой аспект этого объекта как «здоровье населения» является, с одной стороны, предметом исследований для медицины, а с другой стороны – объектом исследований в такой отрасли медицинских наук как организация здравоохранения.

 

Предмет познания представляет собой совокупность свойств – связей и законов, изучаемых данной наукой и получивших выражение в определенных логических и знаковых формах. Этим предмет познания отличается от объекта познания, который существует независимо от познающего субъекта – в природе, человеке или обществе.

 

Понятия «объект познания» и «предмет познания» выполняют неодинаковые функции:

 

Понятие «объект» выражает, фиксирует объективноесуществование изучаемых явлений, их свойств, связей и законов развития.

Понятие «предмет», определяет те границы, в пределах которых изучается тот или иной объект.

 

Выход той или иной науки за границы своего предмета означает или некомпетентное вмешательство данной науки в сферу других наук, или отпочкование от данной науки новых научных направлений, которые впоследствии могут сформировать свой собственный предмет изучения.

Позитивными примерами здесь являются физическая химия, молекулярная биология и другие науки, возникшие на стыке других наук, достигших определенного уровня развития.

В качестве негативного примера можно привести использование необоснованных аналогий и/или необоснованное расширение предмета исследований. Причем этим «грешат» представители наук как слабой версии (например, проведя педагогический эксперимент в одном образовательном учреждении, исследователь утверждает, что полученные им результаты справедливы в любом образовательном учреждении – налицо необоснованное расширение предмета исследований, необоснованный перенос результатов с одного предмета на другой), так и сильной версии (нередко можно встретить работы, в которых ученый-математик применяет хорошо освоенный им аппарат в новой для него предметной области, не разобравшись в специфике последней – налицо использование необоснованных аналогий).

Почему же до сих пор ничего не говорилось о теме исследования? Ведь, вроде бы, на первом месте должна стоять тема исследования, и лишь потом его замысел, противоречие, проблема и т.д. Да, конечно, в самом первом приближении тема исследования формулируется в его начале. Но завершенный вид она приобретает, как правило, когда сформулирован предмет исследования – ведь в подавляющем большинстве случаев тема исследования и указывает на предмет исследования, а ключевое слово или словосочетание в теме исследования указывает, чаще всего, на его объект.

Тема исследования – формулируется после постановки объекта и предмета исследования.

Тема исследования в целом указывает на его предмет, а ключевое слово или словосочетание в ней указывает, на объект исследования.

1.1.5. Этап определения цели исследования.

На основе объекта и предмета исследования определяется его цель.

 

Цель исследования – это то, что в обобщенном виде необходимо достичь по завершении исследования.

 

Конечно, наиболее просто и логически правильно, во всяком случае, формально, сформулировать цель, как это нередко и делается, в короткой фразе: «цель – решить поставленную проблему исследования» (при условии, конечно, что проблема сформулирована грамотно и адекватно). Однако при таком формулировании цели исследователь берет на себя смелость утверждать, что полностью исчерпал проблему.

 

Конечно, Д.И. Менделеев, открыв Периодический закон, исчерпал проблему классификации химических элементов. Или А. Эйнштейн, создав специальную теорию относительности, решил проблему соответствия законов механики и электродинамики. Однако всегда утверждать, что исследователь полностью решил проблему, наверное, рискованно. Но в любом случае подразумевается, что по завершении исследования должна быть как бы полностью решена проблема исследования в рамках, определенных его предметом, целью и поставленными задачами (см. ниже).

Следует отметить, что в научных работах по гуманитарным и общественным наукам, особенно на уровне кандидатских диссертаций, часто некорректность формулирования цели исследования возникает, когда определение намечаемого научного результата – нового научного знания, что должно быть основным итогом любого научного исследования, авторы задаются целями практическими. Такие цели, как: «совершенствование процесса ...»; «повышение эффективности ...» и т.п. – это не цели научного исследования. Научные результаты в дальнейшем, конечно, при определенных условиях (внедрение и т.п.) могут стать основой для «повышения эффективности ...» и т.д., но это нельзя ставить как цель исследовательской работы. И даже такая формулировка, как «разработать научно-обоснованные рекомендации ...», может, очевидно, выступать лишь как сопутствующая, вспомогательная, но не основная цель исследования, а, скорее, даже как одна из задач (см. ниже), способствующая повышению практической значимости исследования.

1.1.6 Этап формирования (выбора) критериев оценки достоверности результатов исследования.

Когда определена цель исследования, становится ясным, какого рода результаты могут быть получены в данном исследовании и какова их возможная структура, исследователь начинает подбирать и определять критерии оценки достоверности будущих результатов.

 

Критерий оценки – самый сложный и острый вопрос для любого исследования, поэтому, приступая к исследованию, необходимо самым серьезным образом подойти к подбору критериев оценки достоверности его результатов.

 

Критерии оценки результатов теоретического исследования, в общем-то, вполне однозначны, они выработаны многолетним опытом исследований. Критерии же оценки достоверности результатов эмпирического исследования индивидуальны для каждого конкретного исследования, поскольку зависят целиком от его содержания.

 

Критерии оценки достоверности результатов теоретического исследования.

 

Результат теоретического исследования – теория, концепция или какие-либо теоретические построения – конструкции должны отвечать следующим принципам-критериям, для любых отраслей научного знания:

1) предметностью;

2) полнотой;

3) непротиворечивостью;

4) интерпретируемостью;

5) проверяемостью;

6) достоверностью.

1) Предметность как признак научной теории означает, что вся совокупность понятий и утверждений научной теории должна относиться к одной и той же предметной области.

Признак предметности не исключает того, что для объяснения одних и тех же явлений, процессов могут существовать несколько теорий (что соответствует принципу дополнительности – см. выше).

 

2) Полнота как признак теории означает, что эта теория должна охватывать (описывать) все явления, процессы из ее предметной области.

3) Непротиворечивость как признак теории означает, что все постулаты, идеи, принципы, модели, условия и другие структурные элементы данной теории логически не должны противоречить друг другу.

Как известно, обнаружение противоречий в научных теориях и их разрешение выступает в качестве стимула их усовершенствования, развития или построения новых теорий.

4) Интерпретируемость как признак научной теории означает, что теория должна обладать эмпирическим содержанием, должна предусматривать содержательную интерпретацию формальных результатов

Без эмпирической интерпретации нет теории, поскольку в противном случае она превращается в простой набор знаков, формул. Исключение в данном случае составляет математика – ведь, к примеру, созданная Н.И. Лобачевским геометрия была для своего времени чистой абстракцией и никакой содержательной интерпретации не имела.

 

5) Проверяемость выступает как установление соответствия содержания положений теории свойствам, отношениям реальных объектов.

Во многих случаях решающим способом такого установления является проверка.

 

6) Признак достоверности научной теории означает, что в научной теории истинность ее основных положений достоверно установлена.

 

В этом отношении научная теория отличается от научной гипотезы, где истина устанавливается с той или иной степенью достоверности.

 

Естественно, вышеприведенные признаки – критерии научной теории, концепции являются первоначальными. Они позволяют предварительно оценить результаты теоретического исследования по его завершении. Окончательным критерием достоверности научной теории является ее реализация в массовой практике. Как говорится, ничего нет практичнее, чем хорошая теория. Но для проявления этого критерия требуется время. И зачастую довольно длительное.

Критерии оценки достоверности результатов эмпирического исследования.

Критерии достоверности результатов эмпирического исследования должны удовлетворять, в частности, следующим признакам:

 

1. Критерии должны быть объективными настолько, насколько это возможно в данной научной области), позволять оценивать исследуемый признак однозначно, не допускать спорных оценок разными людьми.

2. Критерии должны быть адекватными, валидными, то есть оценивать именно то, что исследователь хочет оценить.

3. Критерии должны быть нейтральными по отношению к исследуемым явлением. Так, если в ходе педагогического эксперимента учащимися в одних классах, допустим, изучается какая-то новая тема, а в других – нет, то в качестве критерия сравнения нельзя брать знание учащимися материала этой темы.

4. Совокупность критериев с достаточной полнотой должна охватывать все существенные характеристики исследуемого явления, процесса.

1.2. Стадия построения гипотезы исследования

 

Построение гипотез является одним из главных методов развития научного знания, который заключается в выдвижении гипотезы и последующей ее экспериментальной, а подчас и теоретической проверке, которая либо подтверждает гипотезу и она становится фактом, концепцией, теорией, либо опровергает, и тогда строится новая гипотеза и т.д.

 

Гипотеза, по сути дела, является моделью будущего научного знания (возможного научного знания).

 

Научная гипотеза выступает в двоякой роли:

- как предположение о той или иной форме связи между наблюдаемыми явлениями и процессами, описательные гипотезы;

- как предположение о связи между наблюдаемыми явлениями, процессами и внутренней их основой – объяснительные гипотезы.

 

В качестве научного предположения гипотеза отличается от произвольной догадки тем, что удовлетворяет ряду требований. Выполнение этих требований образует условия состоятельности гипотезы.

 

Условия состоятельности гипотезы

- Гипотеза должна объяснять весь круг явлений и процессов, для анализа которого она выдвигается (то есть для всей предметной области создаваемой теории), по возможности не входя в противоречия с ранее установленными фактами и научными положениями.

 

Однако если объяснение данных явлений на основе непротиворечия известным фактам не удается, выдвигаются гипотезы, вступающие в противоречие с ранее доказанными положениями.

 

- Принципиальная проверяемость гипотезы.

 

Гипотеза есть предположение о некоторой непосредственно ненаблюдаемой основе явлений, и может быть проверена лишь путем сопоставления выведенных из нее следствий с опытом. Недоступность следствий опытной проверке означает непроверяемость гипотезы.

 

- Приложимость гипотезы к возможно более широкому кругу явлений.

 

Из гипотезы должны выводиться не только те явления и процессы, для объяснения которых она специально выдвигается, но и возможно более широкий класс явлений и процессов, непосредственно, казалось бы, не связанных с первоначальными.

 

-Максимально возможная принципиальная простота гипотезы.

 

Это не должно пониматься как требование легкости, доступности или простоты. Действительная простота гипотезы заключается в ее способности, исходя из единого основания, объяснить, по возможности, более широкий круг различных явлений, процессов, не прибегая при этом к искусственным построениям и произвольным допущениям, не выдвигая в каждом новом случае все новых и новых гипотез.

Соблюдение этих четырех основных условий состоятельности гипотезы, естественно, еще не превращает ее в теорию, но при их отсутствии предположение вообще не может притязать на роль научной гипотезы.

 

Всякую гипотезу можно плодотворно использовать только в том случае, если исследователь, пока не завершено исследование, применяет ее точно так же, как и знания, уже принятые в науке, то есть исходит из нее как из установленной системы знаний. Иначе ученый не сможет строго, последовательно рассуждать, делать конкретные логические выводы и проверять их эмпирически. Никаким другим способом ему не удастся обнаружить, где именно и в чем выводы из гипотезы не согласуются с уже установленными фактами и мешают поискам новых фактов.

Исследователь должен быть готов не только к выдвижению новых гипотез, но и к выбору и анализу альтернативных гипотез – ведь нередко в науке одни и те же явления и процессы получают объяснение при помощи различных гипотез. Наличие альтернативных гипотез является важной предпосылкой прогресса науки, ибо позволяет избегать предвзятости в истолковании и использовании получаемых результатов.

 

1.3. Стадия конструирования исследования.

1.3.1. Задачи исследования.

Задачи исследования – частные, сравнительно самостоятельные цели исследования в конкретных условиях проверки сформулированной гипотезы.

 

Варианты формулирования задач:

 

1) задачи формулируются как относительно самостоятельные законченные этапы исследования.

 

Но, вообще говоря, это не научные задачи как таковые, а скорее процессуальные компоненты исследования. Они формулируются в глаголах: «изучить», «проанализировать», «попробовать» и т.п. В этом случае четко просматривается этапная, временнaя структура построения задач исследования – каждая следующая задача может решаться только на основе решения предыдущей.

2) задачи формулируются как относительно самостоятельные, законченные части исследования.

 

Здесь такая временная последовательность, как в предыдущем случае, прямо не просматривается. Задачи тут выступают как необходимость решения отдельных под проблем по отношению к проблеме исследования и как частные цели (подцели) по отношению к общей цели исследования, заданные, естественно, в конкретных условиях, налагаемых сформулированной гипотезой исследования.

 

1.3.2.Создание программы (методики) исследования.

 

Вторым и последним этапом стадии конструирования научного исследования является создание программы (методики) исследования.

 

Методика – это документ, который включает в себя описание проблемы, объекта, предмета исследования, его цели, гипотезы, задачи, методологических основ и методов исследования.

Кроме того, создание методики исследования включает в себя еще планирование, то есть разработку временного графика выполнения намеченных работ.

 

Хотя многие научные работники весьма скептически относятся к планированию научных исследований, опыт показывает, что планирование является полезным организующим, в том числе самоорганизующим началом.

1.4. Стадия технологической подготовки исследования

 

Стадия технологической подготовки исследования специфична для каждой конкретной научной работы. Она заключается в

- подготовке экспериментальной учебно-программной документации,

- учебных пособий и средств обучения;

- подготовке бланков протоколов наблюдений, анкет;

- приобретении или изготовлении необходимого экспериментального оборудования,

- создании необходимого программного обеспечения и т.д.

 

2. Технологическая фаза научного исследования

Технологическая фаза исследования заключается в непосредственной проверке построенной научной гипотезы в соответствии с разработанным на стадии конструирования и технологической подготовки исследования комплексом рабочих материалов и оборудования. Технологическая фаза состоит из двух стадий: проведения исследования и оформления результатов.

2.1. Стадия проведения исследования

 

Стадия проведения исследования, в свою очередь, включает два этапа: теоретический этап (анализ и систематизация литературных данных, отработка понятийного аппарата, построение логической структуры теоретической части исследования) и эмпирический этап – проведение опытно-экспериментальной работы.

 

2.1.1. Теоретический этап

2.1.1.1. Анализ и систематизация литературных данных.

 

Постоянная работа с научной литературой – обязательный компонент любой научной деятельности. А сама научная литература является важнейшим средством поддержания существования и развития науки – во-первых, средством распространения и хранения достигнутого научного знания, во-вторых – средством коммуникации, научного общения ученых между собой. Необходимо учитывать разные функции тех или иных видов публикаций, отражающих, как правило, разные этапы развития научного знания.

 

Иерархия отражения научных результатов в публикациях

 

1) Тезисы научных конференций, семинаров

2) Статьи в журналах и сборниках

3) Монографии

4) Вузовские учебники

5) Школьные учебники

 

Вначале новые научные факты, идеи, теории появляются в публикуемых тезисах выступлений на научных конференциях, семинарах, съездах, симпозиумах, а также в препринтах и других видах публикаций, осуществляемых наиболее быстро. Затем в уже систематизированном и отобранном виде они переходят в научные статьи, публикуемые в журналах и сборниках.

Затем – в еще более обобщенном, систематизированном и проверенном виде факты, идеи, теории публикуются в монографиях.

И только фундаментальные, общие и неоднократно проверенные новые компоненты научного знания попадают в учебники – вузовские, а уж самые значительные – в школьные.

 

Эту динамику движения научного знания должен учитывать исследователь в работе с научной литературой, разграничивая литературные источники по степени их важности, достоверности и признанности в научном мире.

 

Этапы работы с литературой:

 

1) Составление библиографии

 

Начиная работать с литературой, каждый исследователь приступает к составлению библиографииперечня книг затрагивающих исследуемый вопрос.

 

Для каждого научного исследования необходимо определение ведущих научных концепций, теории, которые берутся в основу данной работы. Имеются в виду не те все научные публикации, на которые исследователь ссылается в своей работе – их десятки, сотни. Речь идет об одной, двух, трех, от силы четырех концепциях крупных ученых, которые действительно лежат в основании исследования.

 

2) Выбор методологической базы исследования – определение ведущих научных концепций, теорий, которые берутся в основу данной работы.

 

Исследователь должен четко разобраться, что же действительно является методологической базой его исследования. Необходимость четкого уяснения – какие теории, концепции берутся за основу, обусловливается еще и тем обстоятельством, что в науке существуют разные научные школы, разрабатывающие подчас одни и те же проблемы, но с разных позиций, в разных направлениях. Эти научные школы могут иметь совершенно разные, подчас противоположные научные взгляды. Существование различных научных школ объективно необходимо для развития науки. Но исследователь, выстраивая свою работу, должен занять строгую позицию – какие теории, концепции он принимает за базовые, и обосновывает почему, а на какие только ссылается в процессе анализа литературных источников.

 

2.1.1.2. Построение понятийного аппарата

 

Важнейшие требования к любой научной работе – это строгость, четкость, однозначность применяемой терминологии. Если в обыденной жизни, в устных выступлениях допускается известная свобода в оперировании терминами, то требования упорядоченности и строгости употребления языка науки обязательны.

 

 

Выработка терминологии

 

1) Общие словари, энциклопедические словари и энциклопедии

(Словари русского языка В.И. Даля, С.И. Ожегова и Д.Н. Ушакова, словарь иностранных слов, энциклопедический словарь, словарь синонимов русского языка)

 

Каждый раз, когда у исследователя появляется необходимость использовать какой-либо термин, он начинает работу с ним с общих словарей, энциклопедических словарей и энциклопедий. В первую очередь это словари русского языка В.И. Даля, С.И. Ожегова и Д.Н. Ушакова, Словарь иностранных слов, Энциклопедический словарь. Эти источники дают однозначное толкование общеупотребительных терминов в общенациональном масштабе. При этом, хотя терминология в них трактуется практически одинаково, каждый из них все же вносит свои нюансы в объяснения значений слов, что позволяет лучше ориентироваться при использовании того или иного термина. Полезен бывает Словарь синонимов русского языка, когда нередко приходится мучительно искать, чем можно заменить то или иное слово, чтобы не повторять его много раз в процессе написания текста подряд в одном предложении, в одном абзаце и т.п.

 

2) Философские словари, логический словарь-справочник (Н.И. Кондаков)

(отработка сугубо философских, гносеологических и методологических понятий)

 

Следующий этап – отработка сугубо философских, гносеологических и методологических понятий – работа с соответствующими словарями.

 

В философских словарях любому исследователю полезно познакомиться с содержанием, по крайней мере, таких понятий (категорий), как:

 

абстракция, анализ, знание, значение, качество, количество, модель, наблюдение, норма, объяснение, обобщение, образ, объект, опыт, основание, отношение, практика, предмет, проблема, развитие, рефлексия, семантика, система, системный анализ, свойство, сравнение, сущность, сходство, теория, форма, формализм, эксперимент и др.

 

Кроме того, в этих же целях бывает полезен логический словарь-справочник Н.И. Кондакова [101]:

 

абстрагирование, абстракция, аксиома (аксиоматический метод), алгоритм, аналогия, взаимосвязь, восхождение от абстрактного к конкретному, гипотеза, гносеология, дедукция, закон, знак, знание, идея, инвариантность, индукция, информация, исследование, класс (не в смысле школьного класса), классификация, композиция, компонент, контекст, концепция, кортеж, логика, логическое и историческое, мера, метатеория, непосредственное знание, непротиворечивость, обобщение понятия, обратного отношения закон, общее понятие, объем понятия, определение понятия, особенное, отношение, оценка, параметр, понятие, постулат, правила определения понятия, синтез, признак, принцип, проблема, противоречие, процедура, содержание понятия, сравнение, структура, термин, тип, условие, факт и др.

 

И, наконец, следующий этап, когда речь идет о терминах, имеющих существенное значение для конкретного исследования – анализ их толкования в научной литературе: монографиях, статьях и т.д.

В первую очередь изучаются фундаментальные публикации тех авторов, чьи теории, концепции берутся в основу исследования.

3) Публикации по методологической базе исследования (монографии, статьи) – анализ толкования в научной литературе, терминов, имеющих существенное значение для конкретного исследования.

 

По этим публикациям целесообразно составить тезаурус – словарь используемых данными авторами терминов с раскрытием их толкований и соотношений между ними.

 

В дальнейшем, при написании отчетных материалов, статей, книг, диссертаций используется терминология преимущественно из этого тезауруса, а остальные термины применяют только в случае необходимости, когда уже нельзя обойтись без них. Но каждый раз, применяя тот или иной термин, исследователь контролирует себя: для не столь существенных для его работы терминов – в чьей трактовке он их используют, а для существенных – обосновывается, почему берется трактовка именно этого (этих) авторов.

 

Каждого исследователя подстерегает «опасность» введения каких-либо новых терминов. Подчас это очень хочется сделать. Но ученые крайне неохотно и настороженно воспринимают новые термины в науке. Это понятно – ведь язык, в том числе научный язык – это общенациональное достояние, к которому нужно относиться крайне бережно. И если каждый пишущий, публикующийся начинает использовать свою новую терминологию, ученые, а вслед за ними и все люди, вообще перестанут понимать друг друга. Поэтому введение новых терминов (слов и словосочетаний) допустимо только в крайних случаях, когда ни один из имеющихся терминов не может описать соответствующее явление, процесс.

И уж совсем недопустимо вкладывать какой-то новый смысл, давать какие-то новые «авторские» определения устоявшейся терминологии (подчеркнем, что это требование относится именно к устоявшейся, общепринятой терминологии).

 

В работе с понятийным аппаратом необходимо отметить еще одно обстоятельство, имеющее важное значение:

 

Отбор и систематизация понятийного аппарата, используемого в каждом конкретном исследовании, определяется его предметом, поставленными целями и задачами.

 

Поэтому сущность явлений и процессов, выражаемых через постоянную систему понятий, определяется авторской позицией, а сама понятийная система в каждом исследовании является в той или иной мере авторской (другое дело, она может быть четкой, стройной или наоборот – расплывчатой и противоречивой).

 

2.1.1.3. Построение логической структуры теоретического исследования.

 

Построение структуры теоретической части эмпирического исследования, весьма вариативно и целиком определяется предметом, целями и задачами каждого конкретного исследования. Общими являются лишь некоторые моменты, которые мы здесь и рассмотрим.

При построении логической структуры исследования часто возникает необходимость использования различных классификаций и введения своих собственных классификаций. Более того, они даже желательны, поскольку придают работе определенную стройность.

В процессе построения логической структуры работы исследователь неизбежно попадает в положение «витязя на распутье», натыкаясь на «логические развилки» – можно пойти и в таком направлении, и в таком, и в таком. Таких «развилок» на пути исследователя бывает много, а пройти все пути, естественно, он не сможет, для этого не хватит и всей жизни. Поэтому выбирается единственная дорога, которую исследователь считает основной, перспективной. Если «развилка» имеет принципиальное значение для всей работы в целом, в таких случаях дается обоснование, почему выбрано именно это направление. Но не стоит оправдываться, почему не сделано чего-то другого. Ведь все научные работники, имеющие опыт построения логики научных работ, о таких «логических развилках» знают по себе, и такой выбор, если он оправдан, является вполне естественным.

 

1) Использование существующих или введение собственных классификаций.

Классификация – система распределения объектов (предметов, явлений, процессов, понятий) по классам в соответствии с определенным признаком.

Требования, предъявляемые к классификации:

- Классификация может проводиться только по одному основанию.

 

Это, пожалуй, самое главное требование, наиболее часто нарушаемое. Вводя какую-либо классификацию, сразу необходимо оговорить – а по какому основанию она вводится?

 

Основание классификации – это признак, который дает возможность разделить объем родового понятия (всю совокупность классифицируемых по данной классификации объектов) на виды (видовые понятия – члены, части этой совокупности).

 

Например, основанием для деления общеобразовательной школы на начальную, неполную среднюю и среднюю служит уровень общего образования, даваемый учащимся на каждой ступени. В то же время нельзя, к примеру, в одной классификации разделить учащихся какой-то школы по возрасту и успеваемости или, скажем, посещению факультативных занятий.

 

- Объем членов классификации должен быть в точности равен объему всего классифицируемого класса.

 

Это значит, к примеру, что если мы разделили все треугольники на основании величины углов: остроугольные, прямоугольные, тупоугольные, то никаких других треугольников по этому основанию быть не может.

 

- Каждый объект может попасть только в один подкласс.

 

Нельзя, например, расклассифицировать все целые числа на четные, нечетные и простые. Тогда числа 5, 7, 11 и т.д. попадают одновременно в два класса – они являются и нечетными и простыми.

 

- Члены классификации должны взаимно исключать друг друга.

 

Это значит, что ни один из них не должен входить в объем другого. К примеру, научные книги нельзя подразделить на монографии, учебники, справочники и по математике.

Книги по математике могут быть и монографиями, учебниками, справочниками.

 

- Подразделение на подклассы должно быть непрерывным.

 

То есть необходимо брать ближайший подкласс и не перескакивать в более отдаленный подкласс. Допустим, те же научные исследования можно классифицировать как исследования в области физики, химии, биологии, экологии и т.д., но нельзя – как исследования в области химии, биологии, экологии и электродинамики (раздел физики). В последнем случае мы «перескочили» из ближайшего подкласса (физика) в более отдаленный подкласс – раздел физики.

- К одному и тому же классу объектов, явлений, процессов могут быть применены разные классификации по разным основаниям-признакам.

 

Так мебель может быть классифицирована:

– по основанию материала, из которого она изготовлена: деревянная, металлическая, пластмассовая и т.д.;

– по основанию стиля дизайна: классическая, ампир, викторианская, модерн и т.д.;

– по основанию цвета: черная, белая, коричневая и т.д.;

– по основанию функционального назначения: столы, стулья, шкафы и т.д.

То есть одни и те же объекты могут быть классифицированы по множеству оснований.

 

Известен такой пример неудачной (нарушающий приведенные требования) классификации, как «Классификация животных китайскими придворными мудрецами»: «Животные подразделяются на: а) принадлежащих Императору, б) бальзамированных, в) прирученных, г) молочных поросят, д) сирен, е) сказочных, ж) бродячих собак, з) включенных в настоящую классификацию, и) буйствующих, как в безумии, к) неисчислимых, л) нарисованных очень тонкой кисточкой из верблюжьей шерсти, м) и прочих, н) только что разбивших кувшин, о) издалека кажущихся мухами».

 

Виды классификаций

 

а) Иерархическая система классификации – система классификации, в которой каждый объект на любом уровне должен быть отнесен к одному классу, который характеризуется конкретным значением выбранного классификационного признака.

 

Построение иерархической классификации:

- исходное множество элементов составляет 0-й уровень и делится в зависимости от выбранного классификационного признака на классы (группировки), которые образуют 1-й уровень;

- каждый класс 1-го уровня в соответствии со своим, характерным для него классификационным признаком делится на подклассы, которые образуют 2-й уровень;

- каждый класс 2-го уровня аналогично делится на группы, которые образуют 3-й уровень, и т.д.

 

Учитывая достаточно жесткую процедуру построения структуры классификации, необходимо перед началом работы определить ее цель, т.е. какими свойствами должны обладать объединяемые в классы объекты. Эти свойства принимаются в дальнейшем за признаки классификации.

 

Количество уровней классификации, соответствующее числу признаков, выбранных в качестве основания деления, характеризует глубину классификации.

Достоинства иерархической системы классификации:

- простота построения;

- использование независимых классификационных признаков в различных ветвях иерархической структуры.

 

Недостатки:

- жесткая структура, приводящая в случае внесения изменений, к перераспределению классификационной группировки;

- невозможность группировать объекты по заранее не предусмотренным сочетаниям признаков.

 

б) Фасетная система классификации – система, позволяющая выбирать и группировать признаки классификации независимо как друг от друга.

 

Каждый фасет (ячейка) классификации содержит совокупность однородных значений классификационного признака.

 

Причем значения в фасете могут располагаться в произвольном порядке, хотя предпочтительнее их упорядочивание.

В каждой клетке таблицы хранится конкретное значение фасета. Процедура классификации состоит в присвоении каждому объекту соответствующих значений фасетов. При этом могут быть использованы не все фасеты.

 

При построении фасетной системы классификации необходимо, чтобы значения, используемые в различных фасетах, не повторялись. Фасетную систему можно легко модифицировать, внося изменения в конкретные значения любого фасета.

Достоинства фасетной системы классификации:

 

- Возможность создания большой емкости информации, т.е. использования большого числа признаков классификации для создания группировок;

- Возможность простой модификации всей системы классификации без изменения структуры существующих группировок.

 

 

в) Дескрипторная (описательная) система классификации – система, подразумевающая использование естественного языка описания объектов.

 

Особенно широко она используется в библиотечных системах для организации поиска информации.

Суть дескрипторного метода классификации заключается в следующем:

- Отбирается совокупность ключевых слов или словосочетаний, описывающих определенную предметную область или совокупность однородных объектов, причем среди ключевых слов могут находиться синонимы.

- Выбранные ключевые слова и словосочетания подвергаются нормализации, т.е. из совокупности синонимов выбирается один или несколько наиболее употребимых.

 

- Создается словарь дескрипторов, т.е. словарь ключевых слов и словосочетаний, отобранных в результате процедуры нормализации.

 

- Между дескрипторами устанавливаются связи, которые позволяют расширить область поиска информации.

 

Связи могут быть трех видов:

- синонимические, указывающие некоторую совокупность ключевых слов как синонимы (студент – учащийся – обучаемый);

 

- родо – видовые, отражающие включение некоторого класса объектов в более представительный класс (университет - факультет – кафедра);

 

- ассоциативные, соединяющие дескрипторы, обладающие общими свойствами (студент - экзамен - профессор – аудитория).

 

 

2) Построение логической структуры теории (концепции) исследования.

 

Для начала разделим понятия «теория той или иной науки» и «научная теория».

Теория науки – это вся совокупность теоретических знаний в той или иной отрасли науки (физике, биологии и т.д.)

В каждой научной области существует множество научных теорий (концепций).

 

Научная теория (концепция) – это теория внутри отдельного исследования.

 

Процесс построения логической структуры теории (концепции) состоит из двух этапов.

 

Этапы построения теории (концепции)

 

а) Этап индукции (абстрагирование) – восхождение от конкретного к абстрактному, определение центрального системообразующего звена теории своего исследования (концепции, системы аксиом или аксиоматических требований, единый исследовательский подход, совокупность концептуальных положений, принципов, факторов, условий, механизмов и т.д.)

 

На этапе индукции, исследователь детально выписывает все имеющиеся у него результаты, начинает их группировать, составлять первичные обобщения, и так далее.

Т.е. происходит индуктивный процесс – восхождение от конкретного к абстрактному – пока все результаты не сведутся в авторскую концепцию – короткую, буквально на 5-7 строк емкую формулировку, отражающую в самом общем сжатом виде всю совокупность результатов, всю суть работы.

 

По завершении этапа индукции – определения и формулирования центрального системообразующего звена – концепции, исследовательского подхода, системы аксиом и т.п., наступает дедуктивный процесс – конкретизации – восхождения от абстрактного к конкретному.

 

2) Этап дедукции (конкретизация) – восхождение от абстрактного к конкретному, развитие, уточнение формулировки концепции исследования в совокупности принципов, факторов, условий (групп условий), моделей, механизмов и т.д.

 

Иногда, если проблема исследования расчленяется на несколько относительно независимых аспектов, концепция развивается в несколько концептуальных положений – а те уже, далее развиваются в совокупности принципов, классы моделей, типы задач и другие структурные элементы теории: Так выстраивается логика, логическая структура теории.

Этот процесс исследователю чаще всего приходится циклически проходить несколько раз, проверяя и перепроверяя, уточняя логику своего исследования.

 

Структурные элементы теории:

- алгоритм,

- аппарат (дидактический, понятийный аппарат и т.д.);

- леммы,

- классификации;

- критерии;

- методики;

- методы;

- механизмы;

- модели (базисные, прогностические, графовые, открытые, закрытые, динамические, комплексы моделей и т.д.);

- направления;

- обоснования;

- основания;

- основы;

- парадигмы;

- параметры;

- периодизации;

- подходы;

- понятия (развивающиеся понятия, системы понятий и т.д.);

- приемы;

- принципы;

- программы;

- процедуры;

- решения;

- системы (иерархические системы, генерализованные системы и т.д.);

- содержание;

- способы;

- средства;

- схемы;

- структуры;

- стратегии;

- сущности;

- утверждения условия;

- фазы;

- таксономии;

- тенденции;

- технологии;

- типологии;

- требования;

- теоремы,

- фазы;

- факторы;

- формы;

- функции;

- характеристики;

- цели;

- этапы и т.д.

 

2.1.2. Эмпирический этап. Опытно-экспериментальная работа.

 

Специфика научного исследования состоит в том, что опытно экспериментальная работа, хотя она и занимает значительную, а подчас и большую часть бюджета времени исследователя, служит лишь для подтверждения или опровержения предварительно сделанных им теоретических построений, начиная с гипотезы.

 

Хотя, казалось бы, опытно-экспериментальная часть исследования начинается лишь тогда, когда исследователем закончены, выявлены и выведены все теоретические построения, тем не менее, как правило, исследователь включается в опытно-экспериментальную работу намного раньше. Ведь прежде, чем будет организована и проведена именно та опытная работа, и именно те эксперименты, которые подтвердят или опровергнут гипотезу исследователя, необходимо приобрести первоначальные умения планирования и организации опытно-экспериментальной работы, анализа и обобщения ее результатов. Кроме того, этот предварительный этап позволяет подобрать нужные подходы, отработать инструментарий и т.д.

- На начальном этапе экспериментальная работа позволяет приобрести первоначальные навыки умения ее планирования и организации, анализа и обобщения ее результатов, позволяет подобрать нужные подходы, отработать инструментарий и т.д.

- На завершающем этапе экспериментальная работа, служит для подтверждения или опровержения теоретических построений исследователя.

 

Как уже говорилось, собственно опытно-экспериментальная работа в каждом конкретном исследовании сугубо специфична, поскольку целиком определяется содержанием конкретного исследования и вряд ли может быть описана в общем виде.

 

2.2. Стадия оформления результатов исследования.

 

Завершающая стадия технологической фазы исследования включает апробацию его результатов, их литературное оформление и публикацию.

 

1) Апробация

 

Детальная апробация исследования – одно из условий его состоятельности и истинности результатов, один из реальных способов вовремя скорректировать и исправить его недостатки. Слово «апробация» латинского происхождения и дословно означает «одобрение, утверждение».

 

«Апробация» - в пер. с лат. – означает «одобрение, утверждение».

 

Апробация осуществляется в формах публичных докладов и выступлений, дискуссий, а также в форме письменного или устного рецензирования.

 

В роли критиков, оппонентов, судей выступают коллеги-ученые, практические работники, а также научные и педагогические коллективы.

 

Важную роль играет и неофициальная апробация – беседы, споры с коллегами, специалистами из других областей научного знания, а также с практическими работниками.

 

По результатам апробации исследователь осмысливает и учитывает возникающие вопросы, позитивные и негативные оценки, возражения и советы. На этой основе он дорабатывает свои материалы, пересматривает, если это необходимо некоторые положения своего исследования.

 

2) Оформление и публикация

 

По завершении апробации исследователь приступает к литературному оформлению и публикации результатов своего исследования. Ведь публикация, и письменная, и устная, и электронная, является обязательным условием завершения научного исследования (естественно, если оно действительно научное): новое знание, полученное тем или иным исследователем, только тогда станет научным знанием, когда оно станет общественным достоянием.

Результаты проведенного исследования оформляются в следующих

 

Формы литературной продукции:

 

- Реферат – одна из начальных форм представления результатов исследования в письменном виде, содержащая результаты исследования, теоретическое и практическое значение темы, анализ публикаций по теме.

 

Реферат должен показать эрудицию исследователя, его умение самостоятельно анализировать, систематизировать, классифицировать и обобщать существующую научную информацию. Рефераты, как правило, не публикуются.

 

- Научная статьясамая распространенная форма публикации, отличающаяся систематичностью, последовательностью, логической связанностью, лаконичностью ясностью и точностью формулирования в изложении научных результатов.

 

Статьи публикуются в научных журналах, научных или научно-методических сборниках. Объем статьи обычно бывает от 5 до 15 машинописных страниц.

 

Большое значение в научной статье имеет изложение заключения, научных выводов и предложений. В этой части статьи следует кратко и четко выделить существенные аспекты результатов исследования и показать пути их реализации в практике.

 

- Научный отчет – работа, отражающая содержание выполненного исследования, текст которой разбит на основные разделы

 

Научную работу можно оформить и в виде научного отчета. Общие требования и правила оформления научного отчета изложены в государственном стандарте (ГОСТе).

 

К научному отчету предъявляют следующие основные требования: четкость построения; логическая последовательность изложения материала; убедительная аргументация; краткость и точность формулировок; конкретность изложения результатов ра6оты; доказательность выводов и обоснованность рекомендаций.

Научный отчет должен включать титульный лист, список авторов, краткий реферат, содержание (оглавление), основную часть работы, список использованной литературы и приложения.

Основная часть отчета включает: введение; аналитический обзор научной литературы по данной теме; обоснование выбранного направления работы; разделы (главы) отчета, отражающие методику, содержание и результаты выполненной работы; заключение (выводы и предложения).

В приложения включают вспомогательный материал отчета: таблицы цифровых данных; примеры инструкций, руководств, анкет, тестов и т.п., разработанных и примененных в исследовательской работе; иллюстрации вспомогательного характера и т.п.

 

- Научный доклад – работа, отражающая не всю исследуемую проблему, а только какую-то логически завершенную часть, аспект исследования.

К научному докладу не предъявляются столь жесткие требования к его оформлению и форме, как к научному отчету. Для него не требуется реферат, разбиение по главам. По языку, литературному стилю изложения доклад, как правило, должен быть больше приспособлен для устного выступления, восприятия от его прочтения вслух.

 

- Методическое пособие – издание, содержащее обоснованные результатами исследования методические рекомендации для совершенствования какого-либо (учебно-воспитательного, технологического и т.д.) процесса.

 

Так как методическое пособие рассчитано на практических работников, оно должно быть написано хорошим, живом литературным языком. По возможности его следует иллюстрировать наглядными материалами.

 

Методическое пособие можно оформить и в виде брошюры или книги.

Брошюрой называется малообъемная печатная продукция (5-48 страниц) в мягкой обложке или без обложки.

Книга – непериодический печатный материал объемом более 48 страниц, как правило, в обложке или переплете.

- Монография – научное издание, в котором какая-то одна проблема (моно – одиночный) рассматривается достаточно разносторонне и целостно.

 

Монография может иметь одного или нескольких авторов.

Если исследователю удалось какую-то проблему решить по-новому, всесторонне обобщить существующие научные труды по проблеме, и он может научно обосновать свои концепции по проблеме, показать конкретные возможности их реализации в практике, тогда ему целесообразно оформить результаты своего исследования в виде научной монографии.

В монографии исследователь показывает, как исследуемая проблема решалась ранее в научной литературе и в практике, как она решается в настоящее время. Затем раскрывается сущность авторских идей решения этой проблемы, описывается методика исследования, которая использовалась для подтверждения концепции. После этого подробно освещаются, анализируются результаты собственного исследования, делаются аргументированные выводы и научно-обоснованные рекомендации. В конце монографии приводится библиография использованных литературных источников.

Мон








Дата добавления: 2018-06-28; просмотров: 4185;


Поиск по сайту:

При помощи поиска вы сможете найти нужную вам информацию.

Поделитесь с друзьями:

Если вам перенёс пользу информационный материал, или помог в учебе – поделитесь этим сайтом с друзьями и знакомыми.
helpiks.org - Хелпикс.Орг - 2014-2024 год. Материал сайта представляется для ознакомительного и учебного использования. | Поддержка
Генерация страницы за: 0.35 сек.