Методы анализа документов

Грамотный перевод первичных и особенно вторичных данных в целевую информацию требует знания методов анализа изучаемых данных. Всю совокупность носителей таких данных и в первую очередь печатных будем называть документами.

Можно выделить два основных типа анализа: традиционный, клас­сический, и формализованный, количественный (контент-анализ) [19]. Существенно различаясь между собой, они не исключают, а взаимно до­полняют друг друга, позволяя компенсировать имеющиеся в каждом не­достатки, так как оба в конечном счете преследуют одну и ту же цель — получение интересующей маркетолога достоверной и надежной инфор­мации.

Анализ документов используется главным образом при работе с вторичными данными и в первую очередь — социально-психологической направленности. Однако возможно его применение и при работе с пер­вичными данными, например при анализе результатов опросов.

Традиционный анализ — это цепочка умственных, логических по­строений, направленных на выявление сути анализируемого материала с определенной, интересующей исследователя в каждом конкретном случае точки зрения. Интересующая маркетолога информация, заложенная в документе, часто присутствует там в неявном виде, в форме, отвечающей целям, с которыми документ был создан, но далеко не всегда отвечаю­щей целям маркетинговых исследований. Проведение традиционного анализа означает преобразование первоначальной формы этой информа­ции в необходимую исследователю форму. Фактически это не что иное, как интерпретация содержания документа, его толкование.

Традиционный анализ позволяет улавливать основные мысли и идеи, прослеживает генезис этих мыслей и идей, выясняет логику их обоснования, взвешивает вытекающие из них следствия, выявляет логи­ческие связи и логические противоречия между ними, оценивает их с точки зрения каких-либо экономических, политических, маркетинговых и иных позиций, выявляет логику самой организации материала и т. д.

Данный вид анализа позволяет охватывать самые глубинные, скры­тые стороны содержания документа: этот анализ стремится как бы до конца проникнуть в глубь документа, исчерпать его содержание.

Основным его недостатком является субъективность. Как бы ни был добросовестен исследователь, как бы ни старался он предельно бес­пристрастно, предельно объективно рассмотреть материал, интерпрета­ция всегда в большей или меньшей степени будет субъективна.

Однако можно выделить некоторые общие требования к проведе­нию традиционного классического анализа в виде формализованного перечня вопросов.

При проведении традиционного анализа маркетолог должен отве­тить на следующие вопросы.

Что представляет собой документ? (Задаваясь этим вопросом, сле­дует обратить внимание на вид, форму документа, решить, потребует ли его анализ применения каких-либо специальных методов и т. п.)

Каков его контекст? Кто его автор? Каковы цели, с которыми был создан документ? Какова надежность самого документа? Какова досто­верность зафиксированных в нем данных? Каково фактическое содержа­ние документа? (В результате ответа на этот вопрос должны быть полно­стью выяснены все факты, о которых свидетельствует или которые отра­жает документ.) Каково оценочное содержание документа? (Результатом ответа на этот вопрос должна быть полная ясность относительно того, что именно в документе можно считать выражением оценок, мотивов — вообще ценностных представлений, получивших в нем отражение.) Какие выводы можно сделать о фактах, содержащихся в документе? Какие вы­воды можно сделать об оценках, содержащихся в документе?

Ответы на эти вопросы являются наиболее ответственным этапом всего анализа, так как в основном именно здесь выкристаллизовывается то «новое знание», которое и составляет результат исследования.

Какие выводы можно сделать относительно автора документа? Этим вопросом задаются далеко не всегда, а лишь в тех случаях, когда получение представления о личности автора, о его личных и групповых интересах является важным для проводимого исследования.

Достаточно ли полны сведения, содержащиеся в проанализирован­ном документе? Ответ на этот вопрос должен откорректировать выводы: насколько эти сведения достаточны для удовлетворения целей исследо­вания, есть ли необходимость привлекать для дальнейшей работы допол­нительный материал.

Перечисленные вопросы служат лишь ориентировочными отправ­ными пунктами для постановки более конкретных вопросов. Например, если анализируются публичные выступления, рекламные материалы, то их подлинность почти всегда очевидна; но приобретает большое значение вопрос об их правдивости.

В традиционном анализе различают внешний и внутренний анализ.

Внешний анализ — это анализ контекста документа в собственном смысле этого слова и всех тех обстоятельств, которые сопутствовали его появлению. Цель внешнего анализа — установить вид документа, его форму, время и место появления, кто был его автором и инициатором, какие цели преследовались при его создании, насколько он надежен и достоверен, каков его контекст.

Пренебрежение таким анализом во многих случаях грозит невер­ным истолкованием содержания документа. Определенная политическая ситуация может способствовать тенденциозному освещению событий в прессе; внутренние трения между членами руководства какой-либо орга­низации могут отразиться на содержании документов, описывающих дея­тельность этой организации, и т. д.

Внутренний анализ — это исследование содержания документа. По существу, вся работа маркетолога направлена на проведение внутреннего анализа документа, включающего выявление уровня достоверности при­водимых фактов и цифр, установление уровня компетенции автора доку­мента, выяснение его личного отношения к описываемым в документе фактам.

Искажения могут возникать не только в результате личной симпа­тии или антипатии автора; источником искажения выступает и методо­логическая позиция автора. Так, авторы, придерживающиеся разных тео­ретических позиций, могут признать существенными в объяснении кон­кретного явления разные факты.

Отдельные виды документов, в силу своей специфики, требуют специальных методов анализа и привлечения для их выполнения специа­листов других областей знаний.

Юридический анализ. Он применяется для всех видов юридических документов. Его специфика заключается прежде всего в том, что в право­вой науке разработан свой особый словарь терминов, в котором значение каждого слова строго однозначно определено. Незнание юридического словаря при анализе юридических документов может привести исследо­вателя к грубым ошибкам.

Психологический анализ. Этот вид применяется, как правило, при оценке отношения автора к какому-либо политическому, экономическо­му или социальному явлению. На основе таких исследований может быть получено представление о формировании общественного мнения, обще­ственных установок и т. п.

Формализованный анализ. Желание избавиться от субъективности традиционного анализа породило разработку принципиально иных, фор­мализованных, или, как часто их называют, количественных методов анализа документов (контент-анализ).

Суть этих методов сводится к тому, чтобы найти такие легко под­считываемые признаки, черты, свойства документа (например, такой признак, как частота употребления определенных терминов), которые с необходимостью отражали бы определенные существенные стороны со­держания. Тогда качественное содержание делается измеримым, стано­вится доступным точным вычислительным операциям. Результаты анали­за становятся в достаточной мере объективными. Ограниченность фор­мализованного анализа заключается в том, что далеко не все содержание документа может быть измерено с помощью формальных показателей.

Формализованный, количественный анализ оперирует конкретны­ми, количественно измеряемыми параметрами. Его основным недостат­ком следует считать неточное, неисчерлывающее раскрытие содержания документа.

Контент-анализ — это техника выведения заключения, производи­мого благодаря объективному и систематическому выявлению соответст­вующих задачам исследования характеристик текста. При этом подразу­мевается, что применение такой техники включает в себя некоторые стандартизованные процедуры, часто предполагающие измерение. Полу­ченные данные должны обладать заданным в исследовании уровнем обобщенности.

В практике работы с контент-анализом определились некоторые общие принципы, когда его применение представляется целесообразным.

1. Применение метода рекомендуется во всех случаях, когда требу­ется высокая степень точности или объективности анализа.

2. Контент-анализ обычно применяется при наличии обширного по объему и несистематизированного материала, когда непосредственное использование последнего затруднено (например, при использовании проекционных (проецирующих) методов).

3. Контент-анализ полезен в тех случаях, когда категории, важные для целей исследования, характеризуются определенной частотой появ­ления в изучаемых документах, например при работе с ответами на от­крытые вопросы анкет или глубинных интервью.

Основными направлениями использования контент-анапиза явля­ются: а) выявление и оценка характеристик текста как индикаторов опре­деленных сторон изучаемого объекта; б) выяснение причин, породивших сообщение; в) оценка эффекта воздействия сообщения (например, рек­ламного).

Исследование характеристик текста проводится с целью проверить гипотезы о фокусе внимания, основных тенденциях или же особенностях различных источников коммуникации (респондентов). Иначе говоря, речь идет о поиске ответа на вопрос: «Что?» (Что хочет подчеркнуть коммуникатор в своем сообщении.) Такой поиск целесообразно прово­дить при сравнении различных средств массовой коммуникации (например, содержания рекламных радиопередач и материалов прессы) или рекламных сообщений определенных средств массовой информации (СМИ) во времени.

Многое может дать также изучение характеристик содержания раз­личного рода официальных документов. Так, на основании данных о том, какого рода информация передается от одного подразделения организа­ции к другому, можно судить о характере функциональных связей, суще­ствующих, скажем, между отделом сбыта и планово-экономическим от­делом.

Изучение характеристик текста позволяет выяснить, как содержа­ние сообщения будет меняться в зависимости от аудитории (например, ответить на вопрос, кому адресовано рекламное сообщение).

Важным аспектом изучения характеристик текста является иссле­дование стилистических особенностей тех или иных документов. Это связано с ответом на вопрос, как построено сообщение? Такого рода анализ может дать представление об определенных структурных характе­ристиках объекта исследования, ибо стилистические особенности текста, адресованного конкретному объекту (группе людей), можно рассматри­вать как один из показателей состояния данного объекта,

При работе с материалами СМИ можно решать задачу сравнения содержательных и стилистических особенностей сообщений на одну и ту же тему (реклама различных марок зубной пасты), одно из которых ока­залось эффективным, а другое — нет.

Постановка задачи исследования причин появления сообщения связана прежде всего с попыткой установить соотношение между факта­ми содержания и процессами, протекающими в объектах, порождающих сообщение. Речь идет об ответах на вопросы, кто и почему передает со­общение.

Между содержанием сообщения, его отдельными характеристиками и намерениями коммуникатора существует определенная связь. Вопрос заключается в том, каков характер этой связи, т.е. признаками каких со­стояний или процессов, каких целей и намерений коммуникатора явля­ются те или иные характеристики текстов исследуемых документов.

Установление связи между внутренними характеристиками комму­никатора и формами или словами, в которых эта характеристика прояв­ляется, помогает выявить некоторые словесные показатели определенных состояний объекта исследования. Это в свою очередь дает возможность из словесного поведения, например ответов на открытые вопросы анкет и интервью, получать значительно большую информацию. Для различных источников коммуникации слова могут иметь различный смысл, различ­ные значения. Поэтому выводы относительно причин или побуждений, породивших определенное сообщение, опирающиеся только на данные содержания, нельзя считать обоснованными.

Требование объективности анализа делает необходимым перевод исследуемого материала на язык гипотез в единицах, которые позволяют точно описать характеристики текста. В связи с этим исследователю при­ходится решать ряд проблем, связанных: а) с выработкой категорий ана­лиза; б) с выделением единиц анализа; в) с выделением единиц счета.

Категории анализа — это понятия, в соответствии с которыми бу­дут сортироваться единицы анализа (единицы содержания); например, потребители с разным уровнем дохода, положительные, нейтральные и отрицательные оценки товара определенной марки.

При разработке категорий важно учитывать, что от их выбора будет в значительной степени зависеть характер полученных результатов. Как правило, исследователь стоит перед необходимостью по несколько раз переходить от теоретической схемы к документальным данным, а от них снова к схеме, чтобы, исходя из выбранной гипотезы, выработать катего­рии, соответствующие задачам исследования.

Категории должны быть исчерпывающими, т.е. охватывать все час­ти содержания, определяемые задачами данного исследования, отвечать требованию взаимоисключаемости (одни и те же части не должны при­надлежать различным категориям).

Категории должны отвечать требованию надежности, т.е. их следу­ет сформулировать таким образом, чтобы у различных исследователей была достаточно высокая степень согласия по поводу того, какие части содержания следует отнести к той или иной категории. Чем более четко определены категории, тем менее проблематичным становится отнесение частей содержания к определенным категориям.

Наиболее радикальным способом увеличения степени надежности категории является ее исчерпывающее определение (перечисление всех входящих в нее элементов — частей содержания). Тогда работа того, кто обрабатывает текст, сводится к чисто технической стороне, и ему не при­ходится принимать решения по собственной инициативе.

При оценке надежности категорий следует помнить, что тонкая градация категорий, когда последние становятся мелкими и дробными, ведет к расхождению в оценке принадлежности того или иного элемента содержания к данной категории. Этот недостаток можно преодолеть ук­рупнением категорий. Однако укрупнение должно ограничиваться со­вершенно определенными пределами, заданными целями исследования. Чрезвычайное укрупнение может привести к уменьшению степени диф­ференциации исследуемого явления, т.е. исследователь не заметит тех различий, которые могут оказаться существенными для целей исследова­ния (см. раздел про шкалы измерений).

При проведении формализованного анализа содержания нужно четко указать признаки, по которым определенные единицы относятся к определенным категориям. Единицей анализа — смысловой или качест­венной — является та часть содержания, которая выделяется как элемент, подводимый под ту или иную категорию.

В тексте она может быть выражена по-разному: одним словом, не­которым устойчивым сочетанием слов, может вообще не иметь явного терминологического выражения, а преподноситься описательно или скрываться в заголовке абзаца, раздела и т. п. В связи с этим перед ис­следователем возникает задача выделения признаков (индикаторов), по которым определяется наличие в тексте темы или идеи, значимой с точки зрения целей исследования.

Индикаторы по своему характеру могут быть весьма неоднородны­ми: относящиеся к теме слова и словосочетания, термины, имена людей, названия организаций, географические названия, пути решения эконо­мических проблем и т. п.

При изучении экономических проблем смысловые единицы могут включать внутренние и внешние международные события; лиц и авторов, описывающих эти события или являющихся их инициаторами и пропа­гандистами; отношение к событиям (оценкам) в терминах: «за — против», «выгодно — невыгодно», «хорошо — плохо», в чьих это интересах, на­сколько целесообразны действия и т. п.; целевую установку деятельности организаций, лиц; преследуемые интересы (политические, экономиче­ские, национальные, личные); адресат деятельности (социальные слои, общественные группы и т. п.).

В исследованиях сообщений средств массовых коммуникаций, где контент-анализ распространен наиболее широко, определились некото­рые «стандартные» смысловые единицы:

Понятие, выраженное отдельным словом, термином или сочетанием слов. Применение такой смысловой единицы целесообразно при изуче­нии способов, с помощью которых источник информации организует сообщение, передает свои намерения тем, кому оно направлено.

Тема, выраженная в единичных суждениях, смысловых абзацах, цело­стных текстах. Тема является важной смысловой единицей при анализе направленности интересов, ценностных ориентации, установок тех, кто передает сообщение. Однако определение темы часто затруднено в связи с ее неясностью в тексте. Тому, кто проводит анализ, приходится опреде­лять тему и ее границы внутри текста. Выбор темы в качестве единицы анализа подразумевает также внутреннее разделение текста на опреде­ленные части (единицы контекста), внутри которых тема может быть определена.

Имена людей, географические названия, марки продуктов, названия организаций, упоминание какого-либо события. Частота и длительность промежутка времени, с которыми они присутствуют в сообщении, могут послужить показателями их важности, значимости для исследуемого объ­екта.

Выбрав смысловую единицу и ее индикаторы, исследователь дол­жен определить также и единицу счета, которая станет основанием для количественного анализа материала. Она может совпадать или не совпа­дать с единицей анализа или ее индикатором. Единицы счета обладают различной степенью точности измерения, различно также время, уходя­щее на кодировку материала, попавшего в выборку. Обычно чем выше требования к точности, тем выше затраты времени на кодировку; с дру­гой стороны, большая точность приводит к получению более дифферен­цированных результатов, что позволяет получить большую информацию об объекте. Поэтому, приступая к исследованию, необходимо решить, какая степень тонкости дифференциации нужна для решения поставлен­ных задач и как можно получить ее с минимальными затратами. В ходе практической работы методом контент-анализа были выделены некото­рые общие единицы счета, отвечающие различным исследовательским требованиям.

1. Время — пространство. Подсчет в этой системе пригоден в ос­новном при исследовании сообщений, передаваемых СМИ. За единицы счета здесь принимаются числа строк, абзацев, квадратных сантиметров площади, знаков, колонок в печатных текстах, посвященных тому или иному вопросу, мнению, оценке. Для кино, радио и телевидения едини­цей счета будет время, отведенное освещению определенного события, или же метраж израсходованной кино- или магнитной пленки. Измеряет­ся, например, частота упоминания тем и размер заголовка, размер рек­ламного сообщения.

2. Появление признаков в тексте. Такая система счета подразуме­вает необходимость отмечать наличие определенной характеристики со­держания — в любом ее проявлении (признаке); например, упоминание определенной марки продукта — в каждой из единиц контекстов (т.е. частей, на которые разбит анализируемый текст). В этом случае иногда отмечается лишь появление признака, а повторение данной характери­стики внутри единицы контекстов не учитывается.

Например, если за единицу контекста принят абзац, то появление любого признака значимой смысловой единицы засчитывается лишь один раз, независимо от количества повторений ее признаков в данном абзаце.

Такая система счета подразумевает допущение о том, что не суще­ствует линейной зависимости между частотой появления в тексте и зна­чимостью смысловой единицы; важно лишь наличие или отсутствие ее в определенных частях текста.

Этот способ счета прост в применении; приходится принимать са­мое простое решение (наличие — отсутствие), что в свою очередь обеспе­чивает его достаточно высокую надежность. Такого рода измерение явля­ется номинальным, и данные, закодированные подобным образом, могут быть представлены в числовом выражении (например, процентное отно­шение элементов текста, в которых данная смысловая единица появи­лась). Эти данные могут быть также подвергнуты некоторым статистиче­ским операциям.

3. Частота появления. Самым распространенным способом изме­рения характеристик содержания является подсчет частот их употребле­ния, когда фиксируется каждое появление любого признака данной ха­рактеристики. В зависимости от того, какие единицы счета выбираются, частота может использоваться для решения различных задач.

Частота появления темы в том или ином документе может служить показателем ее значимости с точки зрения автора документа. Подсчет оценочных характеристик текста (например, всех «за» и «против» в отно­шении какого-либо вопроса или события) позволяет подойти к исследо­ванию установок автора сообщения и к выявлению намерений, которыми было продиктовано сообщение.

Учет своеобразия цели исследования является непременным усло­вием определения специфических единиц анализа и единиц счета при разработке конкретных методик контент-анализа.

Например, изучая размещение рекламных сообщений на страницах газет, можно выделить в качестве таких единиц распределение газетной площади по темам рекламных сообщений, а затем измерить количество строк, отведенных под эти темы. Анализируя степень стабильности отво­димого количества строк в разных газетах и в разное время, можно сделать выводы о характере рекламных воздействий различных газет на ау­диторию. Для этого можно произвести определение процентов по от­дельным рекламным темам.

Решение каждой исследовательской задачи требует определения того, какое количество документов нужно изучить, чтобы данные об объ­екте были достоверными, т.е. возникает вопрос о построении выборки.

При анализе документов, специально составленных для целей мар­кетингового исследования, анализируются все без исключения докумен­ты. Если же речь идет о документах — носителях вторичных данных, то при построении выборки может возникнуть необходимость отбора источ­ника информации и отбора документов.

При планировании анализа содержания документов исследователь прежде всего решает, какие источники наилучшим образом могут пред­ставить те характеристики объекта, которые изучаются.

Если считается, что все документальные источники информации одинаково важны для целей исследования, то может быть построена слу­чайная выборка с помощью одного из стандартных методов (см. соответ­ствующий раздел книги).

Часто уже сам отбор источников информации ограничивает коли­чество документов, подлежащих обработке, до приемлемых размеров. Однако и после этого материал может быть достаточно обширным. Тогда следует провести отбор документов.

При разработке программы маркетинговых исследований нужно четко определить, какого рода характеристики объекта подвергаются изу­чению, и в зависимости от этого оценивать документы с точки зрения их адекватности, надежности, достоверности.

Адекватность документа определяется как степень, в которой он отражает интересующие исследователя характеристики объекта, т.е. на­сколько он соответствует предмету исследования.

Чтобы прийти к определенным выводам относительно надежности содержания, необходимо сопоставить все данные содержания с какими-то другими данными. Здесь возможно несколько вариантов проверки.

Одна из них — сравнение содержания документов, исходящих из одного источника. Такое сравнение может проводиться: а) во времени, когда сравниваются характеристики сообщений одного и того же источ­ника в различные моменты времени; б) в различных ситуациях, например в условиях разной покупательной способности населения; в) в различных аудиториях.

Другой вариант — метод независимых источников. В этом случае выбираются значимые для целей исследования характеристики из не­скольких различных источников информации. Затем различия в характе­ристиках сравниваются с различиями в содержании сообщений.

Оценку достоверности зафиксированных в документе данных луч­ше всего производить путем последовательного перебора источников встречающихся в документе ошибок. Источники ошибок можно разде­лить на две категории: случайные (например, опечатки в статистических отчетах) и систематические (см. соответствующий раздел книги).

Систематические ошибки делятся на сознательные и несознатель­ные. Сознательные ошибки часто определяются теми намерениями, ко­торыми руководствуется автор при составлении документа (например, тенденциозное описание политической или экономической ситуации разными СМИ).

Наиболее серьезную опасность представляют собой несознательные методические ошибки. Для выявления их должна быть тщательно про­анализирована методика, по которой составлялся данный документ. Ча­ще всего такие ошибки можно встретить в статистических документах.

Только после того как последовательно перебраны и проанализи­рованы все пункты, по которым есть основание усомниться в документе, он может быть использован в работе.