Точность наблюдения и методы проверки достоверности данных

Каждое конкретное измерение величины данных, осуществляемое в процессе наблюдения, дает, как правило, приближенное значение величины явления, в той или иной мере отличающееся от истинного значения этой величины. Степень соответствия действительной величине какого-либо показателя или признака, полученного по материалам наблюдения, называется точностыю статистического наблюдения. Расхождение между результатом наблюдения и истинным значением величины наблюдаемого явления называется ошибкой наблюдения.

В зависимости от характера, стадии и причин возникновения различают несколько типов ошибок наблюдения (табл.1).

Таблица 1 Классификация ошибок наблюдения

По своему характеру ошибки делятся на случайные и систематические. Случайными называют ошибки, возникновение которых обусловлено действием случайных факторов. К ним относятся оговорки и описки опрашиваемого лица. Они могут быть направлены в сторону уменьшения или увеличения значения признака, на конечном результате они, как правило, не отражаются, так как взаимопогашаются при сводной обработке результатов наблюдения. Систематические ошибки имеют одинаковую тенденцию либо к уменьшению, либо к увеличению значения показателя признака. Это связано с тем, что измерения, например, производятся неисправным измерительным прибором или ошибки являются следствием неточной формулировки вопроса программы наблюдения и др. Систематические ошибки представляют большую опасность, так как в значительной мере искажают результаты наблюдения.

В зависимости от стадии возникновения различают ошибки регистрации; ошибки, возникающие в ходе подготовки данных к машинной обработке; ошибки, проявляющиеся в процессе обработки на вычислительной технике.

К ошибкам регистрации относятся те неточности, которые возникают при записи данных в статистический формуляр (первичный документ, бланк, отчет, переписной лист) или при вводе данных в вычислительную технику, искажение данных при передаче через линии связи (телефон, электронную почту). Часто ошибки регистрации возникают из-за несоблюдения формы бланка, т. е. запись произведена не в ту строку или графу документа. Случается и преднамеренное искажение значений отдельных показателей.

Ошибки при подготовке данных к машинной обработке или в процессе самой обработки возникают в вычислительных центрах или центрах подготовки данных. Возникновение таких ошибок связано с небрежным, неправильным, нечетким заполнением данных в формулярах, с физическим дефектом носителя данных, с потерей части данных из-за несоблюдения технологии хранения информационных баз либо определяются сбоями в работе оборудования.

Зная виды и причины возникновения ошибок наблюдения, можно в значительной мере снизить процент подобных искажений информации. Различают следующие виды ошибок:

ошибки измерения, связанные с определенными погрешностями, которые возникают при однократном статистическом наблюдении явления и процессов общественной жизни;

ошибки репрезентативности, возникающие в ходе несплошного наблюдения и связанные с тем, что сама выборка не репрезентативна, и результаты, полученные на ее основе, не могут распространяться на всю совокупность;

преднамеренные ошибки, возникающие из-за сознательного искажения данных с разными целями, среди которых желание приукрасить действительное состояние объекта наблюдения или, наоборот, показать неудовлетворительное состояние объекта (данное искажение информации является нарушением закона);

непреднамеренные ошибки, как правило, носящие случайный характер и связанные с низкой квалификацией работников, их невнимательностью или небрежностью. Часто такие ошибки связаны с субъективными факторами, когда люди дают неправильную информацию о своем возрасте, семейном положении, образовании, принадлежности к социальной группе и т. д. или просто забывают некоторые факты, сообщая регистратору информацию, которая только что возникла в памяти.

Желательно провести некоторые мероприятия, которые помогут предупредить, выявить и исправить ошибки наблюдения. К ним относятся:

• подбор квалифицированных кадров и качественное обучение персонала, связанного с проведением наблюдения;

• организация контрольных проверок правильности заполнения документов, сплошным или выборочным методом;

• арифметический и логический контроль полученных данных после завершения сбора материалов наблюдения.

Основными видами контроля достоверности данных являются синтаксический, логический и арифметический (табл. 2.2).

Таблица 2 Виды и содержание контроля

Синтаксический контроль означает проверку правильности структуры документа, наличия необходимых и обязательных реквизитов, полноту заполнения строк формуляров в соответствии с установленными правилами. Важность и необходимость синтаксического контроля объясняется применением для обработки данных вычислительной техники, сканеров, которые предъявляют жесткие требования к соблюдению правил заполнения формуляров.

Логическим контролем проверяются правильность записи кодов, соответствие их наименованиям и значениям показателей. Выполняется проверка необходимых взаимосвязей между показателями, сопоставляются ответы на различные вопросы и выявляются несовместимые сочетания. Для исправления ошибок, выявленных при логическом контроле, возвращаются к исходным документам и делают поправки.

При арифметическом контроле сравниваются полученные итоги с предварительно подсчитанными контрольными суммами по строкам и по графам. Довольно часто арифметический контроль основывается на зависимости одного показателя от двух или нескольких других, например является произведением других показателей. Если арифметический контроль итоговых показателей обнаружит, что данная зависимость не соблюдается, это будет свидетельствовать о неточности данных.

Таким образом, контроль достоверности статистической информации осуществляется на всех этапах проведения статистического наблюдения, начиная со сбора первичной информации и до этапа получения итогов.