Теоретические основы информатики - Аветисян Р.Д.
Скачать (прямая ссылка):
127
ГЛАВА 5 ангорами, рекомендующими при комплексной оценке функциональной и технико-экономической эффективности АСДП пользоваться не метрическими стоимостными критериями, а анализом результатов сравнительной оценки альтернативных вариантов.
Представляется, что разработку комплексных критериев оценки тех-пнко-экономпческои и функциональной эффективности информационных систем следует начинать с четкого разграничения функций собственно информационной системы и систем (отдельных индивидуумов, общества в целом), призванных использовать найденную информации) Несмотря на кажущуюся простоту, это является довольно сложной задачей, так как на практике такие системы оказываются до такой степени взаимно сросшимися, что оказывается чрезвычайно трудно провести четкую грань между ними. Гем не менее, эти трудности следует преодолеть хотя бы для того, чтобы избавиться от необходимости рассматривать чрезвычайно сложный, трудно поддающийся формальной количественной оценке фактор "полезности" информации. Ведь эффективность использования результатов работы не является характеристикой собственно информационной системы. Работа любой информационной системы, будь то система поиска информации, система дезинформации, система защиты информации и т. п.. направлена на то, чтобы уменьшить, увеличить или предотвратить приращение в нежелательную сторону предварительно имеющуюся у других систем неопределенность (энтропию). И именно это приращение энтропии, фактически имевшее место или предотвращенное, вкупе с темп расходами, в которые обошлась работа информационной системы, должны служи ть отправной точкой при разработке комбинированных критериев. При анализе, например, информационно-поисковой системы речь может идти о том, во сколько рублей в среднем обходится работа системы по ликвидации у пользователя одного килобайта неопределенности.
Далее сконцентрируем наше внимание на вопросах опенки лишь функциональной эффективности АСДП.
Eine в 1953 г. Дж. Перри, А. Кент и М. Берри для оценки функциональной эффективности АСДП предложили использовать коэффициенты полноты и точности. В 1964 г. У. Гоффман и В. Ньюилл для этих же целей ввели в рассмотрение коэффициент специфичности. В предыдущих разделах мы уже обратили внимание на то, что коэффициенты полноты и специфичности действительно являются характеристиками АСДП, тогда как коэффициент точности при заданных коэффициентах полноты и специфичности зависит только от статистической характеристики поисковой среды, т. е. от параметра ш:
со, = соА,|/(1 -X2 + w(Xi +X2- 1)).
В рассматриваемом смысле представляется разумным оперировать не коэффициентом точности, а непосредственно параметром ш - концентрацией, долей релевантных документов в исходном множестве документов N.
128 Поскольку пара значений X1 и X2 (а если имеется возможность их изменения, то зависимость Х| = Xj(X2)) является исчерпывающей характеристикой собственно АСДП, то можно было бы ограничиться только их рассмотрением. При этом, однако, мы не смогли бы судить о реальном качестве информационного поиска, так как при заданной зависимости X1 = X1(X2) фактическая эффективность работы АСДП в значительной мере зависит от степени согласованности поисковой среды с этой зависимостью. При анализе работы каналов связи К. Шеннон особо обратил внимание на это обстоятельство, что, собственно, и привело его к понятию пропускной способности каналов связи. К сожалению, нам не известны работы, где бы столь же обстоятельно и всесторонне рассматривались вопросы информационного поиска, как это осуществил К. Шеннон применительно к каналам связи.
Путем установления соответствующих аналогий мы разработали энтропийную модель информационного поиска и соответствующие критерии оценки эффективности АСДП. Наряду с понятием количества информации мы ввели в рассмотрение понятие коэффициента проводимости. Именно эти две величины мы и рекомендуем использовать в качестве критерия для оценки функциональной эффективности АСДП.
В рамках корреляционной модели мы разработали корреляционный критерий оценки функциональной эффективности АСДП. Как и критерии 1[х, у] (количество информации) и х[л', у] (коэффициент проводимости), критерий rty наряду со свойствами собственно АСДП учитывает также степень согласованности поисковой среды с этими свойствами. Представляется заслуживающим внимание также вариант использования для оценки функциональной эффективности АСДП параметра fR[x, у], рассмотренного в разделе 5.5.
Важным преимуществом критерия г„ является то обстоятельство, что этот критерий может применяться не только к бинарным ситуациям, но и к системам, оперирующим размытыми подмножествами.
Из других критериев, предложенных для оценки функциональной эффективности АСДП, следует упомянуть разработанный в рамках американского проекта "СМАРТ" критерий "косинус". На недостатки этого критерия, равно как и критерия "скалярное произведение", нами уже указывалось в разделе 5.4.
Более подробный анализ различных критериев оценки функциональной и технико-экономической эффективности можно найти в [2].
