Точность и полнота поиска.
Посмотрите на следующий рисунок.
На нем схематически изображено то, что поисковая система выдает пользователю по его запросу, и то, чего он не получает.
a – количество релевантных документов, выданных поисковой системой;
b – количество нерелевантных документов, выданных поисковой системой;
c – количество релевантных документов, не выданных поисковой системой;
d – количество нерелевантных и не выданных поисковой системой документов.
N – общее количество документов (как релевантных, так и не релевантных) известных данной ИПС.
А теперь посмотрите на следующий рисунок:
Из него видно, что a < b < c.
Чаще всего так и бывает, но соотношение между a, b и c может быть и другим.
Все зависит от того, насколько правильно пользователь задал запрос.
И от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Теперь начнем рассматривать понятия точности и полноты поиска.
Точность (Precision) поиска.
Точность поиска (или еще говорят коэффициент точности поиска) – это отношение количества релевантных документов, выданных поисковой системой, к общему числу выданных нею документов:
Точность поиска будет максимально возможной и равна единице, если количество нерелевантных документов, выданных ИПС, равно нулю:
Точность поиска будет максимально возможной и равна единице, при если количество нерелевантных документов, выданных ИПС, равно нулю
при 
Но достичь такого эффекта бывает нелегко, и, может быть, даже и невозможно.
Поэтому для увеличения точности поиска стремятся уменьшить количество выдаваемых нерелевантных документов настолько, насколько это только возможно:
при 
Если кто не знает, здесь значок
означает " стремится к".
Как сделать, чтобы
, или хотя бы уменьшить 
?
Думаю, что ответ на этот вопрос проходит красной нитью через это пособие.
Точность поиска будет нулевой, если поисковая система не выдает ни одного релевантного документа:
при 
при 
Коэффициент точности поиска
в реальных поисковых системах может принимать значения от 0.1 до 1.
Он, по большому счету, зависит от того, насколько правильно пользователь задал запрос, и от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Разумеется, что у разных ИПС по одному и тому же запросу может быть разная точность (коэффициент точности) поиска.
Полнота (Recall) поиска.
Полнота поиска (или, еще говорят, коэффициент полноты поиска) – это отношение количества релевантных документов, выданных поисковой системой в результате запроса, к количеству релевантных документов, не выданных ней:
Полнота поиска будет максимально возможной и равна единице, если количество релевантных документов, проиндексированных, но не выданных поисковой системой, равно нулю:
при 
Но достичь максимальной полноты поиска бывает нелегко.
А если поиск проводится по какой-то очень распространенной теме (о которой сведения в Интернете встречаются, что называется, на каждом углу), то, может быть, это даже и невозможно.
Поэтому для увеличения полноты поиска нужно, чтобы количество релевантных документов, проиндексированных, но не выданных поисковой системой, было как можно меньше:
при 
Коэффициент полноты поиска в реальных поисковых системах может принимать значения 0.7…0,9.
Он, по большому счету, зависит от тех же факторов, что и точность: насколько правильно пользователь задал запрос, и от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Разумеется, что у разных ИПС по одному и тому же запросу может быть разная полнота (коэффициент полноты) поиска.
Что важнее: точность или полнота?
На первый взгляд, вроде бы нужно и одно, и другое.
Да, конечно, не помешает, если оба эти параметра поиска будут повыше.
Однако проблема в том, что они не могут быть максимально возможными одновременно.
Это наглядно видно на графике взаимозависимости между полнотой и точностью поиска, приведенном ниже.
Ну что, вот теперь-то, я думаю, Вам уже понятно, что нужно выбирать одного из двух зайцев.
Но какого?!
Давайте рассуждать, как говорят математики, методом от противного (это один из способов доказательства теорем).
Итак, когда нам точность при поиске не нужна, или не важна?
Говоря другими словами, когда нам не нужно (или не важно), чтобы из выданных поисковой системой документов было как можно больше релевантных?
По моему, никогда.
Нам это всегда нужно.
А когда нам не нужна (не столь важна) полнота поиска?
Да в основном – редко когда нужна.
Объясняю когда (и почему).
1. Когда информация, (релевантная(!) информация) по теме запроса, полученная из разных источников, совпадает.
Действительно, если такая картина после изучения нескольких документов из числа найденных наблюдается, то зачем дальше все это мусолить?
Ведь ответ уже найден.
Причем, этот ответ одинаковый (или почти одинаковый) в разных источниках
И если нас это "почти" устраивает, то дальше уже и не зачем продолжать поиски.
2. Когда нужно найти конкретный ответ на конкретный вопрос.
Например, дату какого-то исторического события.
Допустим, нужно узнать дату первого полета человека в космос.
Формулируем и вводим запрос.
Получаем ответ.
Очевидно, что этот ответ является однозначным и единственным на всех источниках!
Поэтому мы, если забыли эту дату, то вспомним ее после просмотра ответа из первого же источника.
Если же сомневаемся, для перестраховки можно свериться с несколькими другими источниками.
Таким образом, в большинстве случаев в первую очередь нужно стремиться повышать точность поиска, а полнота – уже как получится.
На нем схематически изображено то, что поисковая система выдает пользователю по его запросу, и то, чего он не получает.
a – количество релевантных документов, выданных поисковой системой;
b – количество нерелевантных документов, выданных поисковой системой;
c – количество релевантных документов, не выданных поисковой системой;
d – количество нерелевантных и не выданных поисковой системой документов.
N – общее количество документов (как релевантных, так и не релевантных) известных данной ИПС.
А теперь посмотрите на следующий рисунок:
Из него видно, что a < b < c.
Чаще всего так и бывает, но соотношение между a, b и c может быть и другим.
Все зависит от того, насколько правильно пользователь задал запрос.
И от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Теперь начнем рассматривать понятия точности и полноты поиска.
Точность (Precision) поиска.
Точность поиска (или еще говорят коэффициент точности поиска) – это отношение количества релевантных документов, выданных поисковой системой, к общему числу выданных нею документов:
Точность поиска будет максимально возможной и равна единице, если количество нерелевантных документов, выданных ИПС, равно нулю:
Точность поиска будет максимально возможной и равна единице, при если количество нерелевантных документов, выданных ИПС, равно нулю
при Но достичь такого эффекта бывает нелегко, и, может быть, даже и невозможно.
Поэтому для увеличения точности поиска стремятся уменьшить количество выдаваемых нерелевантных документов настолько, насколько это только возможно:
при Если кто не знает, здесь значок
означает " стремится к".Как сделать, чтобы
, или хотя бы уменьшить ?Думаю, что ответ на этот вопрос проходит красной нитью через это пособие.
Точность поиска будет нулевой, если поисковая система не выдает ни одного релевантного документа:
при при Коэффициент точности поиска
в реальных поисковых системах может принимать значения от 0.1 до 1.Он, по большому счету, зависит от того, насколько правильно пользователь задал запрос, и от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Разумеется, что у разных ИПС по одному и тому же запросу может быть разная точность (коэффициент точности) поиска.
Полнота (Recall) поиска.
Полнота поиска (или, еще говорят, коэффициент полноты поиска) – это отношение количества релевантных документов, выданных поисковой системой в результате запроса, к количеству релевантных документов, не выданных ней:
Полнота поиска будет максимально возможной и равна единице, если количество релевантных документов, проиндексированных, но не выданных поисковой системой, равно нулю:
при Но достичь максимальной полноты поиска бывает нелегко.
А если поиск проводится по какой-то очень распространенной теме (о которой сведения в Интернете встречаются, что называется, на каждом углу), то, может быть, это даже и невозможно.
Поэтому для увеличения полноты поиска нужно, чтобы количество релевантных документов, проиндексированных, но не выданных поисковой системой, было как можно меньше:
при Коэффициент полноты поиска в реальных поисковых системах может принимать значения 0.7…0,9.
Он, по большому счету, зависит от тех же факторов, что и точность: насколько правильно пользователь задал запрос, и от того, сколько и каких документов проиндексировала ИПС к моменту запроса.
Разумеется, что у разных ИПС по одному и тому же запросу может быть разная полнота (коэффициент полноты) поиска.
Что важнее: точность или полнота?
На первый взгляд, вроде бы нужно и одно, и другое.
Да, конечно, не помешает, если оба эти параметра поиска будут повыше.
Однако проблема в том, что они не могут быть максимально возможными одновременно.
Это наглядно видно на графике взаимозависимости между полнотой и точностью поиска, приведенном ниже.
Ну что, вот теперь-то, я думаю, Вам уже понятно, что нужно выбирать одного из двух зайцев.
Но какого?!
Давайте рассуждать, как говорят математики, методом от противного (это один из способов доказательства теорем).
Итак, когда нам точность при поиске не нужна, или не важна?
Говоря другими словами, когда нам не нужно (или не важно), чтобы из выданных поисковой системой документов было как можно больше релевантных?
По моему, никогда.
Нам это всегда нужно.
А когда нам не нужна (не столь важна) полнота поиска?
Да в основном – редко когда нужна.
Объясняю когда (и почему).
1. Когда информация, (релевантная(!) информация) по теме запроса, полученная из разных источников, совпадает.
Действительно, если такая картина после изучения нескольких документов из числа найденных наблюдается, то зачем дальше все это мусолить?
Ведь ответ уже найден.
Причем, этот ответ одинаковый (или почти одинаковый) в разных источниках
И если нас это "почти" устраивает, то дальше уже и не зачем продолжать поиски.
2. Когда нужно найти конкретный ответ на конкретный вопрос.
Например, дату какого-то исторического события.
Допустим, нужно узнать дату первого полета человека в космос.
Формулируем и вводим запрос.
Получаем ответ.
Очевидно, что этот ответ является однозначным и единственным на всех источниках!
Поэтому мы, если забыли эту дату, то вспомним ее после просмотра ответа из первого же источника.
Если же сомневаемся, для перестраховки можно свериться с несколькими другими источниками.
Таким образом, в большинстве случаев в первую очередь нужно стремиться повышать точность поиска, а полнота – уже как получится.
Похожие новости:
Комментарии:
Нету комментариев для вывода...