Language Models

Question 1

Какво представляват езиковите модели за извличане на информация?

Answer 1

Езиковите модели за извличане на информация се основават на идеята, че документ отговаря на заявка, ако е достатъчно вероятно езиковият модел на документа да генерира заявката. Това означа документ да съдържа думи от заявката достатъчно често.

Question 2

Как се построява езиков модел за документ?

Answer 2

От всеки документ се построява вероятностен езиков модел и документите се подреждат според вероятността техният езиков модел да генерира заявка

Question 3

Какво е униграмен езиков модел?

Answer 3

Униграмен езиков модел е модел, при който вероятностите на поредицата от термове се определят независимо

Question 4

Какво е биграмен езиков модел?

Answer 4

Биграмен езиков модел е по-сложен модел, при който всеки следващ терм зависи от предишния

Question 5

Какво е ‘bag of words’ в контекста на униграмен модел?

Answer 5

При униграмния модел, подредбата на думите не е от значение, поради което такива модели често се наричат ‘bag of words’

Question 6

Какво е ‘нулева вероятност’ в контекста на езиковите модели?

Answer 6

Нулева вероятност е проблем, когато дума от заявката липсва в документа, което прави вероятността за генериране на заявката нула

Question 7

Какво е ‘изглаждане’ в контекста на езиковите модели?

Answer 7

Изглаждането позволява термове, които не се срещат в документа, да имат ненулева вероятност, базирана на тяхната честота в цялата колекция от документи

Question 8

Какви са основните недостатъци на езиковия модел?

Answer 8

Основните недостатъци включват нереалистично предположение, че документите и заявките са еднотипни, и трудности при включването на концепции като фрази и булеви оператори

Question 9

Какви са предимствата на езиковия модел спрямо традиционните подходи?

Answer 9

Езиковият модел е концептуално прост, прецизен и лек за изчисление, и е много ефективен

Question 10

Как генерират заявки езиковите модели?

Answer 10

Подобно на краен автомат

Question 11

Кога говорим за езиков модел?

Answer 11

Когато всеки възел има вероятностно разпределение на възможните генерирания на термове

Question 12

Какво е полиномно разпределение?

Answer 12

n опита като всеки завършва с един от k възможни изхода с вероятности p1,…, pk

Question 13

Какъв е основният проблем на езиковия модел?

Answer 13

Не може да определи точно това, от което се нуждае потребителя

Question 14

Кой е основният метод за използване на езикови модели в извличането на информация?

Answer 14

Моделът на вероятността на заявките.