<p>Đoạn đầu có ý 2 của chú này: </p><p><a href="http://www.fit.vutbr.cz/~imikolov/rnnlm/thesis.pdf" target="_blank">http://www.fit.vutbr.cz/~imikolov/rnnlm/thesis.pdf</a></p>

<!- New HTML Content 2 -><div class="parse-text content-editable text"><p>Chào thầy, em có 2 câu hỏi như sau ạ:</p>
<p>- Hiện tại em đang làm bài toán chunking text, input là text (đã segmentated, có nhãn POS và nhãn chunking theo format IOB). Cách tiếp cận của em bây giờ đang là xem nó là một bài toán POS tagging, tuy nhiên các nhãn I lại quá ít (so với B), làm cho mô hình dự đoán nhãn I rất kém, dù accuracy rất cao. Các phương pháp như up/down sample và random selection đều không dùng được trong trường hợp này, em cungx đã thử set weights cho vài thuộc tính liên quan (nhãn chunking của từ liền trước, nhãn pos của từ trước và hiện tại, ...) nhưng không khả quan. Thầy có gợi ý gì cho em về cách giải quyết hoặc là một hướng tiếp cận khác không ạ?</p>
<p>- Câu hỏi thứ 2 là một language model M thường được đánh giá bằng chỉ số Perplexity, bằng 2^H với H là entropy(M). Tại sao lại dùng perplexity trong khi nếu chỉ là 2^H thì dùng entropy vẫn có ý nghĩa đánh giá chứ ạ? </p>
<p>Em cảm ơn ạ!</p></div><!––>

Người bổ cùi a.k.a Tiều Phu

Data Scientist

<div class="text"><p>Chào thầy, em có 2 câu hỏi như sau ạ:</p> <p>- Hiện tại em đang làm bài toán chunking text, input là text (đã segmentated, có nhãn POS và nhãn chunking theo format IOB). Cách tiếp...</p></div>

Súc sinh

Người bổ cùi a.k.a Tiều Phu

Imbalanced classification trong bài toán Chunking và Perplexity trong đánh giá language ?