Chào em, Ở Việt Nam có lẽ chỉ có tổ chức VLSP là cung cấp kho dữ liệu miễn phí cho cộng đồng sử dụng trong các bài toán nghiên cứu và giảng dạy. Những kho dữ liệu này là kết quả trong các đề tài nghiên cứu khoa học được nhà nước tài trợ, hoặc được doanh nghiệp tài trợ và cho phép mở cho cộng đồng dùng. Một số công ty có những bộ dữ liệu họ xây dựng riêng, phục vụ nhu cầu kinh doanh của họ. Những bộ dữ liệu như vậy thường không được công bố. Việc xây dựng dữ liệu ngôn ngữ có gán nhãn là một công việc đòi hỏi nhiều thời gian và sức lực và cả tri thức ngôn ngữ. Trong quá trình gán nhãn, nhiều vấn đề nhập nhằng hoặc chưa rõ thường sẽ nảy sinh. Chúng chỉ có thể giải quyết được thông qua tri thức chuyên gia, không những của chuyên gia ngôn ngữ, mà còn cả chuyên gia thuộc lĩnh vực dữ liệu gán nhãn (ví dụ chuyên gia tài chính, ngân hàng nếu dữ liệu đang làm thuộc lĩnh vực đó). Nếu người xây dựng dữ liệu không phải là chuyên gia (sinh viên ngôn ngữ chẳng hạn) thì có lẽ họ chỉ có thể xây dựng được những bộ dữ liệu đơn giản, chẳng hạn tách các câu trong văn bản. Những tác vụ này có độ khó không cao, nhiều người làm được. Còn giả sử việc gán nhãn cần làm là phân tích câu thành các thành phần (chủ ngữ, vị ngữ, các thành phần phụ, vân vân) thì có lẽ người gán nhãn cần có kiến thức tương đối vững về ngữ pháp, nếu không thì khả năng gán nhãn sai là cao.

Data Scientist

Chào em,Ở Việt Nam có lẽ chỉ có tổ chức VLSP là cung cấp kho dữ liệu miễn phí cho cộng đồng sử dụng trong các bài toán nghiên cứu và giảng dạy. Những kho dữ liệu này là kết...

<!- New HTML Content 2 -><div class="parse-text content-editable text">Em có câu hỏi muốn hỏi thầy: 
Em thấy dữ liệu huấn luyện cho các bài toán về xử lý ngôn ngữ tự nhiên như tách từ, gán nhãn từ loại, phân tích cú pháp, văn phạm kết nối... là rất quan trọng. 
Vậy ở Việt Nam có những kho dữ liệu nào mà các nhà nghiên cứu sử dụng. (Theo em biết có kho dữ liệu VLSP)
Việc xây dựng dữ liệu có nhất thiết cần chuyên gia về ngôn ngữ làm không ạ.</div><!––>

<div class="text">Em có câu hỏi muốn hỏi thầy: Em thấy dữ liệu huấn luyện cho các bài toán về xử lý ngôn ngữ tự nhiên như tách từ, gán nhãn từ loại, phân tích cú pháp, văn phạm kết nối......</div>

Dữ liệu huấn luyện?

Chào em,Theo mình thách thức lớn nhất trong NLP chính là mục tiêu cuối cùng mà ngành NLP muốn đạt tới: giúp máy tính hiểu được nghĩa của ngôn ngữ (văn bản hoặc tiếng nói). Như một số giáo sư đầu ngành về NLP đã nói, là nếu làm được điều đó thì là AI-complete. Để đạt được đến mức đó thì chắc chắn là giới khoa học còn phải đi một đoạn đường rất dài, giờ đang là những mét đầu tiên thôi.Rào cản chính của các cộng đồng NLP thiểu số như NLP tiếng Việt là ít nguồn lực. Nguồn lực ở đây bao gồm cả nhân lực và tài chính. Chúng ta có ít người làm nghiên cứu (cả nghiên cứu cơ bản và nghiên cứu ứng dụng), có ít tiền đầu tư (cả từ phía nhà nước và phía tư nhân). Nhân lực có trình độ cao có lẽ càng ít.Lí do chính mà phía tư nhân chưa đầu tư mạnh mẽ có lẽ là họ chưa có động lực lớn về mặt thương mại. Thị trường cho NLP tiếng Việt đang nhỏ, trong khi muốn làm được tốt thì cần đầu tư kinh phí lớn, có lẽ chỉ phù hợp cho một số doanh nghiệp lớn, có tiềm lực tài chính mạnh. Ở trên tầm toàn cầu thì tiếng Việt cũng chỉ có hơn 100 triệu người dùng thường xuyên, một con số rất nhỏ nếu so với các thứ tiếng lớn khác trên thế giới.Mình nghĩ là theo thời gian thì ngày càng có nhiều người Việt quan tâm, hứng thú với NLP tiếng Việt, cơ hội thương mại trong các lĩnh vực này cũng ngày càng tăng. Đang có nhiều bạn trẻ có năng lực và trình độ tốt quan tâm tới lĩnh vực này. Từ đó chắc chắn NLP tiếng Việt cũng sẽ ngày càng phát triển.Phương

Chào em,Theo mình thách thức lớn nhất trong NLP chính là mục tiêu cuối cùng mà ngành NLP muốn đạt tới: giúp máy tính hiểu được nghĩa của ngôn ngữ (văn bản hoặc tiếng nói)....

<!- New HTML Content 2 -><div class="parse-text content-editable text">Em có tìm được một câu hỏi trên group và muốn hỏi thầy:
Thách thức nhất trong NLP là gì? 
Có những rào cản nào đối với cộng đồng NLP thiểu số (như cộng đồng NLP Vietnam) trong việc nghiên cứu và ứng dụng NLP? Và làm thế nào để các nhóm cộng đồng NLP thiểu số có thể khắc phục những rào cản đó?</div><!––>

<div class="text">Em có tìm được một câu hỏi trên group và muốn hỏi thầy: Thách thức nhất trong NLP là gì? Có những rào cản nào đối với cộng đồng NLP thiểu số (như cộng đồng NLP Vietnam) trong...</div>

Một câu hỏi trên Group Cộng đồng xử lý ngôn ngữ?

Chỗ để chia sẻ thì mình thấy ko thiếu - Facebook, Twitter, Instagram, Wikipedia, Reddit, Linkedin, Goodreads, StackExchange hay ngay như Noron này. Mỗi thứ lại hướng vào một số đối tượng người dùng, chủ đề khác nhau.Thực ra nếu nó là lĩnh vực bạn quan tâm thì tìm kiếm một cộng đồng để trao đổi thông tin ko khó.

It's foolish to fear what we've yet to see & know

Chỗ để chia sẻ thì mình thấy ko thiếu - Facebook, Twitter, Instagram, Wikipedia, Reddit, Linkedin, Goodreads, StackExchange hay ngay như Noron này. Mỗi thứ lại hướng vào một...

Là trí thông minh được vận hành bởi máy móc và phần mềm, một nhánh của ngành khoa học máy tính, do con người lập trình để máy tính có thể tự động hóa các hành vi thông minh như con người.

Trí tuệ nhân tạo

Cần một nơi để mọi người chia sẻ thông tin mình tìm được về vấn đề họ quan tâm hàng ngày. Twitter là nơi rất tốt để chia sẻ cho thế giới tuy nhiên lượng người Việt sử dụng...

Cần một nơi để mọi người chia sẻ thông tin?

Mình khuyên là dùng Keras, với BackEnd là Tensoflow.Nó có lớp Wrapper có thể hỗ trợ chạy với cả Theano nữa nếu bạn thích. Hỗ trợ sử dụng GPU. Thư viện nhiều.Có thể tùy ý chỉnh, tùy ý sửa đổi các tham số cũng như mô hình.Về cấu hình, các bài toán cần nhiều dữ liệu, và mô hình cầng Sâu và Rộng thì càng cần hiệu năng cao, để giảm thời gian huấn luyện, tinh tỉnh tham số và lựa cho Model bạn nhé. Tuy nhiên, không phải cứ khủng thì mới chạy đc. Làm nghề này, đồ chơi càng khủng thì càng tốt bạn nhé. Nó cho phép người chơi có nhiều ý tưởng hơn.

CNTT

Mình khuyên là dùng Keras, với BackEnd là Tensoflow.Nó có lớp Wrapper có thể hỗ trợ chạy với cả Theano nữa nếu bạn thích. Hỗ trợ sử dụng GPU. Thư viện nhiều.Có thể tùy ý chỉnh,...

<!- New HTML Content 2 -><div class="parse-text content-editable text">Làm nghiên cứu về Deep learning nên lựa chọn framework lập trình nào: Theano, TensorFlow, PyTorch, Keras,... ?Liệu có nhất thiết cần máy có cấu hình khủng để chạy các chương trình Deep learning không ? </div><!––>

<div class="text">Làm nghiên cứu về Deep learning nên lựa chọn framework lập trình nào: Theano, TensorFlow, PyTorch, Keras,... ?Liệu có nhất thiết cần máy có cấu hình khủng để chạy các chương...</div>

Dung Doan

Dung Doan

Dữ liệu huấn luyện?

Một câu hỏi trên Group Cộng đồng xử lý ngôn ngữ?

Cần một nơi để mọi người chia sẻ thông tin?

Lập trình Deep learning?