Chuyển đến nội dung chính

Identifying reduplicative words for Vietnamese word segmentation

This paper proposes a method based on linguistic word-formation rules and dictionaries for determining reduplicative words in Vietnamese. The key idea for identifying whether adjacent syllables in a text can form a reduplicative word based on its formation rules. For 2-syllable reduplicative words, this paper uses rules that describe the repeating and the opposing between pairs of initial consonants, rhymes and tones. Then the method is expanded to identify reduplicative words that have 3 or 4 syllables from 2-syllable ones for the Vietnamese word segmentation task. Experimental results showed that the F1-score was improved to 98.61% and that word segmentation errors were reduced significantly, 1.26%
Proceedings - 2015 IEEE RIVF International Conference on Computing and Communication Technologies: Research, Innovation, and Vision for Future, IEEE RIVF 2015, 25 February 2015, Article number 7049878, Pages 77-82

Nhận xét

Bài đăng phổ biến từ blog này

Suy ngẫm về chữ "Ngã" trong Phật giáo

Authors:  Hoàng Nguyên Keywords:  Phật giáo;Chữ ngã Issue Date:  2014 Publisher:  Viện Nghiên cứu Phật học Việt Nam Description:  Tạp chí nghiên cứu phật học số 4/2014 ; 2 tr. ; TNS08807 URI:  http://repository.vnu.edu.vn/handle/VNU_123/55323 Appears in Collections: Nghiên cứu Phật học và Phật hoàng Trần Nhân Tông (LIC)

Hoàn thiện chiến lược kinh doanh dịch vụ của Tổng công ty CP Bưu chính Viettel giai đoạn 2015-2020

Authors:  Vũ, Thị Thu Trang Keywords:  Chiến lược kinh doanh Doanh nghiệp Phát triển dịch vụ Issue Date:  2016 Publisher:  Đại học Quốc gia Hà Nội Citation:  99 tr. URI:  http://repository.vnu.edu.vn/handle/VNU_123/17208 Appears in Collections: Luận văn - Luận án (LIC)

Đảng bộ tỉnh Sơn La lãnh đạo kinh tế hợp tác xã (1996 – 2006)

Tập hợp, hệ thống hóa các tư liệu có liên quan đến sự lãnh đạo của Đảng bộ tỉnh Sơn La trong xây dựng kinh tế hợp tác xã (HTX) ở địa phương. Nghiên cứu làm rõ những chủ trương, biện pháp của đảng bộ tỉnh trong lãnh đạo xây dựng kinh tế giai đoạn 1996-2006, tập trung phân tích những chủ trương và biện pháp mới, phù hợp với hoàn cảnh lịch sử và yêu cầu đối với phát triển kinh tế HTX thời kỳ đổi mới. Trình bày quá trình triển khai thực hiện phong trào xây dựng kinh tế HTX thông qua hoạt động của các cấp, các ngành, chính quyền và các đoàn thể quần chúng ở Sơn La. Đưa ra những đánh giá, nhận xét kết quả đạt được và hạn chế cùng một số bài học kinh nghiệm, đó là tăng cường vai trò lãnh đạo toàn diện của Đảng bộ tỉnh và các cấp ủy đảng, đặc biệt là thể chế hóa và triển khai tổ chức thực hiện chủ trương, chính sách về kinh tế HTX; thường xuyên đổi mới nhận thức về công tác quản lý, phương thức hoạt động của HTX; tuyên truyền, vận động, nâng cao nhận thức của cán bộ đảng viên về v...