Chia sẽ thư viên tách từ tiếng việt

Discussion in 'Chia Sẻ Tool & Bot' started by Hoa Mãn Lâu, Aug 7, 2017.

  1. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Mới tìm được một thư viện tách từ tiếng Việt cực ngon viết bằng python2 với độ chính xác kinh khủng, dành cho anh em nào đang nhập môn xử lý ngôn ngữ tự nhiên. Có cả tài liệu + thuật toán đầy đủ để anh em nghiên cứu. Ngoài ra còn kèm theo bộ data từ điển tiếng Việt cùng toàn bộ tên người và tỉnh thành tại Việt Nam
    * Cho anh em nào chưa biết: tách câu là một vấn đề bắt buộc và cơ bản nhất để có thể xử lý tiếng Việt, trong tiếng anh nó phân cách từ bằng dấu cách nhưng tiếng Việt dấu cách nó lại để tách các âm tiết, ví dụ từ đất + nước đứng riêng sẽ là 2 tư khác nhau nhưng ghép chung lại thì nó lại mang nghĩa khác, thư viện này sẽ tự tìm các từ ghép để chúng ta xử lý câu văn dễ hơn
    Link: https://github.com/roy-a/Roy_VnTokenizer

    [​IMG]
     
    Unnamaed, EDM, firefox and 2 others like this.
  2. cuacua88

    cuacua88 Tân Thủ Thôn

    Cái này có thể viết thành tools spin thì quá ngon:))
     
  3. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

    Chắc phải tự viết thôi cậu ơi :v
     
  4. cuacua88

    cuacua88 Tân Thủ Thôn

    Trông hay quá mà k tài nào lấy dc data của nó thành txt để xem @@
     
  5. Hoa Mãn Lâu

    Hoa Mãn Lâu Trưởng Môn

  6. seokts

    seokts Khách Qua Đường

    Bác có thể hướng dẫn cách sử dụng bằng một video hoặc viết sơ sơ các bước cần làm để chạy mấy cái file này không, chứ dân ngoại như em mò khó quá
     
  7. Jack

    Jack Tân Thủ Thôn

  8. PhuongPhi

    PhuongPhi Tân Thủ Thôn

    Kệ em chứ
     
    seokts likes this.
  9. duongtuanqb

    duongtuanqb Khách Qua Đường

    Em vẫn chưa biết dùng tool này như nào :v đầu vào ra sao :v
     
  10. thangvbvb25

    thangvbvb25 Sơ Nhập Giang Hồ

    Xin phép đào mộ phát ạ
    Tool hay quá bác ơi, đỉnh của chóp
    Em lướt qua code thấy tool này giúp phân tích đoạn văn thành các từ
    Giờ em muốn spin các từ này thì cần database các từ đồng nghĩa ạ?!
    Tool bên trên có database các từ đồng nghĩa ko bác, em vào mò mà ko thấy ạ
     
  11. Quangtah

    Quangtah Khách Qua Đường

    Ngon quá. Chắc mai e cài source trên tx3mini để làm api spin content spam Facebook