Vina Blockchain
Vina Blockchain
Dang Van
Episode 274 – Xử lý Ngôn ngữ Tự nhiên – Phần IV Các ứng dụng của Word2vec trong NLP và ngoài NLP - May 4– 2019 Do Lê Quang Văn thực hiện
19 minutes Posted May 6, 2019 at 8:21 am.
0:00
19:04
Download MP3
Show notes
Các ứng dụng của Word2vec trong NLP và ngoài NLP
Bạn sẽ biết một từ qua những từ đi chung với nó
Nói một cách khác, các từ chia sẻ ngữ cảnh tương tự có xu hướng có ý nghĩa tương tự. Ngữ cảnh của một từ trong một ý nghĩa thực tế đề cập đến (các) từ xung quanh và vectơ từ được tạo ra bằng cách dự đoán xác suất của một ngữ cảnh cho một từ.
Các từ nhúng về cơ bản là một hình thức biểu diễn từ để kết nối sự hiểu biết của con người về ngôn ngữ với máy tính. Các từ nhúng là biểu diễn phân phối của văn bản trong một không gian n chiều.
Đây là những điều cần thiết để giải quyết hầu hết các vấn đề NLP.
Thích ứng tên miền là một kỹ thuật cho phép các mô hình Học máy và Chuyển giao Học tập ánh xạ các bộ dữ liệu thích hợp được viết cùng một ngôn ngữ. Ví dụ: tài liệu pháp lý, phản hồi khảo sát khách hàng và bài viết tin tức là tất cả các bộ dữ liệu duy nhất cần được phân tích khác nhau. Một trong những nhiệm vụ của vấn đề lọc thư rác phổ biến liên quan đến việc áp dụng một mô hình từ một người dùng (phân phối nguồn) sang một người mới nhận được các email khác nhau (phân phối mục tiêu).
A- Ứng dụng trong Xử lý Ngôn ngữ Tự nhiên
1 - Exploiting Similarities among Languages for Machine Translation, do Tomas Mikolov, Quoc V. Le và Ilya Sutskever thuộc Google Inc.
Mountain View, California Hoa Kỳ
2 – Urdu Word Embedding do Samar Haider thuộc Đại học Engineering and Technology, Lahore Ấn độ
B- Ứng dụng Bên ngoài Lãnh vưc Xử lý Ngôn ngữ Tự nhiên
Tầm quan trọng của từ nhúng trong lĩnh vực học sâu trở nên rõ ràng bằng cách xem xét số lượng nghiên cứu trong lĩnh vực này. Một nghiên cứu như vậy trong lĩnh vực nhúng từ được thực hiện bởi Google đã dẫn đến sự phát triển của một nhóm các thuật toán liên quan thường được gọi là Word2Vec.
1 - Phân tích phản hồi khảo sát
Word2Vec có thể được sử dụng để có số liệu hành động từ hàng ngàn đánh giá của khách hàng. Các doanh nghiệp không có đủ thời gian và công cụ để phân tích các câu trả lời khảo sát và hành động theo chúng. Điều này dẫn đến mất ROI và giá trị thương hiệu.
2 - Phân tích ý kiến nguyên văn
Học máy với sự trợ giúp của các từ nhúng đã tạo ra những bước tiến lớn trong lĩnh vực phân tích các bình luận nguyên văn. Những phân tích như vậy rất quan trọng đối với các doanh nghiệp lấy khách hàng làm trung tâm.
Khi bạn đang phân tích dữ liệu văn bản, một trường hợp sử dụng quan trọng là phân tích các nhận xét nguyên văn. Trong những trường hợp như vậy, nhà khoa học dữ liệu được giao nhiệm vụ tạo ra một thuật toán có thể khai thác nhận xét hoặc đánh giá của khách hàng.
3 - Hệ thống khuyến nghị âm nhạc / video
Cách chúng ta trải nghiệm nội dung đã được cách mạng hóa bằng các dịch vụ phát trực tuyến có sẵn trên Internet. Trước đây, các đề xuất tập trung vào việc trình bày nội dung cho bạn để sử dụng trong tương lai. Thay vào đó, các nền tảng phát trực tuyến hiện đại tập trung vào đề xuất nội dung có thể và sẽ được thưởng thức vào lúc này. Các mô hình phát trực tuyến mang đến cho bảng các phương pháp khám phá mới dưới dạng radio được cá nhân hóa và danh sách phát được đề xuất. Trọng tâm ở đây là tạo ra các chuỗi bài hát.
Các mô hình phát trực tuyến mang đến cho bảng các phương pháp khám phá mới dưới dạng radio được cá nhân hóa và danh sách phát được đề xuất. Trọng tâm ở đây là tạo ra các chuỗi bài hát. Để nâng cao trải nghiệm người dùng, mô hình của hệ thống khuyến nghị không chỉ nắm bắt những bài hát mà những người cùng ý thích thường quan tâm, mà cả những bài hát được nghe thường xuyên cùng nhau trong những bối cảnh rất giống nhau.
Các mô hình như vậy sử dụng Word2Vec. Thuật toán diễn giải hàng đợi nghe của người dùng dưới dạng câu với mỗi bài hát được coi là một từ trong câu. Khi một mô hình Word2Vec được đào tạo trên một tập dữ liệu như vậy, điều chúng tôi muốn nói là mỗi bài hát mà người dùng đã nghe trong quá khứ và bài hát mà người ta đang nghe hiện tại bằng cách nào đó thuộc cùng một bối cảnh. Word2Vec thể hiện chính xác từng bài hát bằng một vectơ tọa độ ánh xạ bối cảnh trong đó bài hát hoặc vide