Vina Technology at AI time - Công nghệ Việt Nam thời AI
Vina Technology at AI time - Công nghệ Việt Nam thời AI
Lê Quang Văn
Episode 82 -Data Mining – Khai thác Dữ liệu – October 24
16 minutes Posted Oct 28, 2018 at 11:37 pm.
0:00
16:53
Download MP3
Show notes
Khai thác dữ liệu là mò kim đáy biển, giống như là tìm những gì quý báu trong đám rát phế thải.
Tôi đã và đang đam mê lãnh vực này, như Khai thác Dữ liệu trong Truyện Kiều và đã xuất bản một vài báo cáo trên Youtube, Phân tích Văn bản bằng Kỹ thuật Số.
Chúng tôi xin liệt kê dưới đây các LINK của bài thuyết trình về áp dụng Khai thác Dữ liệu do Lê Quang Văn thực hiện.
Phân tích truyện kiều bằng kỹ thuật số - Phần 1
https://www.youtube.com/watch?v=R3JlQLZbKfk&t=32s
Phân tích truyện kiều bằng kỹ thuật số - Phần 2
https://www.youtube.com/watch?v=xb3hpH7KB10&t=16s
Phân tích truyện kiều bằng kỹ thuật số - Phần 3 https://www.youtube.com/watch?v=L_6hDUMovGQ&t=39s
Error in Making Glossary by McGraw-Hill Sai lỗi khi lập Bảng Thuật ngữ https://www.youtube.com/watch?v=r0u3zVYJ_Ck&t=144s
Artificial Intelligence Fruits Recognition
https://www.youtube.com/watch?v=Gf50JwMRh5E&t=20s
2014 2016 Trafficking in Persons Report Trực quan Văn bản (Text Visualization) và Khai thác Tri thức (Knowledge Mining) - Báo cáo về Tình hình Buôn người tại Việt Nam do Lê Quang Văn thực hiện.
Trong tài liệu này chúng tôi dùng phần mềm Voyant Tools để phân tích và so sánh báo cáo trong 3 năm 2014, 2015 và 2016.
https://www.youtube.com/watch?v=1nTBgtyNfzM&feature=youtu.be
Phân tích Bài Phát biểu của Tổng thống Hoa Kỳ Donal Trump:
https://textvisualization.files.wordpress.com/2017/11/remarks-by-president-trump-at-apec-ceo-summit-web_vien1.pdf
Những tài liệu do chúng tôi thực hiện chỉ có tính cách giới thiệu mở đầu, hướng người đọc đến một lãnh vực đầy triễn vọng trong hiện tại và tương lai.
Là người đam mê lãnh vực này nên tôi rất hãnh diện được biết có nhiều người Việt khác đang thành công trong lãnh vực khai thác dữ liệu và gây tiếng vang trên phương tiện truyền thông, đó là Đào Nguyễn và Lê Viết Quốc.
Khai phá dữ liệu (data mining) Là quá trình tính toán để tìm ra các mẫu trong các bộ dữ liệu lớn liên quan đến các phương pháp tại giao điểm của máy học, thống kê và các hệ thống cơ sở dữ liệu. Đây là một lĩnh vực liên ngành của khoa học máy tính. Mục tiêu tổng thể của quá trình khai thác dữ liệu là trích xuất thông tin từ một bộ dữ liệu và chuyển nó thành một cấu trúc dễ hiểu để sử dụng tiếp. Ngoài bước phân tích thô, nó còn liên quan tới cơ sở dữ liệu và các khía cạnh quản lý dữ liệu, xử lý dữ liệu trước, suy xét mô hình và suy luận thống kê, các thước đo thú vị, các cân nhắc phức tạp, xuất kết quả về các cấu trúc được phát hiện, hiện hình hóa và cập nhật trực tuyến. Khai thác dữ liệu là bước phân tích của quá trình "khám phá kiến thức trong cơ sở dữ liệu" hoặc KDD.
Hiện tại, Đào Nguyên đã được bổ nhiệm làm Người chỉ đạo xuất bản của Buzzfeed. Không giống như những vị trí bình thường, “Cô ấy không chịu trách nhiệm về doanh số, bán quảng cáo hay phân phối. Cô ấy sẽ chỉ đạo hoạt động xuất bản trên những trang mạng xã hội, giám sát công nghệ, sản phẩm, dữ liệu và tất cả những vấn đề liên quan đến nền tảng xuất bản của Buzzfeed", ông Peretti nói.
Thành công là vậy, thậm chí tờ Inc đã kể về Đào Nguyên như là “vũ khí bí mật của Buzzfeed” nhưng cô lại tỏ ra hết sức khiêm tốn.
Năm 2011, Quốc đồng sáng lập Google Brain, cùng với cố vấn Tiến sĩ Andrew Ng, nghiên cứu sinh Google Jeff Dean và nhà nghiên cứu tại Google Greg Corrado. Mục tiêu là khai phá về Học sâu (Deep Learning) trên cơ sở khối lượng dữ liệu khổng lồ của Google. Trước đó, Quốc đã thực hiện một vài nghiên cứu ở Đại học Stanford về Học sâu không giám sát (Unsupervised Deep learning).
Deep Learning là một thuật toán dựa trên một số ý tưởng từ não bộ tới việc tiếp thu nhiều tầng biểu đạt, cả cụ thể lẫn trừu tượng, qua đó làm rõ nghĩa của các loại dữ liệu. Deep Learning có thể giúp giải quyết hàng loạt vấn đề như giáo dục, biến đổi khí hậu... Ví dụ, sử dụng các cảm biến từ xa, dữ liệu môi trường trên thế giới sẽ được theo dõi và ghi lại. Hiện khối lượng dữ liệu đó phần lớn chưa được xử lý và Deep Learning có thể được áp dụng để hiểu các chuỗi và chỉ ra hướng giải quyết.