Đang tải... (xem toàn văn)
Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)Hệ thống tự động phân luồng câu hỏi và giải đáp yêu cầu trực tuyến (Luận văn thạc sĩ)
ĐẠI HỌC QUỐC GIA HÀ NỘI TRƯỜNG ĐẠI HỌC CÔNG NGHỆ NGUYỄN ĐẮC NAM HỆ THỐNG TỰ ĐỘNG PHÂN LUỒNG CÂU HỎI VÀ GIẢI ĐÁP YÊU CẦU TRỰC TUYẾN LUẬN VĂN THẠC SĨ CÔNG NGHỆ THÔNG TIN Hà Nội – 2017 ĐẠI HỌC QUỐC GIA HÀ NỘI TRƯỜNG ĐẠI HỌC CÔNG NGHỆ NGUYỄN ĐẮC NAM HỆ THỐNG TỰ ĐỘNG PHÂN LUỒNG CÂU HỎI VÀ GIẢI ĐÁP YÊU CẦU TRỰC TUYẾN Ngành: Công nghệ thông tin Chuyên ngành: Kỹ thuật phần mềm Mã số: 60480103 LUẬN VĂN THẠC SĨ CÔNG NGHỆ THÔNG TIN NGƯỜI HƯỚNG DẪN KHOA HỌC: PGS TS Phạm Ngọc Hùng TS Trần Quốc Long Hà Nội – 2017 LỜI CAM ĐOAN Tôi xin cam đoan cơng trình nghiên cứu riêng tơi Các số liệu, kết nêu Luận văn trung thực chưa công bố công trình khác Tơi xin cam đoan giúp đỡ cho việc thực Luận văn cảm ơn thơng tin trích dẫn Luận văn rõ nguồn gốc Học viên thực Luận văn (Ký ghi rõ họ tên) LỜI CẢM ƠN Lời cảm ơn trân trọng em muốn dành tới thầy cô Trường Đại học Công Nghệ, Đại học Quốc Gia Hà Nội tận tình giảng dạy truyền đạt kiến thức suốt khóa học cao học vừa qua Em xin gửi lời cảm ơn tới thầy cô môn Kỹ thuật phần mềm khoa Công nghệ thông tin Đặc biệt em xin chân thành cảm ơn hai thầy PGS TS Phạm Ngọc Hùng TS Trần Quốc Long, dìu dắt hướng dẫn em suốt trình làm luận văn, bảo định hướng thầy giúp em tự tin nghiên cứu vấn đề giải toán cách khoa học Em xin trân trọng cảm ơn Ban giám hiệu thầy cô Trường Đại học Công nghệ, Đại học Quốc Gia Hà Nội tạo điều kiện cho em học tập làm khóa luận cách thuận lợi Xin cảm ơn Trung tâm Quản lý Chất lượng – Trường Đại học Công nghiệp Hà Nội tạo điều kiện để học hồn thành tốt khố học Mặc dù cố gắng nhiều, chắn q trình học tập luận văn khơng khỏi thiếu sót Em mong thơng cảm bảo tận tình thầy bạn Hà Nội, Ngày tháng năm 2017 Nguyễn Đắc Nam MỤC LỤC LỜI CAM ĐOAN LỜI CẢM ƠN MỤC LỤC DANH MỤC KÝ HIỆU VÀ CÁC CHỮ VIẾT TẮT DANH MỤC HÌNH VẼ VÀ ĐỒ THỊ GIỚI THIỆU CHUNG CHƯƠNG 1: TỔNG QUAN VỀ HỆ THỐNG TRẢ LỜI TỰ ĐỘNG 11 1.1 Hệ thống trả lời tự động 11 1.2 Tình hình nghiên cứu ngồi nước 14 1.3 Phân loại mơ hình trả lời tự động 16 CHƯƠNG 2: CƠ SỞ MẠNG NƠ-RON NHÂN TẠO 22 2.1 Kiến trúc mạng nơ-ron nhân tạo 22 2.2 Hoạt động mạng nơ-ron nhân tạo 24 2.3 Mạng nơ-ron tái phát ứng dụng 28 CHƯƠNG 3: ỨNG DỤNG MƠ HÌNH MẠNG NƠ-RON VÀO TRẢ LỜI TỰ ĐỘNG 33 3.1 Phát sinh ngôn ngữ trả lời tự động 33 3.2 Mơ hình chuỗi liên tiếp 35 3.3 Mơ hình trả lời tự động 37 3.4 Một số đặc điểm xây dựng hệ thống trả lời tự động 38 3.4.1 Phụ thuộc bối cảnh 38 3.4.2 Kết hợp tính cách 39 3.5 Các vấn đề khó khăn trả lời tự động Tiếng Việt 39 3.5.1 Đặc điểm ngữ âm 39 3.5.2 Đặc điểm từ vựng: 40 3.5.3 Đặc điểm ngữ pháp 40 CHƯƠNG 4: XÂY DỰNG HỆ THỐNG TRAO ĐỔI THÔNG TIN TRỰC TUYẾN GIỮA SINH VIÊN VỚI NHÀ TRƯỜNG TẠI TRƯỜNG ĐẠI HỌC CÔNG NGHIỆP HÀ NỘI 42 4.1 Lựa chọn toán 42 4.2 Quy trình trao đổi thơng tin (hỏi đáp trực tuyến) HSSV với Nhà trường Trường Đại học Công nghiệp Hà Nội 43 4.2.1 Quy trình áp dụng 43 4.2.2 Mơ tả quy trình áp dụng 44 4.3 Kiến trúc ứng dụng 48 4.4 Cài đặt hệ thống 50 4.4.1 Mơ hình cài đặt 50 4.4.2 Môi trường cài đặt 52 4.4.3 Công cụ cài đặt 54 4.5 Kết đạt 54 4.5.1 Một số kết 54 4.5.2 Hiệu 56 KẾT LUẬN 58 TÀI LIỆU THAM KHẢO 60 DANH MỤC KÝ HIỆU VÀ CÁC CHỮ VIẾT TẮT STT Ký hiệu, Tiếng anh Chú giải viết tắt AI Artificial Intelligence Trí tuệ nhân tạo ANN Artificial Neural Network Mạng Nơ-ron nhân tạo ML Machine Learning Học máy LSTM Long short-term memory network QA Question answering system Hệ thống hỏi đáp RNN Recurrent Neural Network Mạng nơ-ron tái phát SVM Support Vector Machine Máy vecto hỗ trợ DANH MỤC HÌNH VẼ VÀ ĐỒ THỊ Hình 1.1: Mơ hình chuỗi sinh Hình 1.2 Các bước chung hệ thống trả lời tự động Hình 2.1: Kiến trúc mạng nơ-ron nhân tạo Hình 2.2: Q trình xử lý thơng tin mạng nơ-ron nhân tạo Hình 2.3: Ứng dụng RNN máy dịch Hình 2.4: Ứng dụng RNN phát sinh mơ tả cho ảnh Hình 2.5: Mạng RNN hai chiều Hình 2.6: Mạng RNN nhiều tầng Hình 3.1: Mơ hình phát sinh văn Hình 3.2: Quá trình huấn luyện phát sinh văn Hình 3.3: Mơ hình chuỗi liên tiếp (chuỗi sang chuỗi) seq2seq Hình 3.4: Mơ hình đối thoại seq2seq Hình 4.1 Quy trình áp dụng hệ thống hỏi đáp Bảng 4.2 Mơ tả quy trình áp dụng Hình 4.3: Kiến trúc mơ hình đối thoại cho tiếng Việt Bảng 4.4: Thông tin phần cứng Bảng 4.5: Các công cụ phần mềm sử dụng GIỚI THIỆU CHUNG Hiện việc tiếp nhận, giải trả lời câu hỏi thắc mắc yêu cầu người dùng (Hệ thống hỏi đáp Q&A giải thắc mắc): khách hàng hoạt động thương mại, người dân thủ tục hành chính, học sinh - sinh viên hoạt động đào tạo trường đại học - cao đẳng lớn Các hoạt động tiếp nhận câu hỏi trả lời câu hỏi hoạt động mang tính thủ cơng mà chưa có cơng cụ trợ giúp Việc tiếp nhận xử lý chậm, thiếu xác chưa cơng khai minh bạch Các câu hỏi yêu cầu người dùng vào nhiều lĩnh vực thuộc nhiều đối tượng trả lời khác nhau, việc lựa chọn đối tượng trả lời gây khó khăn hiểu nhầm cho người dùng dẫn đến câu hỏi yêu cầu thường không trả lời thỏa đáng Cho đến hệ thống trực tuyến giải yêu cầu tiện lợi Ví dụ mua sắm mạng: người sử dụng truy cập vào địa mua sắm nhiều mặt hàng nhiều đơn vị sản xuất (Ví dụ amazon, lazada) Yêu cầu người mua hàng website phân tích đưa đề nghị sản phẩm hợp lý với người mua hàng nhờ vào hệ thống trí tuệ nhân tạo (AI) học máy (ML) giúp cải thiện doanh thu bán hàng đáng kể thành phần thiếu website bán hàng ngày Do hệ thống phân luồng trả lời tự động thiết thực bối cảnh Tính cấp thiết tốn trả lời tự động Trong bối cảnh mạng xã hội website mua sắm ngày trở nên phổ biến nay, người tăng nhu cầu kết nối với người thông qua mạng xã hội, vào thời gian nơi đâu Sẽ thật tốt có hệ thống tự động thông minh hỗ trợ người cách trò chuyện, có khả nhắc nhở, giải đáp thắc mắc thời gian ngắn Khái niệm trợ lý ảo, chatbot, hay hệ thống trả lời tự động chủ đề nóng, cơng ty lớn Microsoft (Cortana), Google (Google Assistant), Facebook (M), Apple (Siri), Samsung (Viv) giới thiệu trợ lý ảo mình, hệ thống trả lời tự động Chính thức vào chơi chatbot, với mong muốn tạo trợ lý ảo thực thông minh tồn hệ sinh thái sản phẩm Gần Microsoft tạo Microsoft Chat Framework cho phép nhà phát triển tạo chatbot tảng Web Skype, hay Facebook phát hành F8 SDK cho phép nhà phát triển tích hợp vào Messenger Và không ông lớn giới công nghệ, công ty khởi nghiệp cố gắng tạo dịch vụ nhằm thay đổi cách khách hàng tương tác giải pháp trợ lý ảo Nhằm trợ giúp người dùng, khách hàng có trải nghiệm tốt sản phẩm cách cung cấp dịch vụ Nổi bật phải kể đến ứng dụng tích hợp trợ lý ảo wit.ai, x.ai, reply.ai tảng Messenger Facebook Ở nước, số công ty Quản lý Hồ sơ y tế điện tử ERM.,JSC Vietcare phát triển tạo hệ thống trả lời tự động kiến thức y khoa, hỏi đáp sức khỏe thông tin y tế, hay RiveHub, Subiz, … cố gắng tạo cho hệ thống hỗ trợ, chăm sóc khách hàng bán hàng tự động Rất nhiều cơng ty khác có hi vọng phát triển trợ lý ảo hiểu ngơn ngữ tự nhiên người, trả lời tự động tương tác với người cách tự nhiên Nhiều người cho việc sử dụng kỹ thuật xử lý ngôn ngữ tự nhiên NLP kỹ thuật học sâu Deep Learning để làm tăng chất lượng hiệu hệ thống Nhưng từ lý thuyết đến thực tế chặng đường dài, cách đó, người tích hợp trí tuệ nhân tạo (AI) vào sản phẩm cơng nghiệp Như vậy, hệ thống trả lời tự động có nhiệm vụ vai trò quan trọng, trợ giúp người nhiều nhiều lĩnh vực: y tế, giáo dục, ... CÔNG NGHỆ NGUYỄN ĐẮC NAM HỆ THỐNG TỰ ĐỘNG PHÂN LUỒNG CÂU HỎI VÀ GIẢI ĐÁP YÊU CẦU TRỰC TUYẾN Ngành: Công nghệ thông tin Chuyên ngành: Kỹ thuật phần mềm Mã số: 60480103 LUẬN VĂN THẠC SĨ CÔNG NGHỆ THÔNG... tiếp nhận, giải trả lời câu hỏi thắc mắc yêu cầu người dùng (Hệ thống hỏi đáp Q&A giải thắc mắc): khách hàng hoạt động thương mại, người dân thủ tục hành chính, học sinh - sinh viên hoạt động đào... nhầm cho người dùng dẫn đến câu hỏi yêu cầu thường không trả lời thỏa đáng Cho đến hệ thống trực tuyến giải yêu cầu tiện lợi Ví dụ mua sắm mạng: người sử dụng truy cập vào địa mua sắm nhiều mặt