Các khái niệm cơ bản NLP

Khái niệm cơ bản của huấn luyện NLP

Câu mẫu (Sample)

Câu mẫu là câu nói của khách hàng được sử dụng để huấn luyện NLP cho Chatbot / Voicebot. Mỗi câu mẫu thể hiện một ý định nào đó.

Câu mẫu gồm 3 thành phần: Ý định, Thực thể và Cảm xúc.

Ý định (Intent)

Là mong muốn mà khách hàng truyền tải trong câu nói

Thực thể (Entity)

Là các trường thông tin xuất hiện trong câu nói, bổ nghĩa thêm cho ý định.

Cảm xúc (Sentiment)

Cảm xúc được truyền đạt trong câu nói của khách hàng. Các mức độ của cảm xúc gồm tích cực, tiêu cực và bình thường.

Ví dụ:

Câu mẫu	Ý định	Thực thể	Cảm xúc
“Tôi khá hài lòng về dịch vụ chăm sóc khách hàng của VN-airline”	Nhận xét dịch vụ chăm sóc khách hàng Ý định: feedback_service	Thực thể: “VN-airline” Loại thực thể: brand_name	“Hài lòng” (Tích cực) Cảm xúc: positive
“Tôi muốn đặt một chuyến bay đến Hà Nội”	Đặt chuyến bay Ý định: book_flight	“Hà Nội” Loại thực thể: city	Cảm xúc bình thường Cảm xúc : neutral

Từ khóa (Keywords)

Được dùng để huấn luyện cho bot nhận diện được những từ cùng loại, từ viết tắt, từ mượn, từ đồng nghĩa… cùng nghĩa với một từ nào đó.

STT	Từ khóa	Loại thực thể	Từ nhận diện
1	cơm	food	cơm huế, cơm gà, cơm lam (cùng chỉ cơm)
2	Hồ Chí Minh	city	hcm, sài gòn
3	nhân viên	people	nv, nhan vien

Stopwords

Là những từ xuất hiện nhiều trong ngôn ngữ tự nhiên, tuy nhiên lại không mang nhiều ý nghĩa. Ví dụ: à, á, a, nhen,…

Teencodes

Là những ký tự viết tắt trong tiếng việt. Ví dụ: ko (không), bjk(biết),...

Tùy theo lĩnh vực, cần xây dựng từ điển riêng cho teencodes và stopwords để huấn luyện NLP