用阿拉伯语方言进行文本分类

德尔

我对阿拉伯语进行了文本分类它在标准阿拉伯语中工作得很好但现在我将使用不同阿拉伯语方言的数据集?我可以使用相同的操作符(tokenize和stem(阿拉伯语)和stopword吗

Telcontar120

只要潜在的字符没有不同，即使方言中的词汇、句法和用法可能有所不同，也应该如此。RapidMiner(或任何NLP算法)并不真正理解语言，它只是将它们全部转换为数字表示以进行操作。