自然语言处理(NLP)大作业实验报告

简介：
本报告为自然语言处理课程的大作业实验总结，涵盖文本处理、情感分析和机器翻译等关键任务，并探讨了当前NLP技术面临的挑战与未来发展方向。 自然语言处理（NLP）旨在实现人机间的自然交流，包括理解和生成自然语言文本与对话。这一任务之所以复杂，在于文本及对话在各个层次上广泛存在的歧义性或多义性。 一个中文文档从字面上看是由汉字和标点符号构成的字符串。这些字符可以组成词、短语以及句子，并进一步形成段落、章节乃至整篇文章。无论是在单个层级（如字、词等）还是不同层级之间，都可能存在多种解释方式的现象——同样的文本在不同的上下文中可能具有完全不同的含义。 通常情况下，在具体场景或背景的引导下，大多数歧义是可以解决的。因此我们能够正常理解并使用自然语言进行交流。然而另一方面，消除这些歧义需要大量的知识和推理工作。如何有效地收集、整理以及存储这些信息，并利用它们来减少歧义，是极具挑战性的任务。