nlp 相关问题

自然语言处理(NLP)是人工智能的子领域,涉及从自然语言数据转换或提取有用信息。方法包括机器学习和基于规则的方法。

使用单标记和二元标记进行语料库预处理的最佳方法?

我想知道是否有关于解决此问题的最明智方法的一般建议。 我正在使用 word2vec 来确定规范之间的相似度分数(这是我感兴趣的最终输出)...

回答 1 投票 0

ValueError:当 n_samples=0、test_size=0.2 且 train_size=None 时,生成的训练集将为空。调整上述任何参数

我写了一个文本分类程序。当我运行该程序时,它崩溃并出现错误,如以下屏幕截图所示: ValueError:当 n_samples=0、test_size=0.2 且 train_size=None 时,生成的 tr...

回答 7 投票 0

如何从父目录中包含的 git 子模块导入函数?

在学习如何在不使用任何Huggingface工具的情况下微调基于BERT的uncased LLM时,我在尝试在我的par中的tmp.py中导入tokenization_test时遇到了错误消息...

回答 1 投票 0

为什么我的nlp模型在处理问题时会多次重新加载?

收到问题后,我的程序调用 run_predict 函数,然后找到与问题最匹配的段落。 之后我的模型就不断的重新加载,不知道什么原因。 夫...

回答 1 投票 0

如何使用spacy的nlp.pipe函数跟踪进度?

我正在使用 Python 和 Spacy 进行编码。 我想跟踪 nlp.pipe(sentences) 的执行进度,因为它持续很长时间。 怎么做? nlp = spacy.load('en_core_web_sm') 句子 = [...] d...

回答 2 投票 0

情感分析(意见挖掘)中最具挑战性的问题是什么?

意见挖掘/情感分析是自然语言处理的一个最近出现的子任务。有些人将其与文本分类进行比较,有些人对此采取了更深入的立场。你觉得怎么样...

回答 6 投票 0

Python模糊搜索和替换

我需要对字符串中的子字符串进行模糊搜索并替换该部分。例如: str_a =“阿拉巴马州” str_b =“已替换” orig_str =“弗拉巴马州是位于...东南部地区的一个州

回答 1 投票 0

使用 NLP python 对文本进行多分类 - 总类别中的 2 个类别的召回相对较少

我有 9 个独特类别的几乎平衡的数据集,每个类别有近 2200 行,差异为 +/-100 行。为了创建模型,我使用了下面提到的 url 方法,但在每种情况下......

回答 1 投票 0

持续预训练与使用 MLM 微调语言模型

我有一些自定义数据想用来进一步预训练 BERT 模型。到目前为止我已经尝试过以下两种方法: 从预训练的 BERT 检查点开始并继续预训练

回答 3 投票 0

如何获取两个相邻字母被切换/交换的所有字符串变体

获得交换两个相邻字母的字符串的所有可能变体的最优雅的方法是什么?例如,如果我们有字符串“stack”,则所需的结果应该是: ['tsack', '...

回答 1 投票 0

Mallet 中的连贯性分数是如何计算的?

我确实理解诊断输出如何显示每个主题的一致性值,但我的值范围在 -150 和 -600 之间,并且我在使用 Mallet 的地方看到的其他帖子显示了一致性......

回答 1 投票 0

无法在 lang 图中使用“add_conditional_edges”的 END 函数

这是我的代码: 导入操作系统 从 dotenv 导入 load_dotenv 加载_ dotenv() 从 langchain_openai 导入 ChatOpenAI 从 langgraph.graph 导入 StateGraph,END 从 langgraph.graph 导入图,

回答 1 投票 0

如何在 Gemini 应用程序 python nlp 中根据用户输入进行动态 API 调用?

我正在开发一个 Gemini 应用程序,我需要根据用户输入进行动态 API 调用。具体来说,我想根据用户的查询执行不同的 API 请求。例如,如果...

回答 1 投票 0

尝试在 Python 中对 10k 到 30k 文本运行 GermanSentiment,总是崩溃?可能数据集太大?

我想对 2 个推文数据集进行情感分析,一个包含 9k 字符串,另一个包含 30k 字符串。我已经导入了 GermanSentiment,它与 GitHub 上的演示代码运行得很好,但是当我

回答 1 投票 0

从 Inception Annotation 引擎导出带有标签的文本序列

我正在使用 INCEpTION (https://inception-project.github.io/) 来注释我的法律文件。有没有办法可以导出原始文本,而不是 Inception 中提供的任何导出格式

回答 1 投票 0

NLTagger.requestAssets(用于:语言,tagScheme:.lemma)永远不会返回

我是 NLP 新手。我需要对一个句子进行词形还原。但对资产的请求却一去不复返。这是代码: if !NLTagger.availableTagSchemes(for: .word, 语言: .english).contains(.lemma) {

回答 1 投票 0

评论中的文字摘要,并与其他摘要评论进行比较

Context - 做一个NLP项目来分析 评论摘要之间的差异并考虑相似的评论。 例如- 第1句:需要额外休假2个月 第 2 句:

回答 1 投票 0

有利于句法分割

我想使用Benepar和法国模型来进行句法分割。 我按照教程进行操作,但总是出现此错误 RuntimeError:为 ChartParser 加载 state_dict 时出错:

回答 1 投票 0

如何使 Hugging Face 微调模型的 config.json 文件引用原始预训练模型的特定修订/提交?

我上传了这个模型:https://huggingface.co/pamessina/CXRFE,这是这个模型的微调版本:https://huggingface.co/microsoft/BiomedVLP-CXR-BERT-specialized 不幸的是,CXR-BERT-

回答 1 投票 0

带有大上下文窗口的拥抱脸部模型[关闭]

我正在寻找一个模型,可以接受 50k 个字符等输入,并根据该文本提示回答问题。有类似的东西吗?不知道如何找到它,人工智能新手。

nlp
回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.