nlp 相关问题

自然语言处理（NLP）是人工智能的子领域，涉及从自然语言数据转换或提取有用信息。方法包括机器学习和基于规则的方法。

Jupyter Lab 内核在启动 trainer.train() 之前就死掉了

正在微调 phi-3.5-mini，当尝试运行 trainer.train() 时，我收到以下错误： ***** 跑步训练 ***** 示例数量 = 647 历元数 = 3 瞬时...

python nlp conda huggingface-transformers slm-phi3

回答 1 投票 0

为什么形容词的词性标签是“JJ”？

表示形容词 POS 的 JJ 标签的词源是什么？我无法在网上找到任何参考资料。有几个资源列出了所有标签，但没有一个描述原因。

nlp

回答 2 投票 0

Stanford Core NLP 如何获得概率和误差幅度

当使用解析器或核心 NLP 中的任何注释时，有没有办法访问概率或误差幅度？为了将我的问题放在上下文中，我试图理解......

nlp stanford-nlp pos-tagger

回答 1 投票 0

从非结构化医疗笔记中提取复杂变量而不依赖预定义关键字的最佳 NLP 方法

我正在致力于从电子健康记录中的非结构化患者笔记中提取结构化数据。我一直在使用 SpaCy 的命名实体识别模型和实体标尺（来定义我的d...

python nlp bioinformatics named-entity-recognition information-retrieval

回答 1 投票 0

提取哪些特征来聚类文本

我想为文本制作一个分类器，进一步用于建议给定文本最相似的文本。该应用程序的流程如下：使用...

text nlp data-science cluster-computing large-language-model

回答 1 投票 0

BertScore 对于不相关的句子给出了很高的结果

所以我一直在尝试 bert_score 来做一些指标，在测试它时我发现它为一些完全不相关的句子给了我一些非常高的分数。例如我尝试过这个：参考=...

python nlp bert-language-model

回答 1 投票 0

如何在 Huggingface 中重新初始化 Mistral 模型的权重？

来自如何以官方方式将 Hugging Face LLaMA v2 模型的权重重新初始化为原始模型？和 https://discuss.huggingface.co/t/how-does-one-reinitialize-the-weights-of-a-h...

nlp huggingface-transformers large-language-model mistral-7b xaiver-initialization

回答 1 投票 0

LLaMA 3.1 使用 QLoRA 进行微调 - CUDA 内存不足错误

我正在尝试使用 QLoRA 技术，借助来自 Hugging Face 的心理健康对话数据集的 4 位 bitandbytes 库来微调 LLaMA 3.1 80 亿个参数模型。

nlp artificial-intelligence large-language-model llama fine-tuning

回答 1 投票 0

如何使用预训练的BERT词嵌入向量来微调（初始化）其他网络？

当我使用 textcnn 进行分类工作时，我有使用 Word2Vec 和 fasttext 等预训练词嵌入来微调 textcnn 的经验。我使用这个过程：创建嵌入...

machine-learning nlp pytorch conv-neural-network bert-language-model

回答 1 投票 0

使用colab时没有这样的文件或目录'nltk_data/corpora/stopwords/English'

首先，我使用 Google colab 进行工作，我已经下载了英语的 nltk 停用词，内容如下： nltk.download('停用词') 下载成功 [nltk_data] 正在下载

python nlp nltk google-colaboratory

回答 2 投票 0

使用 Spacy 找到第一个 PER 序列后中断

我正在尝试使用 spaCy 从文本列表中仅提取第一个发言者的姓名。目前，我的函数返回所有“PER”标签，但我想减少开销并仅获取 fi...

python nlp spacy

回答 1 投票 0

使用 python 包将句子从第一人称重写为第三人称，反之亦然

python中是否有任何包可以从人的角度重写大量内容，即第一人称到第三人称和第三人称到第一人称我昨天吃了苹果他吃了苹果是的...

text url-rewriting nlp spacy grammar

回答 1 投票 0

使用量化和 AMP 微调预训练模型：缩放器错误“尝试取消缩放 FP16 梯度”

我正在尝试使用有限的 VRAM 来微调预训练模型。为了实现这一目标，我使用量化和自动混合精度 (AMP)。然而，我遇到了一个我似乎无法解决的问题

python pytorch nlp huggingface-transformers fine-tuning

回答 1 投票 0

使用正则表达式分割具有唯一标题的小节

我正在努力寻找一种方法来按部分拆分我拥有的法律文件集。我一直在尝试使用正则表达式来做到这一点，虽然我已经相当接近了，但我想看看是否有一个 w...

python regex parsing split nlp

回答 1 投票 0

如何在keras中使用predict_generator预测无标签文本数据？

我正在尝试使用predict_generator对我的NPL模型进行预测，我的测试数据没有Y变量。我的目的是预测未来文本的标签。我已经尝试过“Y_test=None”...

tensorflow keras nlp generator

回答 1 投票 0

如何从各种语言的 YouTube 视频中提取字幕

我使用下面的代码从 YouTube 视频中提取字幕，但它仅适用于英文视频。我有一些西班牙语视频，所以我想知道如何修改代码以扩展...

python web-scraping nlp youtube video-streaming

回答 2 投票 0

如何从PDF中提取文本，包括图像和文本

我将从多个 PDF 文件中提取文本。 PDF文件包括文本和一些图像，甚至有些页面是扫描页面（我假设扫描页面就像图像）。我遵循了...

python nlp text-mining text-extraction

回答 1 投票 0

继续在新数据上训练 pytorch 模型

我正在研究文本分类任务，并决定使用 PyTorch 模型来实现此目的。该过程主要包括以下步骤：加载并处理文本。使用 TF-IDF 矢量...

python scikit-learn pytorch nlp python-polars

回答 1 投票 0

情感分析中的大写单词

我目前正在处理顾客对丝芙兰产品的评论数据。我的任务是将它们分类为情绪：消极、中性、积极。文本预处理的常见技术是...

nlp sentiment-analysis bert-language-model data-preprocessing

回答 1 投票 0

BertForMaskedLM中的“语言建模头”是什么

我最近阅读了有关 BERT 的内容，并想使用 BertForMaskedLM 来完成 fill_mask 任务。我了解 BERT 架构。另外，据我所知，BertForMaskedLM 是由 BERT 构建的，具有语言建模

nlp bert-language-model huggingface-transformers language-model

回答 2 投票 0

nlp 相关问题

最新问题