joblib 相关问题

Joblib是一组用于在Python中提供轻量级流水线的工具。

ModuleNotFoundError:没有名为'numpy.random._pickle'的模块

我有一个doc2vec模型来驱动我的推荐应用程序。我已经建立了doc2vec模型并保存到s3存储桶中。现在,当我打开webapp时,应该从s3重新加载模型,但这不是...

回答 2 投票 1

无法从sklearn.externals.joblib导入Sklearn

我是一个初学者,刚开始学习机器学习。我正在尝试从sklearn导入诸如imputer之类的课程,但我无法做到这一点。从sklearn.preprocessing导入Imputer,LabelEncoder,...

回答 1 投票 1

如何使用joblib.Parallel()将其中带有“继续”的循环并行化?

假设我有一个仅在满足某些条件时才“输出”的循环:some = list中项目的输出= []:if condition(item):res = do_something(item)output.append(res)对于...

回答 1 投票 1

ImportError:无法从'sklearn.externals'导入名称'joblib'

我正在尝试使用joblib import pandas从s3加载我保存的模型,作为pd import numpy作为np import json import subprocess import sqlalchemy from sklearn.externals import joblib ENV ='dev'...

回答 2 投票 0

是否可以在azure vm中并行运行python?

我有一个python脚本,可以使用joblib并行运行程序,并且效果很好(本地计算机上100%的CPU消耗)。最近,我将python脚本迁移到了数据科学虚拟...

回答 1 投票 0

从colab加载模型时,没有名为'sklearn.svm._classes'的模块

我已经在google colab上训练了一个模型,并希望将其加载到我的本地计算机上。但是我得到ModuleNotFoundError:没有名为“ sklearn.svm._classes”的模块。在colab上加载模型是没有问题的。 colab:...

回答 1 投票 1

ASYNCIO问题。 “未来未决”

我目前在Joblib运行多重处理或并行程序时遇到问题。我以前能够使它工作,并且我总共达到了1分钟的时间,但是,我去了,然后...

回答 2 投票 1

用于预测文本数据的管道API-'AttributeError:

我用于文本数据预测的管道模型是pipe1 = Pipeline([('tfidf',TfidfVectorizer(analyzer = split_into_lemmas,min_df = 20,max_df = 3000)),('classfier',MultinomialNB())])API app ...

回答 1 投票 0

具有多个关键字参数的函数的Jobblib并行化

我有一个庞大而复杂的函数,出于演示目的,可以简化为该原型函数:def test(a,b,op =“”,ex = []):print(op)ex = len(ex)如果op =='add':...

回答 1 投票 0

没有名为'sklearn.neural_network._multilayer_perceptron'的模块

我想调用一个包含MLPRegressor modele的joblib文件,但出现错误,导入import joblib mlpr = joblib.load(“ C:/ Users / Haytham / OneDrive / Bureau / PFE-App / model.pkl”)ModuleNotFoundError:否。 ..

回答 1 投票 0

[使用joblib和SLURM在Python中并行化for循环

我有一个包含100个元组的元组列表,可以用作外部函数的输入。外部函数返回一个值,并将该值附加到数组中,例如(MainFile.py):from ...

回答 1 投票 0

如何用joblib并行写入文件? JoinableQueue问题

我正在尝试将运行超过100k个文件的计算结果写入单个文件。文件的处理大约需要1s,并将一行写到输出文件中。问题本身是“ ...

回答 1 投票 2

docker中的Python代码未使用所有可用的CPU内核(仅使用一个)]]

我正在使用AWS Batch运行具有少量并行运行模块的python脚本(在AWS ECR的docker容器中)。当我在Linux 16核心计算机上手动调用脚本时,看到16 python ...

回答 1 投票 0

使用RandomizedSearchCV时出现多个作业

我正在尝试使用本身具有管道的嵌套RFECV运行RandomizedSearchCV。该管道是一个MinMaxScaler,后跟6个不同的分类器之一。当我运行此RandzomizedSearchCV ...

回答 1 投票 0

如何处理从joblib.Parallel返回的非常大的对象

我正在尝试并行化以下代码:从joblib import numpy as np import并行,延迟lst = [[0.0,1,2],[3,4,5],[6,7,8] ] arr = np.array(lst)w,v = np.linalg ....

回答 1 投票 0

无法将经过训练的模型上传到AI平台

我已经训练了一个随机森林分类器,并将该模型作为Joblib文件存储在Google存储器中。当使用scikit-learn框架创建具有以下版本的版本时,ai平台发出错误消息:...

回答 1 投票 0

如何并行化嵌套列表中2个元素的乘法

我如何并行化嵌套列表中2个元素的乘法。即如果我的列表是:lst = [[1,1],[1,2],[1,3],[2,1],[2,2],[2,3],[3,1] ,[3,2],[3,3]]我想要获得的输出是:[1,...

回答 1 投票 0

[EOF加载具有各种数据类型的字典列表时出错

我有字典列表,其中每个字典包含多个不同的项目。它在强化学习的训练过程中用作记忆重播,在某些情况下,我需要创建一个备份文件...

回答 1 投票 0

如何使用joblib parallelbackend拟合LightGBM?

我正在开发一个具有2M行的模型,但是pandas数据框在读取文件时抛出内存错误。我正在使用python 3.6,我使用dask数据框读取文件并尝试使用scikit ...

回答 1 投票 1

我正在尝试运行django项目,并且不断收到此警告消息

/ Users / kyvinay / cfd_apriori / 4th_umpire / web / scikit-learn / sklearn / externals / joblib / __ init__.py:15:FutureWarning:sklearn.externals.joblib在0.21中已弃用,并将在0.23中删除。请导入...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.