precision 相关问题

有关编程中数值精度的问题。对于分类精度,请使用标签[precision-recall]。

mpmath 和 mathmatica 输出差异

编辑,因为我的主要问题在于 mp.math 的结果不正确。 我最终需要对复数进行非常精确的计算,这就是为什么我尝试使用 mp 中的 mp 模块...

回答 1 投票 0

GMP mpf 精度到有效位数的硬性规则是什么

GMP 目前开箱即用,精度为 64 位精度(我认为这就是 mp_bitcnt_t 的名称)。 对我来说,我认为这最多可以达到 1x10e-22 左右的值(我在哪里

回答 1 投票 0

HackerRank 上的 JavaScript 项目 Euler #1

我在 HackerRank 上的 Project Euler #1 测试用例上遇到了一些问题,希望有一些关于 HackerRank 的 JS 经验的人能够提供帮助。 下面是我的代码。据我所知,...

回答 6 投票 0

如何在Python中将精度提高数百位小数

我需要计算非常低温度下的本征载流子浓度,该浓度需要非常小的值(低至10-678),并由Python四舍五入为0。您建议我做什么才能做到

回答 1 投票 0

如何让python在计算中使用15位以上的小数?

在这个问题中,我声称这种五边形的构造将永远收敛。 我在这里使用 Geogebra 绘制了前 50 次迭代。 然而,放大第 50 次迭代会导致

回答 1 投票 0

检查两个顶点是否相等是否正确且一致?

我正在编写一个 Typescript 游戏,其中有绘制到画布上的顶点,以及来自它们的一些边。我想确定来自不同顶点的某些边是否相交。为此,我就是我们...

回答 1 投票 0

极坐标截去小数

我正在尝试将数据框中的浮点数截断为所需的小数位数。我发现这可以使用 Pandas 和 NumPy 来完成,但我也看到它可能是

回答 1 投票 0

极坐标截去小数

我正在尝试将数据框中的浮点数截断为所需的小数位数。我发现这可以使用 Pandas 和 NumPy 来完成,但我也看到它可能是

回答 1 投票 0

binance api 中的“精度”到底意味着什么?

我正在使用 python ccxt 在 binance 上下卖单。 order = Exchange.create_order(symbol, '市场', '卖出', 金额) 我已经获取了所需的精度,得到了 5。 市场 = Exchange.load_m...

回答 1 投票 0

tensorflow - 如何使用 16 位精度浮点

问题 float16 可以在 numpy 中使用,但不能在 Tensorflow 2.4.1 中使用,从而导致错误。 float16 是否仅在具有 16 位支持的 GPU 的实例上运行时才可用? 混合精度 今天,大多数

回答 1 投票 0

SQL Server 截断视图中新创建字段的小数点

我在 SQL Server 中有一个视图,如下所示: 选择 6.71/3.41 作为新号码 结果是1.967741(注意6位小数)->小数(38,6) 我在计算器中尝试了同样的操作,但结果...

回答 4 投票 0

Oracle 在使用触发器时会失去浮点精度

我使用触发器从同一表的其他两列填充 SDO_POINT_TYPE 或 SDO_GEOMETRY 列。 由于某种原因,与直接相比,触发器改变了浮点值精度

回答 1 投票 0

寻求SQL中浮点运算精度限制的解决方案

我目前正在使用 Spark SQL 提取数据集,需要将其统计信息附加到最后一行。 - 数据 选择帐户,余额为 FROM 表中的金额 联合所有 选择帐户,利息金额为 F...

回答 1 投票 0

Oracle中Number(38,127)、Number、Number(*)、Number(*,127)有什么区别

Oracle使用Number来存储定点和浮点值,我们可以选择指定精度或小数位数的值。 我的理解是 Number(38, 127) 定义了一个定点

回答 1 投票 0

mean() 返回 inf:我该如何解决这个问题?

我正在尝试实现一些机器学习算法,但在将数据组合在一起时遇到一些困难。 在下面的示例中,我从 UCI 加载示例数据集,删除带有 mi 的行...

回答 6 投票 0

具有广泛变化元素的 np.array 的运行总和

我需要计算np.array的运行总和。假设 a 是长度为 l 的给定 np.array,n 是整数步长,那么我需要一个长度为 l - n + 1 的数组 b,其中 b= [a[0]+a[1]+...+a[n-1], a[...

回答 2 投票 0

可以用浮点数表示的最小/最大数字

如何计算可以用二进制 16、32、64 IEEE 754 浮点数表示的最小/最大十进制数?

回答 2 投票 0

获取数据流的平均值、p95 和 p99

我有传入数据,我想计算该数据的平均值、第 95 个和第 99 个百分位数 - 我对最后 1000 个值最感兴趣。在任何时候,我想查询这个对象以获得任何...

回答 3 投票 0

np.array 的运行总和

我需要计算np.array的运行总和。假设 a 是给定的 np.array ,长度为 l,n 是整数步长,那么我需要一个长度为 l - n + 1 的数组 b,其中 b= [a[0]+a[1]+...+a[n-1], a[...

回答 1 投票 0

Python:简洁的浮点格式而不丢失数量级

为了便于一目了然的比较,我的项目中的统计结果通常最好格式化为0.3f,除了(a)小数位无用,或(b)有一小部分使得...

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.