floating-point-precision 相关问题

有关编程中数值精度的问题。对于分类精度,请使用标签[precision-recall]。

如何将Python小数四舍五入到小数点后两位?

我有一个Python Decimal(货币金额),我想将其四舍五入到小数点后两位。我尝试使用常规 round() 函数来执行此操作。不幸的是,这会返回一个浮点数,这使得它

回答 8 投票 0

浮点精度是52位还是53位?

我不断看到这种关于 64 位 IEEE 浮点表示中 53 位精度的废话。 有人可以向我解释一下世界上怎么会有一个被 1 困住的小东西吗...

回答 3 投票 0

长双精度文字的 C++ 后缀是什么?

在 C++(和 C)中,不带后缀的浮点文字默认为 double,而后缀 f 表示浮点数。但是获得长双精度数的后缀是什么? 在不知道的情况下,我会定义说, ...

回答 5 投票 0

f 为 float 时 repr(f)、str(f)、print(f) 的精度

如果我跑步: >>> 导入数学 >>> 打印(数学.pi) 3.141592653589793 然后用16位数字打印pi, 然而,根据: >>> 导入系统 >>> sys.float_info.di...

回答 1 投票 0

打印__float128,不使用quadmath_snprintf

在我关于 32 位十进制数字的浮点/双精度分析的问题中,一个答案说看一下 __float128。 我使用了它,编译器可以找到它,但我无法打印它,因为......

回答 4 投票 0

获取下一个最小的 Double 数

作为单元测试的一部分,我需要测试一些边界条件。一种方法接受 System.Double 参数。 有没有办法获得下一个最小的双精度值? (即将尾数减少...

回答 3 投票 0

Java float 比 double 更精确?

代码: 类主要{ 公共静态无效主(字符串[] args){ System.out.print("浮动:"); System.out.println(1.35f-0.00026f); System.out.print("双精度:"); 系统...

回答 4 投票 0

TI 操作系统如何编码才能不出现浮点错误?

我对我的图形计算器进行了测试,以检查浮点错误,经过四十八小时的完全随机性后,计算器没有损失任何一位数字的精度。 怎么...

回答 2 投票 0

如何在bash中将浮点数四舍五入到小数点后3位

我是一个新的 bash 学习者。我想打印作为输入给出的表达式的结果,小数点后有 3 位数字,并根据需要进行四舍五入。 我可以使用下面的代码,但它不四舍五入......

回答 4 投票 0

如何在Java中获取三角函数的精确值

这与此不重复,并且此 我正在为 Android 开发一个计算器应用程序,过去 20-30 天我一直在网上搜索,但没有找到任何合理的答案。我也有...

回答 4 投票 0

如何从变量指定浮点小数精度?

我有以下重复的简单代码,重复了几次,我想为其创建一个函数: 对于范围(10)内的 i: id = "在 dict 中查找的某个 id 字符串" 值 = 63。

回答 4 投票 0

如何避免浮点错误?

我正在尝试编写一个函数来近似平方根(我知道有数学模块...我想自己做),并且我被浮点运算搞砸了。你怎么能...

回答 2 投票 22


Python:在浮点数列表中查找最小项的索引[重复]

如何在Python浮点数列表中找到最小项目的索引?如果它们是整数,我将简单地执行以下操作:minIndex = myList.index(min(myList))但是,使用浮点列表,我得到了...

回答 4 投票 41

PHP。两个浮点数相减的结果

例如... $ aa = 10694994.89; $ bb = 10696193.86; $ ab = $ aa-$ bb; //结果为:-1198.9699999988不是-1198,97,但是在此示例中:$ cc = 0.89; $ dd = 0.86; $ cd = $ cc-$ dd; //结果为:0.03 ...

回答 2 投票 5

将DataFrame转换为列表时,浮点精度受到影响

因此,我试图通过使用row.values.tolist()(从CSV文件读取行)将浮点型DataFrame转换为列表(列表)。它的工作还不错,尽管对于某些值,精度是...

回答 3 投票 0

printf的宽度说明保持浮点值的精度

有可应用到一个浮点说明符进行扫描时,将自动地格式化输出到的显著数字的必要数量,使得一个printf宽度说明...

回答 7 投票 79

编号622.08E6替换为622080000

我最近遇到了一个C代码(顺便说一下),我找到了freq_xtal =((622.08E6 * vcxo_reg_val-> hiv * vcxo_reg_val-> n1)/(temp_rfreq));从我的直觉看来,622.08E6应该......

回答 2 投票 0

如何计算浮点数的小数位?

我想检查一下float32是否有两个小数位。我的javascript方式如下:step:= 0.01 value:= 9.99 if int(value / step)%1 == 0 {printf(“有两个小数位!...

回答 3 投票 2

使用浮点变量作为循环计数器的风险和非“==”条件的小数增量/减量的风险?

我们可以安全地使用浮点数作为循环计数器,并在每次迭代时按小数量递增/递减它们,就像下面看似无风险的程序一样吗? 当然我知道使用浮点数作为......

回答 4 投票 4

© www.soinside.com 2019 - 2024. All rights reserved.