腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
MySQL JSON存储不同的
浮点
值
、
、
在MySQL (5.7)中,JSON数据列中的
浮点
值是如何舍入的? 我很难找到一个好的资源来知道如何解决我的问题。
浏览 11
提问于2018-03-06
得票数 0
1
回答
Groovy数字比较问题
、
下面是一个示例(当我在定义中使用
浮点
值时,在数据库中它们被定义为数字,精度为2),这是输出的样子通常情况下,通过查看这些值,我希望两个值的差值都是16,但事实并非如此。
有
什么建议是我可能会错过的吗?
浏览 1
提问于2013-04-05
得票数 1
2
回答
JavaScript
浮点
错误
在我的应用程序中,我正在做一些客户端数学运算,它经常由于
浮点
错误而出错。要简化问题:还有其他更复杂的例子,但我的问题是: 解决潜在
浮点
错误的适当方法是什么?
浏览 2
提问于2014-02-28
得票数 1
12
回答
如何在
Java
中避免
浮点
数或双精度数的
浮点
精度错误?
、
、
我
有
一个非常恼人的问题,在
Java
中使用长的
浮点
数或双精度
浮点
数。System.out.println( value );0.00.20.40.60.8000001我知道
浮点
精度
误差
是
有
累积的
有
什么想法吗?
浏览 4
提问于2011-03-10
得票数 33
回答已采纳
2
回答
为什么Scipy和EXCEL中的Bessel函数会给出不同的结果?
、
、
我尝试用Scipy和EXCEL来计算贝塞尔函数,但他们给出的结果不同。你知道为什么吗?提前谢谢。import scipy.special as ss print(result)=BESSELK(0,2155481626213; 1)来自Excel的结果是4,405746474969860。
浏览 5
提问于2021-01-06
得票数 0
1
回答
为什么我的排列计算器会返回小数?
、
我做了一个排列和组合计算器。查找数字阶乘的代码是: total=1; return total; else{ total*=i; return total;} answer.innerHTML="Answer: "+factorial(n)/factorial(n-r); 如果我做了55P9,我的答案是.5 off。如果我使用Math.floor(),一切都会正常
浏览 1
提问于2016-05-21
得票数 0
回答已采纳
7
回答
为什么这个减法不等于零?
、
、
、
我在我的ColdFusion代码中偶然发现了这些值,但谷歌计算器似乎也有同样的“错误”,差值为非零。
浏览 0
提问于2010-01-05
得票数 7
回答已采纳
1
回答
为什么我将数据类型long赋给
浮点
数据类型时会出现舍入错误?
、
、
、
我老师的问题是:写下可能发生舍入
误差
的作业。这是用
Java
编写的。long l;d = l; 这就是答案,但为什么呢?float的值和最大值较高,float是一个
浮点
数。相比之下,long只是完整的数字,那么为什么会有舍入
误差
呢?
浏览 2
提问于2013-02-27
得票数 0
回答已采纳
2
回答
如何使用Math.ulp(double)在
java
中计算一组算术运算的总
浮点
舍入
误差
?
、
、
、
我想在
Java
语言中使用Math.ulp(double)方法计算一系列加法、乘法和除法的
浮点
舍入
误差
。根据最后一位单元的维基页面,似乎一个
浮点
计算的
误差
,例如2+3或2*3将分别是0.5*ulp( 2+3 )或0.5*ulp( 2*3 ),其中2*3和2+3是
浮点
计算。rref.matrixArray[i][j] = (int)(rref.getVal(i, j) + 0.5); }} 代码的最后部分,将小于计算
误差
浏览 3
提问于2015-12-26
得票数 0
1
回答
使用双和
浮点
的不准确计算
、
、
为什么这段代码会给出不准确的结果?System.out.println(a);System.out.println(b);0.8999999999999999
浏览 3
提问于2014-11-09
得票数 0
回答已采纳
2
回答
Kotlin double大于float错误表达式解析
、
、
、
有
什么想法吗?
浏览 0
提问于2020-03-09
得票数 2
1
回答
计算传播
误差
当我对许多
浮点
数求和时,如何计算传播
误差
。例如,如果我和n
浮点
,如何计算
误差
?
浏览 0
提问于2013-03-03
得票数 0
1
回答
提高numpy.dot (python)的精度
、
、
有没有什么方法可以写代码来避免错误累积,或者
有
什么方法可以增加numpy存储的小数位数,从而使具有100+区域的系统可以忽略错误。
浏览 4
提问于2012-01-26
得票数 3
回答已采纳
1
回答
不稳定希尔伯特矩阵单位向量
、
、
、
、
设H(n)是n阶的希尔伯特矩阵。让e_im := H(n) * e来吧。设r = (r_1,...,r_n)是一个小的随机向量。我使用了一些计算机代数系统来解决H(n) * x_2 = (e + r)_im问题。我使用numpy和scipy.linalg
浏览 0
提问于2015-11-09
得票数 1
2
回答
为什么在财务计算中要使用小数
浮点
数,而小数
浮点
数存在舍入
误差
、
、
我目前正在使用c++的股票市场相关的项目,涉及许多
浮点
类型,如价格和指数。 我看过很多书,说你应该在货币相关的算术中使用十进制
浮点
数。据我所知,
浮点
数和小数
浮点
数的区别在于指数部分的基数是什么,
浮点
数使用2作为基数,小数
浮点
数使用10。当使用小数
浮点
数时,您仍然会有舍入
误差
,您仍然不能表达1/3(如果我错了,请纠正我),我猜很有可能将某人的账户余额乘以30%,然后发生舍入
误差
,经过几次计算,舍入
误差
可能会传
浏览 2
提问于2014-11-06
得票数 4
1
回答
共享多处理数组中的精度损失?
、
、
、
、
我正在试验多进程数组类型,以便在进程之间共享一个可写对象。我已经阅读了许多关于这样做的警告,但我相信在我的应用程序中,由于物理内存的限制,它是必要的。import numpy as npfrom multiprocessing import Pool, Array n
浏览 17
提问于2018-07-28
得票数 0
1
回答
双重比较。对不同结果的解释
我试着为scjp训练。 System.out.println(0.8==0.1+0.1+0.1+0.1+0.1+0.1+0.1+0.1);//false输出:falseabs(a1-a2)<epsilon对scjp来说,类似的问题是否有效?
浏览 0
提问于2014-01-26
得票数 0
2
回答
什么是好的经验法则
浮点
比较方法选择器?
、
、
、
、
我正在测试一些代码,一个涉及使用
浮点
值的计算的数字-通常是非常大的
浮点
值。我
有
一些通用的(C++模板化的,但对于这个问题来说这并不重要)代码,它将我的输出与它们的期望值进行比较,无论是标量还是数组。我面临着为我正在测试的各种函数选择精度阈值的问题,至少对于两种C/C++
浮点
类型float和double是如此。就像一样,对于比较
浮点
值,也没有万能的方法,也没有完全基于数据类型来拟合和计算的单一精确值:相对
误差
和绝对
误差
,可能会放大
浮点
舍入<em
浏览 2
提问于2016-05-06
得票数 1
1
回答
IEEE754 FP32 32/64标准
误差
公式是: 我很难理解这个练习是在说什么。绝对错误不是保持不变的错误类型吗?有人能帮我澄清一下吗?
浏览 1
提问于2019-01-22
得票数 1
2
回答
单线程/多线程(OpenMP)模式下计算精度的差异
、
、
、
、
有没有人能解释/理解单线程/多线程模式下计算结果的差异?#include <iomanip>#include <ppl.h> { start = clock(
浏览 1
提问于2014-12-29
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
【一问一答】Excel中因浮点运算导致的运算精度误差
电磁流量计误差允许有多大
Java:Java和Kotlin有哪些区主要别?
什么是Java?Java的语言有哪些特点?
Java的特点有什么
热门
标签
更多标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
活动推荐
运营活动
广告
关闭
领券