明经CAD社区

 找回密码
 注册

QQ登录

只需一步,快速开始

搜索
查看: 861|回复: 4

[函数] 数字字符串转数值保留小数位数的问题

[复制链接]
发表于 2018-5-4 12:07 | 显示全部楼层 |阅读模式
(atof "338270.523")=338271.0,为何不=338270.523?
(* 338270523 0.001)=338271.0,为何不=338270.523?





"觉得好,就打赏"
还没有人打赏,支持一下
 楼主| 发表于 2018-5-4 12:32 | 显示全部楼层
经测试,超过7位(包括小数点)就不能正确保留小数位数,如下:

(atof "270.523")=270.523

(atof "8270.523")=8270.52

超过7位就四舍五入了,不知在哪更改设置?
发表于 2018-5-4 12:53 | 显示全部楼层
发表于 2018-5-4 12:59 | 显示全部楼层
_$  (rtos (atof "338270.523") 2 4)
"338270.523"

保存的数据精度还是高的 只是显示的问题
 楼主| 发表于 2018-5-4 23:06 | 显示全部楼层
经测试,确实是显示的问题,实际精度是不变的,谢谢以上两位老师!
您需要登录后才可以回帖 登录 | 注册

本版积分规则

小黑屋|手机版|CAD论坛|CAD教程|CAD下载|联系我们|关于明经|明经通道 ( 粤ICP备05003914号 )  
©2000-2023 明经通道 版权所有 本站代码,在未取得本站及作者授权的情况下,不得用于商业用途

GMT+8, 2024-5-18 05:26 , Processed in 0.149085 second(s), 26 queries , Gzip On.

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表