大模型处理图片并矢量化

panliang9

大模型处理图片并矢量化，大家帮我编写一个完美的提示词。
————————————————————————————
图纸矢量化是用矢量化工具把图片处理成矢量化图形，例如dxf等。

但现阶段的矢量化工具，处理出来的图形一言难尽，最好的  https://vectorizer.ai/  

处理出来的做为平面设计，印刷广告等够用了，但也不能满足 机械设计、建筑设计等的需要。

我们需要的是这样一种工具，它能 “理解” 给出的图片，它能理解推测直线、圆、弧、多段线、等等，它能理解推断出几何要素的“同心、共线、共点、平行、对称、相等的几何关系。 然后根据它理解的几何关系，和图纸比例，直接输出 dxf 文件，或者输出 lsp 文件，直接生成图形。

要做这样的事、首先是要给大模型提供一个图片、然后再用一个精心设计的 “提示词”，让大模型输出DXF，或者编写一个lisp。

这里面的关键是 “提示词“ ，好的提示词很关键，它能让大模型输出好结果。

下面即是我的一个实践，使用的是 gemini 2.5 pro ,提示词是用deepseek 帮我写的，我略微更改。当然结果并不理想。

图片、提示词、最终输出的 lisp 在下面，大家能不能尝试下，看能不能编写完美的提示词，让大模型输出更好的结果。

——————————————————————————————
提示词：
"请根据我提供的图纸截图，精确识别并提取以下信息：
1. 图纸分析要求：
识别所有几何图形（直线、圆弧、圆、多段线等）的尺寸、位置和相对关系
提取文字标注（包括技术说明、尺寸标注、标题栏内容）
保留图层信息（如轮廓线、中心线、标注层等）
注意比例尺和单位（如毫米/英寸）
2. DXF生成规范：
输出文件需兼容AutoCAD 2007+版本
为不同元素分配正确图层（例：轮廓线=Layer0，标注=Annotation）
3. 附加要求：
如截图模糊，请优先保证关键尺寸的逻辑一致性
缺失尺寸可根据行业标准合理推断（需注明）
4. 输出格式：
输出lisp文件，可以在CAD中生成上述图形。

————————————————————————————————————————————————

kozmosovia

图纸点阵转矢量，因为结果不唯一，其实是并不能满足工程上需要精确且唯一的基本标准的。即便是AI，也无法将一个点阵图，无论怎么设置，结果都是唯一的矢量图。提示词不一样，结果不一样，你如何确定这次出来的结果是唯一的真解？

panliang9

kozmosovia 发表于 2025-5-29 11:16
图纸点阵转矢量，因为结果不唯一，其实是并不能满足工程上需要精确且唯一的基本标准的。即便是AI，也无法将 ...

完美的结果就是大模型看懂了这样的图，“理解了” 这个图，看懂了标注，所以即使这个图是一个手机拍摄的图，抛开光线、波纹，各种图片的不完美，它都能按照理解，画出一个正确的图。

而不是对图片进行 “处理”。

kozmosovia

估计没戏，画的图，里面的线条和文字的“实际意义”，大概率无法转成01让AI明白。因为有很多意义是在图纸之外人为确定的。既不需要图面表达出来，其实也无法在图面表达这种确定关系。

你有种再说一遍

这个需要CNN,而不是LLM,
而且这个还算简单,不应该是PDF->LSP,
而是应该设置PDF->CNN->CAD->CNN这种循环状态机.
让它自己通过标注校验图纸.
还有要打造虚线和线性的强关联,
问题是没人付钱,等别人施舍我觉得不太现实.
看看天宫CAD之类会不会出,我觉得它家技术慢了点...

panliang9

你有种再说一遍 发表于 2025-5-29 16:37
这个需要CNN,而不是LLM,
而且这个还算简单,不应该是PDF->LSP,
而是应该设置PDF->CNN->CAD->CNN这种循环状 ...

你做好就有人付钱了，这是真实存在的需求！

非常有用的。

你有种再说一遍

panliang9 发表于 2025-5-29 17:12
你做好就有人付钱了，这是真实存在的需求！

非常有用的。

我看不到这个东西的前景有多大,技术还是要服务资本.
做出来不就相当于把3k一个月的强人工智能给抹掉了吗?