问卷调查:如果实现解析 curl 命令的库，大家感兴趣吗？
guonaihong · guonaihong · 2020-03-15 09:37:03 +08:00 · 4993 次点击这是一个创建于 1701 天前的主题，其中的信息可能已经有所发展或是发生改变。
问卷调查
github 没有解析 curl 命令的库，再加上目前的知识储备实现这个库问题不大(熟悉 curl 命令选项 && go 的 http 客户端 && gnu 命令风格)。想知道如果对这个库感兴趣的童鞋多的话，4 月 1 号就开撸第一个版本。
伪代码
req, err := pcurl.ParseAndRequest(`curl -X POST -d '{"hello":"val")'`)
resp, err := http.DefaultClient.Do(req)
项目后面存放位置(现在还没开始)
 |
1
lasuar 2020-03-15 10:16:11 +08:00
搜罗一下，没找到做这个事的 pkg，做吧，有市场！
|
 |
2
hxse 2020-03-15 10:23:15 +08:00
如果能支持多线程, 多任务下载, 像 aria2 那样, 很感兴趣
|
 |
3
tairan2006 2020-03-15 10:30:55 +08:00 via Android
好像…没什么用啊，httpie 不是更友好么
|
 |
4
ClericPy 2020-03-15 10:51:01 +08:00
用 py 搞过 chrome 导出的 curl 转 requests args dict, 算是比较有用的吧, 关键信息转 JSON, 标准化+持久化, 平时抓包拿个 curl 一句不改就在代码里存了请求 meta, 还是挺好用的, golang 这边没找到类似的
|
 |
5
ospider 2020-03-15 10:52:28 +08:00
|
 |
6
guonaihong OP @ospider 谢谢，刚刚看过了。https://mholt.github.io/curl-to-go/ 解析 curl multipart 格式有问题。
可以用下面的命令 curl -F text=good -F voice=good.pcm www.qq.com 试下就知道。 |
 |
7
scukmh 2020-03-15 11:02:11 +08:00
为什么不做转换代码的工作呢，感觉这样写起来并没有什么用处呀。
|
|
8
guonaihong OP @scukmh 是指看到 curl 命令之后，直接用代码撸类似请求？
|
 |
9
wolfie 2020-03-15 11:10:49 +08:00
chrome 的 curl 复制出来可以导入到 postman （ postman 导出无法导入回去）
|
 |
10
52coder 2020-03-15 11:16:02 +08:00
比起这个我对如何使用 libcurl c/c++那个库实现多任务处理更感兴趣，哈哈哈，搜了好久没收到相关的例子，比如主线程往一个队列里插入任务，子线程比如最大并发 10 个任务同时处理，处理完一个再从任务里添加一个，我现在实现的比较挫，只能 10 个全部处理完再加 10 个，select 那啥的玩的不 6
|
 |
11
ETiV 2020-03-15 11:17:10 +08:00 via iPhone
#7 的想法可能有点用处，大概的场景：
从 chrome network 里复制出 curl 的命令，贴进 terminal 里。把 curl 命令改为 curl2go，回车后转换出 golang 的使用其自带标准库的代码，使用时无第三方依赖 而且感觉实现起来也简单些，直接用 flag 解析传进来的参数就好了 |
 |
12
augustheart 2020-03-15 11:23:02 +08:00
解析 curl 命令的库……我想了一下，这不是应该直接从 curl 的源码里面把代码抠出来就行么？
再想了一下，哦，你们不是写 c/c++的…… |
|
13
augustheart 2020-03-15 11:23:33 +08:00
再看了一下最上面，哦，原来是 go 栏目，我走错门了……
|
|
14
guonaihong OP @ETiV 没懂 '把 curl 命令改为 curl2go' 这句是怎么实施的。
|
 |
15
23571113 2020-03-15 11:43:09 +08:00
@guonaihong 用 go 做 libcurl 的 wrapper
|
 |
16
watzds 2020-03-15 11:46:04 +08:00 via Android
一般都有动态参数，用这个怎么搞？
直接生成对应语言的代码倒还行 |
|
17
guonaihong OP @23571113 libcurl 包装会丢掉 go 强大的交叉编译能力，go 的代码很容易跑在 mac, linux, windows, freebsd 上。
引入 gcc/g++就头疼了。 |
|
18
guonaihong OP 一般都有动态参数，如何理解？
|
|
19
guonaihong OP @watzds 一般都有动态参数，如何理解？
|
|
20
23571113 2020-03-15 11:58:28 +08:00
@guonaihong 你可以先做 wrapper 再慢慢把底层替换, 先把功能实现, 要不容易弃坑.
|
|
21
ETiV 2020-03-15 12:06:09 +08:00 via iPhone
把光标移到命令最开头……
|
 |
22
0o0O0o0O0o 2020-03-15 12:16:41 +08:00 via iPhone
我觉得如果有一个可以通过 curl 命令生成相同功能的 go 代码的 cli 会很有用。
尝试过类似工具，但似乎制作者或是不太熟悉 go 的 http 的客户端，或是功能太简单无法覆盖 curl 那五花八门的选项。 |
|
23
guonaihong OP @ETiV 其实想问怎么把 curl 命令转成 go 的代码？是指每遇到一种 curl 命令就手写完成同样请求的 go 代码？
|
|
24
guonaihong OP @0o0O0o0O0o 这个问题也想过，如果想覆盖 curl 那五花八门的选项。使用生成代码的方式很难做完善。可组合情况太多。。。
|
 |
25
wentaoliang 2020-03-15 12:49:16 +08:00
curl 不同平台参数不一致，而且没有这个需求啊。
|
 |
26
hantsy 2020-03-15 13:24:17 +08:00
@tairan2006 httpie 一直不习惯，所以我还是用 Curl 比较多。Windows 下自带不行，有很多问题，所以现在也安装了 Cygwin。
|
 |
27
zthxxx 2020-03-15 16:04:29 +08:00
|
|
28
guonaihong OP @zthxxx 谢谢啦，刚刚看了源代码，这个项目实现的 curl 选项也就 1,2 个，完整的 curl 选项应该是 175 个。这还不算-d 选项目后面还可以跟五花八门的配置项。
最后 curlie 和 4 月 1 日要写的 pcurl 不矛盾，curlie 是命令行工具，pcurl 是库。简单地说 pcurl 可以实现 curlie，反过来不行。 |
 |
29
ggicci 2020-03-15 16:55:24 +08:00 via iPhone
为什么要先写成 curl 命令再解析出来啊？我没这需求。
|
|
30
guonaihong OP @ggicci 因果关系是，是先有 curl 的命令(别人提供的)，想快速用 go 发射出去。
|
|
31
0o0O0o0O0o 2020-03-15 19:41:10 +08:00 via iPhone
@guonaihong #24 这句说得我有点混乱了，看你举例的代码不就是要解析 curl 命令行的吗……
|
|
32
ggicci 2020-03-15 20:28:11 +08:00
@guonaihong 直接用 http 库重写一下这个 curl 请求不就行了？= =|||
|
 |
33
leonme 2020-03-15 20:31:59 +08:00
httpie 香
|
|
34
guonaihong OP @0o0O0o0O0o 对啊，是要用 go 解析 curl 命令的。
我们在讨论实现的细节有个分歧。 你是想用解析 curl---->生成 go 代码的方式。在#24 表达这种方式不太好实现。 目前倾向于使用 解析 curl---->生成*http.Request 现在不混乱了吧。 |
 |
35
YanwenSun 2020-03-15 21:19:24 +08:00
曾经有计划做一个 curl->php->php curl 发送完整 curl 命令到 php 转换并请求 再带着返回头和内容(如果有)发回来的 proxy
后来发现最多也就是填几个会用到的 放虚拟主机上简单用用还是蛮方便的 |
|
36
guonaihong OP @ggicci 对于你的疑问，换种说话，标准库可以做很多事情。为啥还有这么多的库会出现补充它，不是说标准库不够好，而是做一件事太慢(非运行时，而是编码慢)。
你说的可以用标准库做，试想下下面的命令要你用 http 库最快要多长时间翻译成 go 代码。 ```bash curl -X POST url -d 'username=yourusername&password=yourpassword' curl --request PUT url curl -r 0-20000 -o myfile.png url curl -F text=good -F voice=@./good.voice url ``` 如果不在乎编码慢，我也不知道说啥了。如果在乎还有一例。 举个远古的例子(快与慢)，c 语言为啥什么会代替汇编。大部分原因汇编相比 c 来说编码来说太慢。写个 i++，可能要从栈里移动到寄存器里，用 add 完成自加，mov 再移回去，一个简单的 i++都要撸这么多，试想 for 循环或者写一个函数，这谁吃得消，对吧。历史说过，快的不一定能完全替换慢的，但是快的大多数会流行。 最后想说:天下武功唯快不破。。。 |
|
37
guonaihong OP @YanwenSun 同道中人。我后面想玩个大的，实现大部分 curl 选项。
|
|
38
guonaihong OP @leonme httpie 是很香，只是受众比 curl 略低。
|
 |
39
pharaoh168 2020-03-15 22:25:44 +08:00
vs code 有一个 REST Client 扩展，可以直接解析和运行 curl，还可以生成各种语音的代码。
|
|
40
guonaihong OP @pharaoh168 这个插件名字是？我看下有没有 go 的。如果能实现百分百 curl 选项，我就玩别的。
|
|
41
ggicci 2020-03-15 23:34:50 +08:00
@guonaihong 所以你就是想用 Go 把 curl 实现一遍？？？
|
|
42
guonaihong OP @ggicci 只实现一个解析库然后生成 go 的*http.Request 对象，然后给别的有此需求的童鞋用下。想加入吗?
|
 |
43
eq06 2020-03-15 23:58:31 +08:00
网上一搜一大把，curl 命令转 Python 的 requests 实现，都不用写代码，直接生成给你
|
|
44
guonaihong OP @eq06 有 go 的吗？
|
|
45
scukmh 2020-03-16 00:35:09 +08:00  1
@guonaihong 有 go 语言的我记得，https://curl.trillworks.com/#go
|
|
46
guonaihong OP @scukmh 谢谢了，刚刚确认过，支持 multipart 格式有问题。
可以用下面的命令 curl -F text=good -F voice=good.pcm url 试下就知道。 |
 |
47
vus520 2020-03-16 11:08:14 +08:00
@guonaihong
我刚刚看了你的几个 repo。 首先说肯定有价值，现在安卓手机上默认是没有 curl 的，curl 要编译要解决各种依赖链和 ssl 的问题，go 的交叉编译能完美解决这个问题。 |
|
48
guonaihong OP @vus520 感谢支持。
|
Select Language