V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
shuxge1223
V2EX  ›  分享发现

一个大型 csv 在线处理的功能

  •  1
     
  •   shuxge1223 · 27 天前 · 1528 次点击

    代码不是我写的,一个国外的老哥开源,提了需求不更新我就自己改了一下

    预览地址: https://beyondxuchao.github.io/shuxgecsv/

    基本功能就是解决本地不太好打开的 csv (超过 100 多万行)进行筛选,我自己用 ai 加了一下导出 json csv 和 xls 格式的功能,另外想新增一些 sql 语句的查询,表格的匹配导出等等对 csv 进行操作的功能,奈何本人 ai 对话能力有限。

    原开源项目: https://github.com/adeelibr/csv-query-parser

    有技术的大佬给加点功能吧,虽然这个也能用。

    11 条回复    2025-01-16 13:37:40 +08:00
    guanhui07
        1
    guanhui07  
       27 天前
    sql 语句查询 就要把 csv 数据导入到 mysql 等关系型数据库中 ,然后需要后端 java php nodejs 等语言 做接口 查询 搜索 匹配了吧,他这个是纯前端 解析 csv 文件 到 json 然后,搜索匹配 也用的 前端遍历去搜索 的吧
    vhysug01
        2
    vhysug01  
       27 天前 via iPhone
    csvkit ?
    shuxge1223
        3
    shuxge1223  
    OP
       27 天前
    @vhysug01 这东西主要还是写给小白用的,我本地搞多数还是用 python 来处理,还有就是用来验证 python 数据处理的准确性,毕竟打开 csv 是太费劲了。
    RockShake
        4
    RockShake  
       26 天前
    我一直在用 Rainbow CSV 支持 SQL 查询
    shuxge1223
        5
    shuxge1223  
    OP
       26 天前
    @RockShake 学习了
    moxuze
        6
    moxuze  
       25 天前
    用 nushell 得了
    shuxge1223
        7
    shuxge1223  
    OP
       25 天前
    @moxuze 感谢 我去学习学习
    hahaha121
        8
    hahaha121  
       25 天前
    DuckDB 可以试试
    greatghoul
        9
    greatghoul  
       3 天前
    挺赞的。
    shuxge1223
        10
    shuxge1223  
    OP
       3 天前
    @greatghoul 没想到还有人在关注,我优化了下就放弃了
    greatghoul
        11
    greatghoul  
       2 天前
    @shuxge1223 经常要处理 csv 数据,但是又不想打开 excel 这么笨重的东西,感觉这样轻量的工具很好用。

    如果能 csv 能生成分享地址就更好了,这样就可以把筛选的结果分享给朋友了。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2900 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 05:46 · PVG 13:46 · LAX 21:46 · JFK 00:46
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.