V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
wukongkong
V2EX  ›  Python

python 的数据存储和调用问题求解。

  •  
  •   wukongkong · 2016-03-30 07:02:46 +08:00 · 2791 次点击
    这是一个创建于 3153 天前的主题,其中的信息可能已经有所发展或是发生改变。
    写了一个爬虫,爬某地房产销售数据,用 xlwt 生成 excle 存储。
    现在想调用今天查询到的数据减去昨天的数据,得到当日的销售数据。
    这个用 python 好自动化么,现在都是手工在操作,比较繁琐。

    感觉这个用 excle 不是很方便,是不是用传说中的数据库?抱歉,技术渣渣,很多东西都不会。

    感谢大家指点。
    9 条回复    2016-03-30 15:14:14 +08:00
    virusdefender
        1
    virusdefender  
       2016-03-30 07:09:55 +08:00 via Android
    写数据库吧
    pimin
        2
    pimin  
       2016-03-30 07:20:11 +08:00 via Android   ❤️ 1
    数据不是很大的话,直接 sqlite3 存数据。
    因为日销售额其实是蛮常用的
    如果每次用到都计算一遍非常浪费时间和资源
    建议抓取的时候直接算好存库里,或者抓完之后单独写一个处理类似事物的模块
    wukongkong
        3
    wukongkong  
    OP
       2016-03-30 07:35:36 +08:00
    @pimin 感谢,数据库之前从未接触过。最多也就是 WordPress 接触过简单的数据库链接。数据库如果要学习的话有什么快速入门教程么。不求面面俱到,但求简单明了。
    xiamx
        4
    xiamx  
       2016-03-30 07:40:38 +08:00
    excel...
    wukongkong
        5
    wukongkong  
    OP
       2016-03-30 07:49:13 +08:00
    @xiamx :)
    之前是 excle 直接网站刷新数据,现在想一步步的自动化解决问题。
    longear
        6
    longear  
       2016-03-30 07:53:40 +08:00
    exsle
    pimin
        7
    pimin  
       2016-03-30 08:08:13 +08:00 via Android
    Kirscheis
        8
    Kirscheis  
       2016-03-30 10:47:51 +08:00 via Android
    楼主用的竟然是传说中的 excel 数据库。。。如果每天都要爬的话可以试试 PostgreSQL 和 MySQL 。 Python 自带 SQLite ,如果数据量小的话也可以试试。
    iam36
        9
    iam36  
       2016-03-30 15:14:14 +08:00
    用 excel 模块咯 ,这几天微软还推出了官方的模块
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2622 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 10:32 · PVG 18:32 · LAX 02:32 · JFK 05:32
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.