我现在在做一个嵌入式数据库的开发项目。
由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。

我现在想知道上G的数据sqlite能否撑得住？
如果撑不住的话，mysql呢？

http://www.sqlite.org/
 Supports databases up to 2 tebibytes (241 bytes) in size.
实际应用看硬件和程序编写,G级的数据对数据库来说实在不算什么.


在07-3-24，马踏飞燕 <honeyday.mj在gmail.com> 写道：
>
> 我现在在做一个嵌入式数据库的开发项目。
> 由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
>
> 我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。
>
> 我现在想知道上G的数据sqlite能否撑得住？
> 如果撑不住的话，mysql呢？
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese
-------------- 下一部分 --------------
一个HTML附件被移除...
URL: http://python.cn/pipermail/python-chinese/attachments/20070324/67e0c9ff/attachment.html 

在 07-3-24，Hope<lanyig在gmail.com> 写道：
> http://www.sqlite.org/
> Supports databases up to 2 tebibytes (241 bytes) in size.
> 实际应用看硬件和程序编写,G级的数据对数据库来说实在不算什么.
>

这个我之前看到了，我担心的是pysqlite的性能。
像php之类的商业程序提供的sqlite的库可能会靠谱一些，但是py的不知道有没有人测试过性能呢？

CʵÏֵģ¬ÐÔÄܲ»³ÉÎÊÌâ¡£
phpÔõô³ÉÉÌÒµ³ÌÐòÁË¡£

ÔÚ07-3-24£¬Âí̤·ÉÑà <honeyday.mj在gmail.com> дµÀ£º
>
> ÔÚ 07-3-24£¬Hope<lanyig在gmail.com> дµÀ£º
> > http://www.sqlite.org/
> > Supports databases up to 2 tebibytes (241 bytes) in size.
> > ʵ¼ÊÓ¦Óÿ´Ó²¼þºÍ³ÌÐò±àд,G¼¶µÄÊý¾Ý¶ÔÊý¾Ý¿âÀ´ËµÊµÔÚ²»Ëãʲô.
> >
>
> Õâ¸öÎÒ֮ǰ¿´µ½ÁË£¬ÎÒµ£ÐĵÄÊÇpysqliteµÄÐÔÄÜ¡£
> ÏñphpÖ®ÀàµÄÉÌÒµ³ÌÐòÌṩµÄsqliteµÄ¿â¿ÉÄܻ῿Æ×һЩ£¬µ«ÊÇpyµÄ²»ÖªµÀÓÐûÓÐÈ˲âÊÔ¹ýÐÔÄÜÄØ£¿
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese




-- 
Regards,
kangkang
-------------- 下一部分 --------------
Ò»¸öHTML¸½¼þ±»ÒƳý...
URL: http://python.cn/pipermail/python-chinese/attachments/20070324/b0c65a97/attachment.html 

pythonÊDz»ÊDZ¾Éí´øÓÐsqliteµÄ£¿

On 3/24/07, kang kang <kanger在gmail.com> wrote:
>
> CʵÏֵģ¬ÐÔÄܲ»³ÉÎÊÌâ¡£
> phpÔõô³ÉÉÌÒµ³ÌÐòÁË¡£
>
> ÔÚ07-3-24£¬Âí̤·ÉÑà <honeyday.mj在gmail.com> дµÀ£º
> >
> > ÔÚ 07-3-24£¬Hope<lanyig在gmail.com> дµÀ£º
> > > http://www.sqlite.org/
> > > Supports databases up to 2 tebibytes (241 bytes) in size.
> > > ʵ¼ÊÓ¦Óÿ´Ó²¼þºÍ³ÌÐò±àд,G¼¶µÄÊý¾Ý¶ÔÊý¾Ý¿âÀ´ËµÊµÔÚ²»Ëãʲô.
> > >
> >
> > Õâ¸öÎÒ֮ǰ¿´µ½ÁË£¬ÎÒµ£ÐĵÄÊÇpysqliteµÄÐÔÄÜ¡£
> > ÏñphpÖ®ÀàµÄÉÌÒµ³ÌÐòÌṩµÄsqliteµÄ¿â¿ÉÄܻ῿Æ×һЩ£¬µ«ÊÇpyµÄ²»ÖªµÀÓÐûÓÐÈ˲âÊÔ¹ýÐÔÄÜÄØ£¿
> > _______________________________________________
> > python-chinese
> > Post: send python-chinese在lists.python.cn
> > Subscribe: send subscribe to python-chinese-request在lists.python.cn
> > Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> > Detail Info: http://python.cn/mailman/listinfo/python-chinese
>
>
>
>
> --
> Regards,
> kangkang
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese
>



-- 
×¢ÒâÉíÌ壬ÉíÌåÊǸïÃüµÄ±¾Ç®£¡£¡
-------------- 下一部分 --------------
Ò»¸öHTML¸½¼þ±»ÒƳý...
URL: http://python.cn/pipermail/python-chinese/attachments/20070324/056387fd/attachment.html 

sqlite由于没有实际经验，知道的不多，但是如果是mysql的话，那是完全没有问 
题的，我们公司现在运行的数据库系统中每天都会新产生、处理几十G 数据，
这些数据的处理完全在MySQL上面完成，当然这也得看硬件了，嵌入式对这些要求 
蛮高的，还有一个建议就是BDB，性能也是不错的，我们公司的搜索引擎，
中索引部分就是完全基于BDB的

马踏飞燕 写道:
> 我现在在做一个嵌入式数据库的开发项目。
> 由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
> 我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。
>
> 我现在想知道上G的数据sqlite能否撑得住？
> 如果撑不住的话，mysql呢？
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese

·Ö±ðÓùý1G¶àµãºÍ2G¶àµãµÄÊý¾Ý£¬´óÔ¼Ò»Äê°ëǰʱºò°É¡£
¸Ð¾õÖ»Óе¥Á¬½ÓÌí¼ÓÊý¾ÝµÄ»°£¬pysqlite ÐÔÄܲ»´í£¬¶àÁ¬½Óͬʱд¾ÍÐÔÄܲ»ºÃÁË¡£
mysql µ±È»ÔÚÈÝÁ¿ÉÏÓ¦¸Ã¸üûÓÐÎÊÌ⣬²»¹ý¶ÔÓÚÒ»Ìì200M²»µ½µÄÊý¾Ý£¬ÓÃmysql¿ÉÄܲ»Èçpysqlite¼òµ¥¡£
ÁíÍ⣬²»ÖªµÀphp...Õâ¸öÊÇÉÌÒµ³ÌÐòÁË£¿

On 3/24/07, Âí̤·ÉÑà <honeyday.mj在gmail.com> wrote:
>
> ÎÒÏÖÔÚÔÚ×öÒ»¸öǶÈëʽÊý¾Ý¿âµÄ¿ª·¢ÏîÄ¿¡£
> ÓÉÓÚÏÖÔÚÖ÷³ÌÐò¶¼ÓÃpythonÀ´¿ª·¢£¬½çÃæÓÃwxPython£¬¶øÊý¾Ý¿âµÄ·½Ãæ´òËã²ÉÓÃsqliteÀ´×ö¡£
>
> ÎÒÏëÎÊÒ»ÏÂsqliteµÄÈÝÁ¿Óжà´ó£¿ÒòΪÊý¾ÝÔö³¤µÄËٶȺܿ죬1¸öÐÇÆÚ¾ÍÓÐ1GµÄÈÝÁ¿£¬µ«ÊÇ¿ÉÒÔÿ¸öÐÇÆÚ¾­¹ýÊý¾ÝÇåÏ´ºóµ¼Èëµ½oracle½¨Á¢µÄÊý¾Ý²Ö¿âÖУ¬ËùÒÔ²»»áÒ»Ö±Ôö³¤ÏÂÈ¥µÄ¡£
>
> ÎÒÏÖÔÚÏëÖªµÀÉÏGµÄÊý¾ÝsqliteÄÜ·ñ³ÅµÃס£¿
> Èç¹û³Å²»×¡µÄ»°£¬mysqlÄØ£¿
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request在lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese
-------------- 下一部分 --------------
Ò»¸öHTML¸½¼þ±»ÒƳý...
URL: http://python.cn/pipermail/python-chinese/attachments/20070324/39083e40/attachment.html 

On 3/24/07, aldarion <erendisaldarion在gmail.com> wrote:
> 分别用过1G多点和2G多点的数据，大约一年半前时候吧。
> 感觉只有单连接添加数据的话，pysqlite 性能不错，多连接同时写就性能不好了。
> mysql 当然在容量上应该更没有问题，不过对于一天200M不到的数据，用mysql可能不如pysqlite简单。
嵌入式的对象DB 有专门产品的，
可以考虑 FireBird 的嵌入版本，
另外ZODB 也是可以独立使用的，

> 另外，不知道php...这个是商业程序了？
>
>
> On 3/24/07, 马踏飞燕 <honeyday.mj在gmail.com> wrote:
> > 我现在在做一个嵌入式数据库的开发项目。
> > 由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
> >
> 我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。
> >
> > 我现在想知道上G的数据sqlite能否撑得住？
> > 如果撑不住的话，mysql呢？
> > _______________________________________________
> > python-chinese
> > Post: send python-chinese在lists.python.cn
> > Subscribe: send subscribe to
> python-chinese-request在lists.python.cn
> > Unsubscribe: send unsubscribe to
> python-chinese-request在lists.python.cn
> > Detail Info:
> http://python.cn/mailman/listinfo/python-chinese
>
>
> _______________________________________________
> python-chinese
> Post: send python-chinese在lists.python.cn
> Subscribe: send subscribe to
> python-chinese-request在lists.python.cn
> Unsubscribe: send unsubscribe to
> python-chinese-request在lists.python.cn
> Detail Info:
> http://python.cn/mailman/listinfo/python-chinese
>


-- 
'''Time is unimportant, only life important!
http://zoomquiet.org
blog在http://blog.zoomquiet.org/pyblosxom/
wiki在http://wiki.woodpecker.org.cn/moin/ZoomQuiet
scrap在http://floss.zoomquiet.org
douban在http://www.douban.com/people/zoomq/
____________________________________
Pls. use OpenOffice.org to replace M$ Office.
     http://zh.openoffice.org
Pls. use 7-zip to replace WinRAR/WinZip.
     http://7-zip.org/zh-cn/
You can get the truely Freedom 4 software.
'''

以前看文档说，SQLite的地址空间可以支持到上TB，不过到了那个级别速度就难以忍受了。文档上推荐是不超过100MB的时候性能就已经很烂了。嵌入式应用可以考虑一下FireBird，反正是很不推荐使用网络数据库的。另外，如果你有兴趣，我会在一个月之内写一份BDB数据库的使用技巧，如果需求不是很多变的话，也是个不错的选择。

在 07-3-24，Zoom. Quiet<zoom.quiet at gmail.com> 写道：
> On 3/24/07, aldarion <erendisaldarion at gmail.com> wrote:
> > 分别用过1G多点和2G多点的数据，大约一年半前时候吧。
> > 感觉只有单连接添加数据的话，pysqlite 性能不错，多连接同时写就性能不好了。
> > mysql 当然在容量上应该更没有问题，不过对于一天200M不到的数据，用mysql可能不如pysqlite简单。
> 嵌入式的对象DB 有专门产品的，
> 可以考虑 FireBird 的嵌入版本，
> 另外ZODB 也是可以独立使用的，
>
> > 另外，不知道php...这个是商业程序了？
> >
> >
> > On 3/24/07, 马踏飞燕 <honeyday.mj at gmail.com> wrote:
> > > 我现在在做一个嵌入式数据库的开发项目。
> > > 由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
> > >
> >
> 我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。
> > >
> > > 我现在想知道上G的数据sqlite能否撑得住？
> > > 如果撑不住的话，mysql呢？
> > > _______________________________________________
> > > python-chinese
> > > Post: send python-chinese at lists.python.cn
> > > Subscribe: send subscribe to
> > python-chinese-request at lists.python.cn
> > > Unsubscribe: send unsubscribe to
> > python-chinese-request at lists.python.cn
> > > Detail Info:
> > http://python.cn/mailman/listinfo/python-chinese
> >
> >
> > _______________________________________________
> > python-chinese
> > Post: send python-chinese at lists.python.cn
> > Subscribe: send subscribe to
> > python-chinese-request at lists.python.cn
> > Unsubscribe: send unsubscribe to
> > python-chinese-request at lists.python.cn
> > Detail Info:
> > http://python.cn/mailman/listinfo/python-chinese
> >
>
>
> --
> '''Time is unimportant, only life important!
> http://zoomquiet.org
> blog at http://blog.zoomquiet.org/pyblosxom/
> wiki at http://wiki.woodpecker.org.cn/moin/ZoomQuiet
> scrap at http://floss.zoomquiet.org
> douban at http://www.douban.com/people/zoomq/
> ____________________________________
> Pls. use OpenOffice.org to replace M$ Office.
>      http://zh.openoffice.org
> Pls. use 7-zip to replace WinRAR/WinZip.
>      http://7-zip.org/zh-cn/
> You can get the truely Freedom 4 software.
> '''
> _______________________________________________
> python-chinese
> Post: send python-chinese at lists.python.cn
> Subscribe: send subscribe to python-chinese-request at lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request at lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese


-- 
从前有一只很冷的毛毛虫，他想获得一点温暖。而获得温暖的机会只有从树上掉下来，落进别人的领口。
片刻的温暖，之后便失去生命。而很多同类却连这片刻的温暖都没有得到就..
我会得到温暖么？小心翼翼的尝试，却还是会受到伤害。
我愿为那一刻的温暖去拼，可是谁愿意接受?

欢迎访问偶的博客：
http://blog.csdn.net/gashero

强啊. ...

说句惭愧的话, 偶们的ERP用MSSQL, 才几个G数据, 速度就慢得不得了了....(当然和硬件配置有关, 不过更重要的是应用设计...)

汗啊.
在07-3-25，gashero <harry.python at gmail.com> 写道：
>
>
> 以前看文档说，SQLite的地址空间可以支持到上TB，不过到了那个级别速度就难以忍受了。文档上推荐是不超过100MB的时候性能就已经很烂了。嵌入式应用可以考虑一下FireBird，反正是很不推荐使用网络数据库的。另外，如果你有兴趣，我会在一个月之内写一份BDB数据库的使用技巧，如果需求不是很多变的话，也是个不错的选择。
>
> 在 07-3-24，Zoom. Quiet<zoom.quiet at gmail.com> 写道：
> > On 3/24/07, aldarion <erendisaldarion at gmail.com> wrote:
> > > 分别用过1G多点和2G多点的数据，大约一年半前时候吧。
> > > 感觉只有单连接添加数据的话，pysqlite 性能不错，多连接同时写就性能不好了。
> > > mysql 当然在容量上应该更没有问题，不过对于一天200M不到的数据，用mysql可能不如pysqlite简单。
> > 嵌入式的对象DB 有专门产品的，
> > 可以考虑 FireBird 的嵌入版本，
> > 另外ZODB 也是可以独立使用的，
> >
> > > 另外，不知道php...这个是商业程序了？
> > >
> > >
> > > On 3/24/07, 马踏飞燕 <honeyday.mj at gmail.com> wrote:
> > > > 我现在在做一个嵌入式数据库的开发项目。
> > > > 由于现在主程序都用python来开发，界面用wxPython，而数据库的方面打算采用sqlite来做。
> > > >
> > >
> >
> 我想问一下sqlite的容量有多大？因为数据增长的速度很快，1个星期就有1G的容量，但是可以每个星期经过数据清洗后导入到oracle建立的数据仓库中，所以不会一直增长下去的。
> > > >
> > > > 我现在想知道上G的数据sqlite能否撑得住？
> > > > 如果撑不住的话，mysql呢？
> > > > _______________________________________________
> > > > python-chinese
> > > > Post: send python-chinese at lists.python.cn
> > > > Subscribe: send subscribe to
> > > python-chinese-request at lists.python.cn
> > > > Unsubscribe: send unsubscribe to
> > > python-chinese-request at lists.python.cn
> > > > Detail Info:
> > > http://python.cn/mailman/listinfo/python-chinese
> > >
> > >
> > > _______________________________________________
> > > python-chinese
> > > Post: send python-chinese at lists.python.cn
> > > Subscribe: send subscribe to
> > > python-chinese-request at lists.python.cn
> > > Unsubscribe: send unsubscribe to
> > > python-chinese-request at lists.python.cn
> > > Detail Info:
> > > http://python.cn/mailman/listinfo/python-chinese
> > >
> >
> >
> > --
> > '''Time is unimportant, only life important!
> > http://zoomquiet.org
> > blog at http://blog.zoomquiet.org/pyblosxom/
> > wiki at http://wiki.woodpecker.org.cn/moin/ZoomQuiet
> > scrap at http://floss.zoomquiet.org
> > douban at http://www.douban.com/people/zoomq/
> > ____________________________________
> > Pls. use OpenOffice.org to replace M$ Office.
> >      http://zh.openoffice.org
> > Pls. use 7-zip to replace WinRAR/WinZip.
> >      http://7-zip.org/zh-cn/
> > You can get the truely Freedom 4 software.
> > '''
> > _______________________________________________
> > python-chinese
> > Post: send python-chinese at lists.python.cn
> > Subscribe: send subscribe to python-chinese-request at lists.python.cn
> > Unsubscribe: send unsubscribe to  python-chinese-request at lists.python.cn
> > Detail Info: http://python.cn/mailman/listinfo/python-chinese
>
>
> --
> 从前有一只很冷的毛毛虫，他想获得一点温暖。而获得温暖的机会只有从树上掉下来，落进别人的领口。
> 片刻的温暖，之后便失去生命。而很多同类却连这片刻的温暖都没有得到就..
> 我会得到温暖么？小心翼翼的尝试，却还是会受到伤害。
> 我愿为那一刻的温暖去拼，可是谁愿意接受?
>
> 欢迎访问偶的博客：
> http://blog.csdn.net/gashero
> _______________________________________________
> python-chinese
> Post: send python-chinese at lists.python.cn
> Subscribe: send subscribe to python-chinese-request at lists.python.cn
> Unsubscribe: send unsubscribe to  python-chinese-request at lists.python.cn
> Detail Info: http://python.cn/mailman/listinfo/python-chinese




-- 
只要人间真情在, 何必在意路泥泞
时风日下,和谐需要靠暴力达到!!!
-------------- next part --------------
An HTML attachment was scrubbed...
URL: http://python.cn/pipermail/python-chinese/attachments/20070326/f825bda7/attachment.html