Tag: python

内存高效的内置SqlAlchemy迭代器/生成器？: 我有一个〜10MloggingMySQL表，我使用SqlAlchemy接口。我发现在这个表的大子集上查询会消耗太多的内存，即使我以为我使用了一个内置的生成器，可以智能地获取数据集的一小块数据块： for thing in session.query(Things): analyze(thing) 为了避免这种情况，我发现我必须构build自己的迭代器， lastThingID = None while True: things = query.filter(Thing.id < lastThingID).limit(querySize).all() if not rows or len(rows) == 0: break for thing in things: lastThingID = row.id analyze(thing) 这是正常的，还是有什么我错过有关SA内置发电机？这个问题的答案似乎表明，内存消耗是不可预料的。

我如何使用numpy.correlate做自相关？: 我需要做一组数字的自动关联，据我所知，它只是集合与自身的相关性。我试过用numpy的相关函数，但我不相信结果，因为它几乎总是给出一个向量，其中第一个数不是最大的，它应该是这样的。所以，这个问题真的是两个问题： numpy.correlate究竟是干什么的？我怎样才能使用它（或其他）做自相关？

将纪元时间转换为date时间: 我从其余的时间得到的回应是一个时代格式 start_time = 1234566 end_time = 1234578 我想在MySQL格式的时间转换那个纪元秒，以便我可以存储在我的MySQL数据库的差异。我试过了： >>> import time >>> time.gmtime(123456) time.struct_time(tm_year=1970, tm_mon=1, tm_mday=2, tm_hour=10, tm_min=17, tm_sec=36, tm_wday=4, tm_yday=2, tm_isdst=0) 以上结果不是我所期待的。我想要它像 2012-09-12 21:00:00 请build议我怎样才能做到这一点？另外，为什么我得到TypeError: a float is required的 >>> getbbb_class.end_time = 1347516459425 >>> mend = time.gmtime(getbbb_class.end_time).tm_hour Traceback (most recent call last): … TypeError: a float is required

我怎么可以用一个pandas数据框的列中的零来replace所有的NaN值: 我有一个数据框如下 itm Date Amount 67 420 2012-09-30 00:00:00 65211 68 421 2012-09-09 00:00:00 29424 69 421 2012-09-16 00:00:00 29877 70 421 2012-09-23 00:00:00 30990 71 421 2012-09-30 00:00:00 61303 72 485 2012-09-09 00:00:00 71781 73 485 2012-09-16 00:00:00 NaN 74 485 2012-09-23 00:00:00 11072 75 485 2012-09-30 00:00:00 113702 76 489 2012-09-09 00:00:00 64731 77 […]

如何重置pandas数据框中的索引？: 我有一个数据框从中删除了一些行。因此，我得到一个数据框，其索引是这样的： [1,5,6,10,11] ，我想重置它到[0,1,2,3,4] 。我该怎么做？添加以下似乎工作： df = df.reset_index() del df['index'] 以下不起作用： df = df.reindex()

pandasread_csv low_memory和dtype选项: 打电话时 df = pd.read_csv('somefile.csv') 我得到： /Users/josh/anaconda/envs/py27/lib/python2.7/site-packages/pandas/io/parsers.py:1130：DtypeWarning：列（4,5,7,16）有混合types。在导入时指定dtype选项或设置low_memory = False。为什么low_memory选项与low_memory有关，为什么会使这个问题low_memory呢？

在Linux中安装Pillow（Python模块）时失败: 我正在尝试使用pip来安装Pillow（Python模块），但是会引发这个错误： ValueError: jpeg is required unless explicitly disabled using –disable-jpeg, aborting 所以错误说，我试过： pip install pillow –global-option="–disable-jpeg" 但是它失败了： error: option –disable-jpeg not recognized 任何提示如何处理？

如何解决“ImportError：无法导入名称IncompleteRead”？: 当我尝试用pip或pip3安装任何东西时，我得到： $ sudo pip3 install python3-tk Traceback (most recent call last): File "/usr/bin/pip3", line 9, in <module> load_entry_point('pip==1.5.6', 'console_scripts', 'pip3')() File "/usr/lib/python3/dist-packages/pkg_resources.py", line 356, in load_entry_point return get_distribution(dist).load_entry_point(group, name) File "/usr/lib/python3/dist-packages/pkg_resources.py", line 2476, in load_entry_point return ep.load() File "/usr/lib/python3/dist-packages/pkg_resources.py", line 2190, in load ['__name__']) File "/usr/lib/python3/dist-packages/pip/__init__.py", line 61, in <module> from pip.vcs import git, mercurial, […]

关于如何在python中使用属性function的真实世界的例子？: 我感兴趣的是如何在Python中使用@property 。我读过python文档和那里的例子，在我看来，只是一个玩具代码： class C(object): def __init__(self): self._x = None @property def x(self): """I'm the 'x' property.""" return self._x @x.setter def x(self, value): self._x = value @x.deleter def x(self): del self._x 我不知道从包装属性装饰器的_x可以得到什么好处。为什么不只是实现为： class C(object): def __init__(self): self.x = None 我认为，在某些情况下，属性function可能会有用。但当？有人能给我一些真实的例子吗？谢谢。