我怀疑许多处理时间序列数据的人已经遇到过这个问题,而 pandas 似乎没有提供直接的解决方案(还!):
假设:
所以对于 M freq,最后一根柱线是 19MAY-18JUN,前一根柱线是 19APR-18MAY,依此类推...
ts.resample('M', how='ohlc')
将进行重采样,但“M”是“end_of_month”期间,因此结果将给出 2014-05 的完整月份和 2014-06 的 2 周时间段,因此你的最后一个条形不会是 '每月酒吧'。这不是我们想要的!
使用 2M 频率,给定我的样本时间序列,我的测试给出了标记为 2014-07-31 的最后一个柱(以及之前标记为 2014-05-31),这是非常误导的,因为有不是 7 月的数据……假定的最后 2 个月柱再次仅涵盖最近 2 周。
正确的 DatetimeIndex 很容易创建:
pandas.date_range(end='2014-06-18', freq='2M', periods=300) + datetime.timedelta(days=18)
(Pandas 文档更喜欢通过
pandas.date_range(end='2014-06-18', freq='2M', periods=300) + pandas.tseries.offsets.DateOffset(days=18)
但我的测试表明,这种方法虽然更“pandaïc”但慢了 2 倍!)
无论哪种方式,我们都无法将正确的 DatetimeIndex 应用于 ts.resample()。
pandas 开发团队 (Date ranges in Pandas) 似乎意识到了这个问题,但与此同时,您如何解决它才能使 OHLC 的滚动频率锚定在时间序列的最后一天?
最佳答案
这基本上是通过复制/粘贴拼凑而成,我敢肯定在某些情况下会失败 - 但下面是一些用于锚定到一个月中特定日期的自定义 Offset 的起始代码。
from pandas.tseries.offsets import (as_datetime, as_timestamp, apply_nat,
DateOffset, relativedelta, datetime)
class MonthAnchor(DateOffset):
"""DateOffset Anchored to day in month
Arguments:
day_anchor: day to be anchored to
"""
def __init__(self, n=1, **kwds):
super(MonthAnchor, self).__init__(n)
self.kwds = kwds
self._dayanchor = self.kwds['day_anchor']
@apply_nat
def apply(self, other):
n = self.n
if other.day > self._dayanchor and n <= 0: # then roll forward if n<=0
n += 1
elif other.day < self._dayanchor and n > 0:
n -= 1
other = as_datetime(other) + relativedelta(months=n)
other = datetime(other.year, other.month, self._dayanchor)
return as_timestamp(other)
def onOffset(self, dt):
return dt.day == self._dayanchor
_prefix = ''
示例用法:
In [28]: df = pd.DataFrame(data=np.linspace(50, 100, 200), index=pd.date_range(end='2014-06-18', periods=200), columns=['value'])
In [29]: df.head()
Out[29]:
value
2013-12-01 50.000000
2013-12-02 50.251256
2013-12-03 50.502513
2013-12-04 50.753769
2013-12-05 51.005025
In [61]: month_offset = MonthAnchor(day_anchor = df.index[-1].day + 1)
In [62]: df.resample(month_offset, how='ohlc')
Out[62]:
value
open high low close
2013-11-19 50.000000 54.271357 50.000000 54.271357
2013-12-19 54.522613 62.060302 54.522613 62.060302
2014-01-19 62.311558 69.849246 62.311558 69.849246
2014-02-19 70.100503 76.884422 70.100503 76.884422
2014-03-19 77.135678 84.673367 77.135678 84.673367
2014-04-19 84.924623 92.211055 84.924623 92.211055
2014-05-19 92.462312 100.000000 92.462312 100.000000
关于python - Pandas 时间序列重新采样结束给定的一天,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/24304019/
关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。
鉴于我有以下迁移:Sequel.migrationdoupdoalter_table:usersdoadd_column:is_admin,:default=>falseend#SequelrunsaDESCRIBEtablestatement,whenthemodelisloaded.#Atthispoint,itdoesnotknowthatusershaveais_adminflag.#Soitfails.@user=User.find(:email=>"admin@fancy-startup.example")@user.is_admin=true@user.save!ende
我正在使用active_admin,我在Rails3应用程序的应用程序中有一个目录管理,其中包含模型和页面的声明。时不时地我也有一个类,当那个类有一个常量时,就像这样:classFooBAR="bar"end然后,我在每个必须在我的Rails应用程序中重新加载一些代码的请求中收到此警告:/Users/pupeno/helloworld/app/admin/billing.rb:12:warning:alreadyinitializedconstantBAR知道发生了什么以及如何避免这些警告吗? 最佳答案 在纯Ruby中:classA
我需要检查DateTime是否采用有效的ISO8601格式。喜欢:#iso8601?我检查了ruby是否有特定方法,但没有找到。目前我正在使用date.iso8601==date来检查这个。有什么好的方法吗?编辑解释我的环境,并改变问题的范围。因此,我的项目将使用jsapiFullCalendar,这就是我需要iso8601字符串格式的原因。我想知道更好或正确的方法是什么,以正确的格式将日期保存在数据库中,或者让ActiveRecord完成它们的工作并在我需要时间信息时对其进行操作。 最佳答案 我不太明白你的问题。我假设您想检查
这个问题在这里已经有了答案:Railsformattingdate(4个答案)关闭4年前。我想格式化Time.Now函数以显示YYYY-MM-DDHH:MM:SS而不是:“2018-03-0909:47:19+0000”该函数需要放在时间中.现在功能。require‘roo’require‘roo-xls’require‘byebug’file_name=ARGV.first||“Template.xlsx”excel_file=Roo::Spreadsheet.open(“./#{file_name}“,extension::xlsx)xml=Nokogiri::XML::Build
我正在尝试解析一个CSV文件并使用SQL命令自动为其创建一个表。CSV中的第一行给出了列标题。但我需要推断每个列的类型。Ruby中是否有任何函数可以找到每个字段中内容的类型。例如,CSV行:"12012","Test","1233.22","12:21:22","10/10/2009"应该产生像这样的类型['integer','string','float','time','date']谢谢! 最佳答案 require'time'defto_something(str)if(num=Integer(str)rescueFloat(s
我早就知道Ruby中的“常量”(即大写的变量名)不是真正常量。与其他编程语言一样,对对象的引用是唯一存储在变量/常量中的东西。(侧边栏:Ruby确实具有“卡住”引用对象不被修改的功能,据我所知,许多其他语言都没有提供这种功能。)所以这是我的问题:当您将一个值重新分配给常量时,您会收到如下警告:>>FOO='bar'=>"bar">>FOO='baz'(irb):2:warning:alreadyinitializedconstantFOO=>"baz"有没有办法强制Ruby抛出异常而不是打印警告?很难弄清楚为什么有时会发生重新分配。 最佳答案
给定一个复杂的对象层次结构,幸运的是它不包含循环引用,我如何实现支持各种格式的序列化?我不是来讨论实际实现的。相反,我正在寻找可能会派上用场的设计模式提示。更准确地说:我正在使用Ruby,我想解析XML和JSON数据以构建复杂的对象层次结构。此外,应该可以将该层次结构序列化为JSON、XML和可能的HTML。我可以为此使用Builder模式吗?在任何提到的情况下,我都有某种结构化数据-无论是在内存中还是文本中-我想用它来构建其他东西。我认为将序列化逻辑与实际业务逻辑分开会很好,这样我以后就可以轻松支持多种XML格式。 最佳答案 我最
这个问题在这里已经有了答案:关闭10年前。PossibleDuplicate:Pythonconditionalassignmentoperator对于这样一个简单的问题表示歉意,但是谷歌搜索||=并不是很有帮助;)Python中是否有与Ruby和Perl中的||=语句等效的语句?例如:foo="hey"foo||="what"#assignfooifit'sundefined#fooisstill"hey"bar||="yeah"#baris"yeah"另外,类似这样的东西的通用术语是什么?条件分配是我的第一个猜测,但Wikipediapage跟我想的不太一样。
什么是ruby的rack或python的Java的wsgi?还有一个路由库。 最佳答案 来自Python标准PEP333:Bycontrast,althoughJavahasjustasmanywebapplicationframeworksavailable,Java's"servlet"APImakesitpossibleforapplicationswrittenwithanyJavawebapplicationframeworktoruninanywebserverthatsupportstheservletAPI.ht