草庐IT

sample_dataframe

全部标签

python - 在 Pandas 中找到最接近给定时间的 DataFrame 行

我有一个由DatetimeIndex索引的Pandas数据框:DatetimeIndex:53732entries,1993-01-0712:23:58to2012-12-0220:06:23Datacolumns:Date(dd-mm-yy)_Time(hh-mm-ss)53732non-nullvaluesJulian_Day53732non-nullvaluesAOT_87053732non-nullvalues440-870Angstrom53732non-nullvalues440-675Angstrom53732non-nullvalues500-870Angstrom53

python - 按组规范化 DataFrame

假设我生成了一些数据,如下所示:N=20m=3data=np.random.normal(size=(N,m))+np.random.normal(size=(N,m))**3然后我创建一些分类变量:indx=np.random.randint(0,3,size=N).astype(np.int32)并生成一个DataFrame:importpandasaspddf=pd.DataFrame(np.hstack((data,indx[:,None])),columns=['a%s'%kforkinrange(m)]+['indx'])我可以获得每组的平均值:df.groubpy('in

python - 基于 Pandas 中的多个键合并两个DataFrame

pandas(或其他模块)是否有支持基于多个键合并(或连接)两个表的功能?例如,我有两个表(DataFrames)a和b:>>>aABvalue11123123421234222333>>>bABvalue2110.10120.20210.13220.33期望的结果是:ABvalue1value211230.1012340.202123420.13223330.33 最佳答案 要按多个键合并,只需将列表中的键传递给pd.merge即可。:>>>pd.merge(a,b,on=['A','B'])ABvalue1value201123

python - 对象 `astype(float)` 的 DataFrame 行为因列表或数组而异

我会先声明我一开始不会这样做,我在帮助friend时遇到了这个问题。考虑数据框dfdf=pd.DataFrame(pd.Series([[1.2]]))df00[1.2]这是对象的数据框,其中对象是列表。在我friend的代码中,他们有:df.astype(float)如我所愿,它坏了ValueError:settinganarrayelementwithasequence.但是,如果这些值是numpy数组:df=pd.DataFrame(pd.Series([np.array([1.2])]))df00[1.2]我也尝试过同样的事情:df.astype(float)001.2很高兴做

python - 从深度嵌套的 JSON 创建 Pandas DataFrame

我正在尝试从深度嵌套的JSON字符串创建单个PandasDataFrame对象。JSON模式是:{"intervals":[{pivots:"JaneSmith","series":[{"interval_id":0,"p_value":1},{"interval_id":1,"p_value":1.1162791357932633e-8},{"interval_id":2,"p_value":0.0000028675012051504467}],},{"pivots":"BobSmith","series":[{"interval_id":0,"p_value":1},{"inter

python - 从深度嵌套的 JSON 创建 Pandas DataFrame

我正在尝试从深度嵌套的JSON字符串创建单个PandasDataFrame对象。JSON模式是:{"intervals":[{pivots:"JaneSmith","series":[{"interval_id":0,"p_value":1},{"interval_id":1,"p_value":1.1162791357932633e-8},{"interval_id":2,"p_value":0.0000028675012051504467}],},{"pivots":"BobSmith","series":[{"interval_id":0,"p_value":1},{"inter

python - 在 pandas DataFrame 列中存储多维数组

我希望使用pandas作为主要的Trace(来自MCMC的参数空间中的一系列点)对象。我有一个string->array的字典列表,我想将其存储在pandas中。字典中的键总是相同的,对于每个键,numpy数组的形状总是相同的,但不同键的形状可能不同,并且可能具有不同的维数。我一直在使用self.append(dict_list,ignore_index=True)这似乎适用于1d值,但对于nd>1值pandas将值存储为不允许的对象用于漂亮的绘图和其他漂亮的东西。关于如何获得更好的行为有什么建议吗?示例数据point={'x':array(-0.47652306228698005),

python - 在 pandas DataFrame 列中存储多维数组

我希望使用pandas作为主要的Trace(来自MCMC的参数空间中的一系列点)对象。我有一个string->array的字典列表,我想将其存储在pandas中。字典中的键总是相同的,对于每个键,numpy数组的形状总是相同的,但不同键的形状可能不同,并且可能具有不同的维数。我一直在使用self.append(dict_list,ignore_index=True)这似乎适用于1d值,但对于nd>1值pandas将值存储为不允许的对象用于漂亮的绘图和其他漂亮的东西。关于如何获得更好的行为有什么建议吗?示例数据point={'x':array(-0.47652306228698005),

python - 将新列添加到 pandas DataFrame 时的 NaN 值

我正在尝试在pandasDataFrame中生成一个新列,该列等于另一个pandasDataFrame中的值。当我尝试创建新列时,我只得到新列值的NaN。首先,我使用API调用来获取一些数据,“mydata”DataFrame是按日期索引的一列数据mydata=Quandl.get(["YAHOO/INDEX_MXX.4"],trim_start="2001-04-01",trim_end="2014-03-31",collapse="monthly")我使用以下代码从CSV中获取的下一个DataFrame,它包含许多行数与“mydata”相同的数据列DWDATA=pandas.Dat

python - 将新列添加到 pandas DataFrame 时的 NaN 值

我正在尝试在pandasDataFrame中生成一个新列,该列等于另一个pandasDataFrame中的值。当我尝试创建新列时,我只得到新列值的NaN。首先,我使用API调用来获取一些数据,“mydata”DataFrame是按日期索引的一列数据mydata=Quandl.get(["YAHOO/INDEX_MXX.4"],trim_start="2001-04-01",trim_end="2014-03-31",collapse="monthly")我使用以下代码从CSV中获取的下一个DataFrame,它包含许多行数与“mydata”相同的数据列DWDATA=pandas.Dat