首页
学习
活动
专区
圈层
工具
发布
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Python实现将Excel表格按某列拆分为多个sheet

    实际数据分析中遇到需求,把某个Excel表格按照某一列分为多个sheet,并且要求如果某个key对应的行数较少应该合并到一个sheet中。...import pandas as pd import bioquest as bq # https://jihulab.com/BioQuest/bioquest 从网上找随便了个数据做演示用 input_file...E9%99%A22018%E5%B9%B4%E9%94%80%E5%94%AE%E6%95%B0%E6%8D%AE.xlsx" output_file=r"朝阳医院.xlsx" key='商品名称' 读如数据...,删除商品名称为na的行 data = pd.read_excel(input_file) data.dropna(subset=key,inplace=True) 替换/为每,删除特殊字符(因为不能作为...:/\[\]]",repl="") 如果某个key对应的行数少于50则合并在合并的药物这个sheet中,其他的key单独存在对应的sheet中 keys=data.loc[:,key].unique()

    90910

    【R语言】数据框按两列排序

    我相信大家经常会使用Excel对数据进行排序。有时候我们会按照两个条件来对数据排序。假设我们手上有下面这套数据,9个人,第二列(score)为他们的考试成绩,第三列(code)为对应的评级。...主要用的是R中的order这个函数。...#读入文件,data.txt中存放的数据为以上表格中展示的数据 file=read.table(file="data.txt",header=T,sep="\t") #先按照code升序,再按照Score...,只需要前面加个负号就可以了 View(file[order(file$Code,-file$Score),]) 下面是按照code升序,然后再按score降序排列的结果,是不是跟Excel处理的结果一样...在R里面我们还可以指定code按照一定的顺序来排列 #按照指定的因子顺序排序,先good,在excellent,最后poor file$Code <- factor(file$Code , levels

    3.1K20

    Python按要求提取多个txt文本的数据

    本文介绍基于Python语言,遍历文件夹并从中找到文件名称符合我们需求的多个.txt格式文本文件,并从上述每一个文本文件中,找到我们需要的指定数据,最后得到所有文本文件中我们需要的数据的合集的方法。...我们希望,基于第1列(红色框内所示的列)数据(这一列数据表示波长),找到几个指定波长数据所对应的行,并将这些行所对应的后5列数据都保存下来。   ...此外,前面也提到,文件名中含有Point字段的文本文件是有多个的;因此希望将所有文本文件中,符合要求的数据行都保存在一个变量,且保存的时候也将文件名称保存下来,从而知道保存的每一行数据,具体是来自于哪一个文件...接下来,在我们已经提取出来的数据中,从第二行开始,提取每一行从第三列到最后一列的数据,将其展平为一维数组,从而方便接下来将其放在原本第一行的后面(右侧)。...然后,我们使用pd.DataFrame()函数将展平的数组转换为DataFrame对象;紧接着,我们使用pd.concat()函数将原本的第一行数据,和展平后的数据按列合并(也就是放在了第一行的右侧),

    89310

    pandas按行按列遍历Dataframe的几种方式

    遍历数据有以下三种方法: 简单对上面三种方法进行说明: iterrows(): 按行遍历,将DataFrame的每一行迭代为(index, Series)对,可以通过row[name]对元素进行访问。...itertuples(): 按行遍历,将DataFrame的每一行迭代为元祖,可以通过row[name]对元素进行访问,比iterrows()效率高。...iteritems():按列遍历,将DataFrame的每一列迭代为(列名, Series)对,可以通过row[index]对元素进行访问。...示例数据 import pandas as pd inp = [{‘c1’:10, ‘c2’:100}, {‘c1’:11, ‘c2’:110}, {‘c1’:12, ‘c2’:123}] df =...print(getattr(row, ‘c1’), getattr(row, ‘c2’)) # 输出每一行 1 2 按列遍历iteritems(): for index, row in df.iteritems

    9.1K20

    Python按要求提取多个txt文本的数据

    本文介绍基于Python语言,遍历文件夹并从中找到文件名称符合我们需求的多个.txt格式文本文件,并从上述每一个文本文件中,找到我们需要的指定数据,最后得到所有文本文件中我们需要的数据的合集的方法。...我们希望,基于第1列(红色框内所示的列)数据(这一列数据表示波长),找到几个指定波长数据所对应的行,并将这些行所对应的后5列数据都保存下来。   ...此外,前面也提到,文件名中含有Point字段的文本文件是有多个的;因此希望将所有文本文件中,符合要求的数据行都保存在一个变量,且保存的时候也将文件名称保存下来,从而知道保存的每一行数据,具体是来自于哪一个文件...接下来,在我们已经提取出来的数据中,从第二行开始,提取每一行从第三列到最后一列的数据,将其展平为一维数组,从而方便接下来将其放在原本第一行的后面(右侧)。...然后,我们使用pd.DataFrame()函数将展平的数组转换为DataFrame对象;紧接着,我们使用pd.concat()函数将原本的第一行数据,和展平后的数据按列合并(也就是放在了第一行的右侧),

    79610

    1.13 PowerBI数据准备-添加列,按示例添加列,体验智能快感

    如果对PowerQuery的M语言还不熟悉,添加列的时候可以先尝试按示例添加列;即便已经很熟悉M语言了,也可以偷个懒,用按示例添加列可以省去敲繁琐的代码。...不写代码,输入示例,让计算机理解你的意思,跟你确认,确认的话,点个确定就大功告成了。微软硬生生地翻译为“示例中的列”,实际上翻译成“按示例添加列”更恰当。...操作步骤STEP 1 点击菜单栏添加列下的示例中的列,选从所有列或从所选内容,让计算机按照所有列/所选列去理解你的意思,通常选后者,更容易让计算机找到规律。...STEP 2 在具有代表性的行输入对应的你想要的结果,计算机会在上方询问你的意思,如果它的理解准确,点击确定。举例按示例添加列可以实现很多需求,挑选几个举例如下:1 条件判断,按指定条件返回相应的值。...举例1:按值赋值蔬菜后面输入1,水果后面输入2,返回结果,如下:举例2:数字分组67后面输入60-69,36后面输入30-39,返回结果,如下:2 内容修整,引用特定列,包括修整、清理和大小写转换。

    55000

    数据结构 || 二维数组按行存储和按列存储

    问题描述: 设有数组A[n,m],数组的每个元素长度为3字节,n的值为1~8,m的值为1~10,数组从内存收地址BA开始顺序存放,请分别用列存储方式和行存储方式求A[5,8]的存储首地址为多少。...解题说明: (1)为什么要引入以列序为主序和以行序为主序的存储方式?...因为一般情况下存储单元是单一的存储结构,而数组可能是多维的结构,则用一维数组存储数组的数据元素就存在着次序约定的问题,所以就有了以列序为主序和以行序为主序的存储方式。...)是a(0,0)的存储位置(即二维数组的起始存储位置,为称为基地址或基址);m是数组的总行数,L是单个数据元素占据的存储单元。...)是a(0,0)的存储位置(即二维数组的起始存储位置,为称为基地址或基址);n是数组的总列数,L是单个数据元素占据的存储单元。

    5.7K20

    Excel公式技巧67:按条件将数据分组标识

    学习Excel技术,关注微信公众号: excelperfect 如下图1所示的工作表,我们想使用数字将数据分成几组,其标准是:第1次出现笔记本且在区域A至第2次出现笔记本且在区域A之间的数据为第1组,标识为...1;第2次出现笔记本且在区域A至第3次出现笔记本且在区域A之间的数据为第2组,标识为2,依此类推。...公式中: AND(B3:B20=G3,C3:C20=H3) 判断是否同时满足列B中的数值等于单元格G3中的值且列C中的数值等于单元格H3中的值。如果满足则返回TRUE,否则返回FALSE。...在上图1所示的工作表中,单元格E3和E4返回的结果都为0,在单元格E5中,由于满足条件,因此AND函数返回TRUE(1),将其与上方单元格E4中的值相加,得到结果1。...小结:本文所讲述的技巧可用于构造辅助列,从而方便实现重复数据的查找。 欢迎在下面留言,完善本文内容,让更多的人学到更完美的知识。

    4.1K30

    按照A列进行分组并计算出B列每个分组的平均值,然后对B列内的每个元素减去分组平均值

    一、前言 前几天在Python星耀交流群有个叫【在下不才】的粉丝问了一个Pandas的问题,按照A列进行分组并计算出B列每个分组的平均值,然后对B列内的每个元素减去分组平均值,这里拿出来给大家分享下,一起学习..."num"列每个分组的平均值,然后"num"列内的每个元素减去分组平均值 df["juncha"] = df.groupby("lv")["num"].transform(demean) print(df...df.merge(gp_mean) df2["juncha"] = df2["num"] - df2["gp_mean"] print(df2) 方法三:使用 transform transform能返回完整数据...,输出的形状和输入一致(输入是num列,输出也是一列),代码如下: import pandas as pd lv = [1, 2, 2, 3, 3, 4, 2, 3, 3, 3, 3] num = [...这篇文章主要分享了Pandas处理相关知识,基于粉丝提出的按照A列进行分组并计算出B列每个分组的平均值,然后对B列内的每个元素减去分组平均值的问题,给出了3个行之有效的方法,帮助粉丝顺利解决了问题。

    4.2K20

    分组后合并分组列中的字符串如何操作?

    一、前言 前几天在Python最强王者交流群【IF】问了一个Pandas的问题,如图所示。...下面是他的原始数据: 序号 需求 处理人 1 优化 A 2 优化 B 3 运维 A 4 运维 C 5 需求 B 6 优化 C 7 运维 B 8 运维 C 9 需求 C 10 运维 C 11 需求 B...如果不去重,就不用unique,完美地解决粉丝的问题! 后来他自己参考月神的文章,拯救pandas计划(17)——对各分类的含重复记录的字符串列的去重拼接,也写出来了,如图所示。...这篇文章主要盘点了一个pandas的基础问题,文中针对该问题给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。...最后感谢粉丝【IF】提问,感谢【月神】、【瑜亮老师】给出的思路和代码解析,感谢【dcpeng】等人参与学习交流。

    4.4K10

    Excel按某一列数据从另一列找到对应字段的数值

    本文介绍在Excel中,从某一列数据中找到与已知数据对应的字段,并提取这个字段对应数值的方法。   首先,来明确一下我们的需求。...现在已知一个Excel数据,假设其中W列包含了上海市全部社区的名称,而其后的Y列则是这些社区对应的面积;随后,Z列是另一批社区的名称,其中既有上海市的社区(也就是在W列中的数据),也可能会有其他城市的社区...我们希望,基于前面的W列与Y列,分别提取Z列社区对应的面积,存放在AA列里。如下图所示。   明确了需求,我们就可以通过Excel的公式来实现这一需求。...需求的实现也是很简单的,我们只需要在AA列中第一个数据行中,输入如下的公式即可。 =VLOOKUP(Z2,$W$2:$Y$53,3,FALSE)   其中,VLOOKUP是Excel中的查询函数。...此外,在列号字母和行号数字前,一定要加   随后,3表示在用来【寻找社区面积】的那一堆数据里,社区面积排在第几列。

    2.1K10

    seaborn可视化数据框中的多个列元素

    seaborn提供了一个快速展示数据库中列元素分布和相互关系的函数,即pairplot函数,该函数会自动选取数据框中值为数字的列元素,通过方阵的形式展现其分布和关系,其中对角线用于展示各个列元素的分布情况...函数自动选了数据框中的3列元素进行可视化,对角线上,以直方图的形式展示每列元素的分布,而关于对角线堆成的上,下半角则用于可视化两列之间的关系,默认的可视化形式是散点图,该函数常用的参数有以下几个 ###...#### 3、 x_vars和y_vars 默认情况下,程序会对数据框中所有的数值列进行可视化,通过x_vars和y_vars可以用列名称来指定我们需要可视化的列,用法如下 >>> sns.pairplot...#### 4. hue hue参数用于分组变量的颜色映射,用法如下 >>> sns.pairplot(df, hue='species') >>> plt.show() 输出结果如下 ?...通过pairpplot函数,可以同时展示数据框中的多个数值型列元素的关系,在快速探究一组数据的分布时,非常的好用。

    7K31

    2.37 PowerBI数据建模-按列排序的副作用,ALL失效了

    使用ALL函数来计算占比,明明公式正确,返回的百分比却都是100%,百思不得其解,这是软件的Bug吗? 举例基于下表,计算每个班级的人数占比。...班级人数'[人数])总人数_Wrong = CALCULATE([人数],ALL('班级人数'[班级]))班级人数占比_Wrong = DIVIDE([人数],[总人数])异常结果如下:解决方案班级这一列使用了按列排序...,把班级字段拖入报表中的时候,实际上还拖入了一个看不到的班级排序字段,这样才能实现排序的效果。...这种情况下,ALL函数只用了一个字段,并没有彻底清除筛选,所以分母的总人数返回的还是每个班级的人数。把字段和排序字段都放到ALL的参数中,就会返回正确的结果。...本例把ALL的参数调整为班级和用于排序的班级排序字段,如下:总人数 = CALCULATE([人数],ALL('班级人数'[班级],'班级人数'[班级排序]))拓展按列排序还会有其他的副作用,比如判断某个被排序的字段是否被筛选

    30200

    使用Pandas完成data列数据处理,按照数据列中元素出现的先后顺序进行分组排列

    一、前言 前几天在Python钻石交流群【瑜亮老师】给大家出了一道Pandas数据处理题目,使用Pandas完成下面的数据操作:把data列中的元素,按照它们出现的先后顺序进行分组排列,结果如new列中展示...new列为data列分组排序后的结果 print(df) 结果如下图所示: 二、实现过程 方法一 这里【猫药师Kelly】给出了一个解答,代码和结果如下图所示。...(*([k]*v for k, v in Counter(df['data']).items()))] print(df) 运行之后,结果如下图所示: 方法四 这里【月神】给出了三个方法,下面展示的这个方法和上面两个方法的思路是一样的...这篇文章主要盘点了使用Pandas完成data列数据处理,按照数据列中元素出现的先后顺序进行分组排列的问题,文中针对该问题给出了具体的解析和代码演示,一共6个方法,欢迎一起学习交流,我相信还有其他方法,...【月神】和【瑜亮老师】太强了,这个里边东西还是很多的,可以学习很多。

    3K10

    这个数据向上填充的时候 有没有办法按设置不在这个分组就不按填充?

    一、前言 前几天在Python最强王者交流群【哎呦喂 是豆子~】问了一个pandas数据提取的问题,一起来看看吧。 大佬们请问下这个数据向上填充的时候 有没有办法按设置不在这个分组就不按填充?...她还提供了自己的原始数据。...二、实现过程 这里【隔壁山楂】给了一个思路:使用groupby填充,sort参数设置成False,得到的结果如下所示: 不过对于这个结果,粉丝还是不太满意的,但是实际上根据要求来的话,确实结果就该如此...顺利地解决了粉丝的问题。 三、总结 大家好,我是皮皮。这篇文章主要盘点了一个Pandas数据处理的问题,文中针对该问题,给出了具体的解析和代码实现,帮助粉丝顺利解决了问题。

    63430
    领券