首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    【Python】基于多列组合删除数据框中的重复值

    最近公司在做关联图谱的项目,想挖掘团伙犯罪。在准备关系数据时需要根据两列组合删除数据框中的重复值,两列中元素的顺序可能是相反的。...本文介绍一句语句解决多列组合删除数据框中重复值的问题。 一、举一个小例子 在Python中有一个包含3列的数据框,希望根据列name1和name2组合(在两行中顺序不一样)消除重复项。...import numpy as np #导入数据处理的库 os.chdir('F:/微信公众号/Python/26.基于多列组合删除数据框中的重复值') #把路径改为数据存放的路径 df =...从上图可以看出用set替换frozense会报不可哈希的错误。 三、把代码推广到多列 解决多列组合删除数据框中重复值的问题,只要把代码中取两列的代码变成多列即可。...numpy as np #导入数据处理的库 os.chdir('F:/微信公众号/Python/26.基于多列组合删除数据框中的重复值') #把路径改为数据存放的路径 name = pd.read_csv

    14.7K30

    Excel公式练习32: 将包含空单元格的多行多列单元格区域转换成单独的列并去掉空单元格

    本次的练习是:如下图1所示,单元格区域A1:D6中是一系列数据,其中包含空单元格,现在要将它们放置到一列中,并删除空单元格,如图中所示的单元格区域G1:G13,如何使用公式实现? ?...因此,如果结果大于单元格F1中的值,则公式结果为空,否则执行IF语句的第2部分。...这个结果传递给INDIRECT函数: INDIRECT(“R1C00004”,0) 结果将取出第1行第4列中的值,即单元格D4中的值。 为什么选用10^5,并且使用R0C00000作为格式字符串呢?...使用足够大的数值,主要是为了考虑行和列扩展后能够准确地取出相应行列所在单元格的数据。 注意到,在TEXT函数中,先填充C之后的五个零,剩下的在填充R之后的部分。...这个公式的缺点是,当下拉很多行时,如果有许多行都为空,则仍会进行很多的计算,占有资源,不会像前面给出的公式,第一个IF判断为大于非空单元格值后,直接输入空值。有兴趣的朋友可以仔细研究。

    2.4K10

    把表中的所有错误自动替换为空?这样做就算列数变了也不怕!

    小勤:怎么把表里面的错误都替换成为空值? 大海:Power Query里选中全表,替换错误值啊! 小勤:这个我知道啊。但是这个表的列是动态的,下次多了一列这个方法就不行了,又得重新搞一遍。...大海:我们先来看一下这个生成的公式: 其中,导致增加或减少列之后不能动态更新的问题主要在于生成了固定列名对应的替换值,如上图红框所示。 小勤:对的,如果这部分内容能变成动态的就好了。...大海:首先,我们要得到表的所有列的列名,可以用函数Table.ColumnNames,如下图所示: 小勤:嗯,这个函数也简单。但是,怎么再给每个列名多带一个空值呢?...比如,我们还可以再构造一个列表,里面每一个元素都是空值,列名有多少个值,我们就重复多少个空值,如下所示: 小勤:理解了,就是给一个初始列表,然后按表的列数(Table.ColumnCount)进行重复...而且,其他生成固定列参数的公式也可能可以参考这种思路去改。 大海:对的。这样做真是就算列数变了也不怕了。

    2.1K30

    Excel公式练习33: 将包含空单元格的多行多列单元格区域转换成单独的列并去掉空单元格(续)

    本次的练习是:这个练习题与本系列上篇文章的练习题相同,如下图1所示,不同的是,上篇文章中将单元格区域A1:D6中的数据(其中包含空单元格)转换到单独的列(如图中所示的单元格区域G1:G13)中时,是以行的方式进行的...这里,需要以列的方式进行,即先放置第1列中的数据、再放置第2列中的数据……依此类推,最终结果如图中所示的单元格区域H1:H13,如何使用公式实现? ? 图1 先不看答案,自已动手试一试。...2.在单元格F1中输入公式: =SUM(COUNTIF(rngData,{">0","?*"})) 统计单元格区域A1:D6中非空单元格的数量。并将该单元格作为辅助单元格。..."),{8,2},5) 应该获取单元格C2中的值,即数据区域的第2行第3列。...相关参考 Excel公式练习32:将包含空单元格的多行多列单元格区域转换成单独的列并去掉空单元格 Excel公式练习4:将矩形数据区域转换成一行或者一列

    2.3K10

    如何使用Excel将某几列有值的标题显示到新列中

    如果我们有好几列有内容,而我们希望在新列中将有内容的列的标题显示出来,那么我们怎么做呢? Excel - TEXTJOIN function 1....- - - - 4 - - - 在开始,我们曾经使用INDEX + MATCH的方式,但是没有成功,一直是N/A https://superuser.com/questions/1300246/if-cell-contains-value-then-column-header...所以我们后来改为TEXTJOIN函数,他可以显示值,也可以显示值的标题,还可以多个列有值的时候同时显示。...- - 4 - - - 15 Year 5 - - - - 5 - - - =TEXTJOIN(", ",TRUE,IF(ISNUMBER(B2:I2),$B$1:$I$1,"")) 如果是想要显示值,...则: =TEXTJOIN(", ",TRUE,IF(ISNUMBER(B2:I2),B2:I2,"")) 其中,ISNUMBER(B2:I2)是判断值是不是数字,可以根据情况改成是不是空白ISBLANK

    11.3K40

    Excel公式技巧93:查找某行中第一个非零值所在的列标题

    有时候,一行数据中前面的数据值都是0,从某列开始就是大于0的数值,我们需要知道首先出现大于0的数值所在的单元格。...例如下图1所示,每行数据中非零值出现的位置不同,我们想知道非零值出现的单元格对应的列标题,即第3行中的数据值。 ?...图2 在公式中, MATCH(TRUE,B4:M40,0) 通过B4:M4与0值比较,得到一个TRUE/FALSE值的数组,其中第一个出现的TRUE值就是对应的非零值,MATCH函数返回其相对应的位置...MATCH函数的查找结果再加上1,是因为我们查找的单元格区域不是从列A开始,而是从列B开始的。...ADDRESS函数中的第一个参数值3代表标题行第3行,将3和MATCH函数返回的结果传递给ADDRESS函数返回非零值对应的标题行所在的单元格地址。

    9.8K30

    sql sever基本查询语句

    ,结果为数值的和) 含有别名的简单查询   : 列名  as 别名 列名  别名 别名=列名 查询空值 select 列名 form 表名 where 列名 is (not)null 查询常量列 常量...as 别名 限制固定行 top 所需行 top 数字 percent(百分比) (紧放在selsct后) order by  列名(降序desc 升序asc(默认) ) 多列时 ,隔开 前面为主排序列...时间单位 day:天 yy:取年 mm:取月 dd:取月中的天 dy:取年中的天 wk:取年中的周 dw:取周中的天 qq:取年中的季度 hh:取小时 mi:取分钟 ss:取秒 日期格式 date         ...指定数)从右查找字符串 left(值,指定数)从左查找字符串 replace(原,需替,替为)替换字符 stuff(原,起始,个数,替)指定长度长度替换 日期函数 (用于操作日期) datdate()当前日期...(今天) dateadd(类型,值,日期)值的类型的值+日期 datediff(类型,起始日期1,终止日期2)1-2的间隔时间 datename(类型,日期)指定日期返回字符串形式 datepart(类型

    1.7K50

    工作再忙,都要学会这36个Excel经典小技巧!

    前言:经常有同学同,Excel知识点那么多,我该从哪学起?我是零基础,该怎么学?...2、同时冻结第1行和第1列 选取第一列和第一行交汇处的墙角位置B2,窗口 - 冻结窗格 ? 3、快速把公式转换为值 选取公式区域 - 按右键向右拖一下再拖回来 - 选取只保留数值。 ?...14、输入分数 先后输入 0 ,再输入 空格, 再输入分数即可 15、强制换行 在文字后按alt+回车键即可换到下一行 16、删除空行 选取A列 - Ctrl+g打开定位窗口 - 定位条件:空值 - 整行删除...26、快速调整列宽 选取多列,双击边线即可自动调整适合的列宽 27、图表快速添加新系列 复制 - 粘贴,即可给图表添加新的系列 ?...30、不打印错误值 页面设置 - 工作表 - 错误值打印为:空 ? 31、隐藏0值 文件 - 选项 - 高级 - 去掉“显在具有零值的单元格中显示零” ?

    2.4K30

    MySQL从零开始:05 MySQL数据类型

    其中的 int、varchar、char 和 decimal 都是 MySQL 所支持的数据类型,本节将详细介绍 MySQL 支持的数据类型。 MySQL 中定义数据字段的类型对数据库的优化非常重要。...当结合可选扩展属性ZEROFILL使用时, 默认补充的空格用零代替。例如,对于声明为INT(5) ZEROFILL的列,值5检索为00005。 注意:M 要与 ZEROFILL 配合使用才有效果。...年份值在00~69之间转换为2000~2069 通过连接器/ODBC使用的“零”值日期或时间值将自动转换为NULL,因为ODBC无法处理这些值。...下表展示了CHAR和VARCHAR之间的差异,它展示了将各种字符串值存储到CHAR(4)和VARCHAR(4)列的结果(假设此列使用了一个单字节字符集,如latin1)。 ? 请看下面例子: ?...它有这些优势: 在一列有有限的可能值集合的情况下,压缩数据存储。你指定为输入值的字符串被自动编码为数字。 可读的查询和输出。在查询结果中,这些数字被转换回相应的字符串。

    2.3K30

    精通Excel数组公式022:提取唯一值列表并排序(续)

    注意到单元格区域E3:H3,有3个TRUE值和1个FALSE值,将3个TRUE值相加,结果为3,与上图18中的数字3相对应,表明该值前面有3个数据。 ?...图21 下面,通过在公式前面加上双减号将TRUE和FALSE值转换为1和0,然后将结果相加,得到想要的数值组成的数组:{0;3;0;2}。如下图22、23、24和25所示。 ? 图22 ?...:A5)^0代替公式中的数组常量: =MMULT(--(A2:A5>TRANSPOSE(A2:A5)),ROW(A2:A5)^0) 如果不希望空单元格导致公式失败,使用IF(A2:A5””,A2:A5...2.第一个MATCH函数告诉INDEX要查找的数据项的相对位置。 3.暂时将MATCH函数的参数lookup_value的值留为空。...图28 添加更多的元素到MIN函数中,避免空单元格影响公式运行,如下图29所示。 ? 图29 下图30展示了最终的公式。 ?

    5.4K10

    Excel公式技巧20: 从列表中返回满足多个条件的数据

    在实际工作中,我们经常需要从某列返回数据,该数据对应于另一列满足一个或多个条件的数据中的最大值。 如下图1所示,需要返回指定序号(列A)的最新版本(列B)对应的日期(列C)。 ?...这是必需的,因为接下来将会对该数组中的值求倒数,如果不执行此操作,则数组中的零将导致#DIV / 0!错误,这会在将数组传递给FREQUENCY函数时使事情更复杂。...} 这里的关键在于,将此数组作为bins_array参数的值传递给FREQUENCY函数,将零作为参数data_array的值。...而且,如果我们传递一个所有值都在0到1之间的值数组作为FREQUENCY函数的参数bins_array的值,将0作为其参数data_array的值,那么零将被分配给参数bins_array中的最小值;其余的为空或为零...由于数组中的最小值为0.2,在数组中的第7个位置,因此上述公式构造的结果为: {0;0;0;0;0;0;1;0;0;0} 获得此数组后,我们只需要从列C中与该数组出现的非零条目(即1)相对应的位置返回数据即可

    9.3K10

    在.NET中警惕C#的is var写法

    最初的 C# 里面的 var 只是一个在构建过程中可以被平替为具体类型的关键词,是一个不会影响到语义、运行时逻辑的语法而已。...然而在 is 这里面,将 var 当成了一个可以处理空值的特殊语法结构 这和咱长久的使用 is 来过滤空值的编程思想是冲突的,我感觉绝大部分开发者在写到 is var 的过程,将会想着应该是自动过滤掉...is var 的时候,会认为一定会过滤掉空值,导致出现了预期之外的空异常 通过以上的代码测试,可以看到以上代码里面的 var 和 IFoo 是不等价的。...第一个 var 和 IFoo 是等价的 然而第二个 var 在上面代码里面,却不能够平替为 IFoo 类型,试试看替换为 IFoo 类型试试,如以下代码,大家可以看到运行逻辑是完全不相同的 var f1...F2={f2}"); } if (foo is IFoo f3) { Console.WriteLine($"不进来"); } 如果将 is var 替换为 is IFoo 则非常符合预期的过滤掉

    13810

    dotnet 警惕 C# 的 is var 写法

    最初的 C# 里面的 var 只是一个在构建过程中可以被平替为具体类型的关键词,是一个不会影响到语义、运行时逻辑的语法而已。...然而在 is 这里面,将 var 当成了一个可以处理空值的特殊语法结构 这和咱长久的使用 is 来过滤空值的编程思想是冲突的,我感觉绝大部分开发者在写到 is var 的过程,将会想着应该是自动过滤掉...is var 的时候,会认为一定会过滤掉空值,导致出现了预期之外的空异常 通过以上的代码测试,可以看到以上代码里面的 var 和 IFoo 是不等价的。...第一个 var 和 IFoo 是等价的 然而第二个 var 在上面代码里面,却不能够平替为 IFoo 类型,试试看替换为 IFoo 类型试试,如以下代码,大家可以看到运行逻辑是完全不相同的 var f1...F2={f2}"); } if (foo is IFoo f3) { Console.WriteLine($"不进来"); } 如果将 is var 替换为 is IFoo 则非常符合预期的过滤掉

    12410

    SAP最佳业务实践:无变式配置按订单生产(148)-4分组件的零件生产

    2、MD04创建生产订单 日常的 MRP 运行会为内部生产的零件创建计划订单。到达计划转换日期时,系统将计划订单转换为生产订单。...3、MF60零件生产的备料 此活动从不同存储地点将生产订单需求物料放到生产存储地点。如从仓库地1050到库存地1020。 所需物料存放在供应存储地点的可用库存中。...在 按计划订单备料屏幕,输入如下数据: 字段名称用户操作和值注释库存地点级别X选择工厂1000 为需求选择期间如必要保留为空 2....应该和采购订单中使用相同的存储地点。 8. 在屏幕的下方,选择 全选。 9. 选择 阶段。 ? 10. 选择 保存。 系统将零部件从存储地点转移到车间存储地点。...另一种自动处理的方法是在更改工艺路线中装配。将控制码有YBP3代替YBP1。 角色仓库文员 1.

    1.7K80

    重中之重的数据清洗该怎么做?

    剔除单值列 无论出于何种目的,包含单个值的列在机器学习领域都是无用的。这些列称为零方差预测值,对你的模型不会有任何积极的影响,并且可能会对建模尝试产生意外的负面影响。...如果缺少的数据为试图预测的结果提供了至关重要的见解,那么保持现状肯定会导致不完美的预测。因此建议填充或删除空值。 如果可以合理地确定应该在空单元格中输入的值,那么这是最好的解决方案。...例如,如果知道“score”中具有null值的列意味着不记录任何分数,那么可以简单地将其替换为null值和0。通过这样做,可以保持数据集的完整性,并保障预估的准确性。这种情况使用fillna函数即可。...为了避免这个问题,使用某种类型的唯一列(如时间戳或用户ID)将确保重复的度量仍然在唯一列中。...如果有一列的值为“Paid”、“notpaid”,直接替换为二进制1或0表示即可。

    1K10
    领券