开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Python Datatable/Pydatatable:如何使用正则表达式过滤datatable中的行，并根据过滤器为新变量赋值

Python Datatable/Pydatatable是一个用于数据处理和分析的Python库。它提供了一种高效的方式来处理大型数据集，并具有类似于SQL的语法和功能。

要使用正则表达式过滤datatable中的行，并根据过滤器为新变量赋值，可以按照以下步骤进行操作：

导入必要的库和模块：

import datatable as dt
import re

创建一个datatable对象并加载数据：

data = dt.Frame({'col1': ['apple', 'banana', 'cherry', 'date'],
                 'col2': [1, 2, 3, 4]})

使用正则表达式过滤行并创建过滤器：

filter_expr = dt.f[str].match(re.compile(r'b\w+'), dt.f.col1)

上述代码中，filter_expr使用正则表达式b\w+来匹配以字母'b'开头的单词。

使用过滤器过滤datatable并创建新变量：

filtered_data = data[filter_expr, :]

上述代码中，filtered_data是根据过滤器filter_expr从data中过滤出的新datatable。

完整的代码示例：

import datatable as dt
import re

data = dt.Frame({'col1': ['apple', 'banana', 'cherry', 'date'],
                 'col2': [1, 2, 3, 4]})

filter_expr = dt.f[str].match(re.compile(r'b\w+'), dt.f.col1)
filtered_data = data[filter_expr, :]

关于Python Datatable/Pydatatable的更多信息和详细用法，请参考腾讯云的相关产品和文档：

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

安全 | 黑客是这样写JavaScript的

（左右滑动查看代码） 0写在前面注* XSS攻击即Cross Site Scripting，通常在网页链接地址Url中注入JS代码来达到攻击手段，很多大厂都中过招，如：Twitter，新浪微博，示例代码：http://www.demo.cn/=<script>alert(document.cookie)</script>　其实此代码并不能在所有浏览器上执行，但仅需要一部分浏览器(如IE6)可用，即可达到攻击效果。目前很多网站都有自动过滤XSS代码的功能，此文即介绍了一些如何屏蔽XSS过滤器的手段，其实我们

02

黑客是怎样写JS的：你不知道的JavaScript用法

注* XSS攻击即Cross Site Scripting，通常在网页链接地址Url中注入JS代码来达到攻击手段，很多大厂都中过招，如：Twitter，新浪微博，示例代码：

02

Linux 三板斧之一：grep

grep 是 Linux 三板斧之一，是一种强大的文本搜索工具。它可以快速搜索文件的内容，寻找包含某个字符串或正则表达式的文本行。grep 的基本语法是:

03

知识分享之Golang——Bleve中的字符过滤器和分词规则

知识分享之Golang篇是我在日常使用Golang时学习到的各种各样的知识的记录，将其整理出来以文章的形式分享给大家，来进行共同学习。欢迎大家进行持续关注。

01

python的warnings模块

Python 通过调用 warnings 模块中定义的 warn() 函数来发出警告。警告消息通常用于提示用户一些错误或者过时的用法，当这些情况发生时我们不希望抛出异常或者直接退出程序。警告消息通常写入 sys.stderr，对警告的处理方式可以灵活的更改，例如忽略或者转变为为异常。警告的处理可以根据警告类别，警告消息的文本和发出警告消息的源位置而变化。对相同源位置的特定警告的重复通常被抑制。

01

JSON神器之jq使用指南指北

jq 就像sedJSON 数据一样 - 您可以使用它来切片、过滤、映射和转换结构化数据，就像 ,sed和朋友让您玩文本一样容易。awkgrep

03

grep命令及正则表达式

grep基本概念 grep：global search regular expression and print out the line. 作用：文本过滤器，用于文本搜索，用指定“模式”逐行匹配。

07

linux bash shell 特殊字符大全

Linux下无论如何都是要用到shell命令的，在Shell的实际使用中，有编程经验的很容易上手，但稍微有难度的是shell里面的那些个符号，各种特殊的符号在我们编写Shell脚本的时候如果能够用的好，往往能给我们起到事半功倍的效果，为此，特地将Shell里面的一些符号说明罗列成对照表的形式，以便快速的查找。看看你知道下表中的哪些Shell符号呢？

03

自动添加标签（2）：再次实现

你从初次实验中学到了什么呢？为了提高可扩展性，需提高程序的模块化程度（将功能放在独立的组件中）。要提高模块化程度，方法之一是采用面向对象设计。你需要找出一些抽象，让程序在变得复杂时也易于管理。下面先来列举一些潜在的组件。

04

静态代码扫描方法及工具介绍

静态扫描就是不运行程序，通过扫描源代码的方式检查漏洞，常见的方法也有多种，如把源代码生成 AST（抽象语法树）后对 AST 进行分析，找出用户可控变量的使用过程是否流入到了危险函数，从而定位出漏洞；或者通过正则规则来匹配源代码，根据平常容易产生漏洞的代码定制出规则，把这些规则代入到代码中进行验证来定位漏洞。当然静态扫描由于不运行程序也有好多事情处理不了，如程序通过运算得到的一个结果后，就没办法分析这个结果了，所以需要动态运行程序来解决这个问题，也就是动态扫描，动态扫描可以通过单元测试或人工扫描等方式，下面分别介绍一下 AST 扫描与正则匹配两种常见静态扫描方式。

02

轻量级日志系统Loki stack

Loki 是一个可水平伸缩的、高可用的以及多租户的日志集中系统，有这么多功能，唯独没有全文检索。在其简介中，自称是受到 Prometheus 的启发：仅保存和处理元数据，而对日志正文不闻不问。和 EFK 类似，Loki Stack 也由采集端、服务端和交互端三个部分构成，其中采集端是可变的，目前支持 Promtail、FluentBit 和 Fluentd 三种，服务端和交互端分别使用的是 Loki 和 Grafana。

03

Spring-Cloud-GateWay

01

JavaScript高级(8) 正则表达式

正则表达式(Regular Expression) 是用于匹配字符串中字符组合的模式.在JavaScript中,正则表达式也是对象

01

通过案例带你轻松玩转JMeter连载（10）

6 HTTP代理服务器（HTTP(S) 测试脚本录制） HTTP代理服务器，用于使用JMeter自身的工具来录制脚本。HTTP代理服务器通过右键点击菜单，选择“添加->非测试元件->HTTP代理服务器”而获得。其界面如图59所示。

01

LogStash的配置详解

Logstash用{}来定义区域。区域内可以包括插件去预定义，可以在一个区域内定义多个插件。插件区域则可以定义键值对来设置。示例：

02

jquery.datatables 分页功能

Datatables 插件的基本用法就不再介绍了，这里主要分享一下使用它实现服务器端获取数据时的分页处理。

02

Loki日志系统

Loki的第一个稳定版本于2019年11月19日发布，是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。 Grafana 对 Loki 的描述如下：

04

python 如何改变字符串中某一个值_python替换字符串中的某个字符

使用python时会经常要对字符串做一些处理，比如：分割字符串、去掉空格、替换字符串

00

FastAI 课程学习笔记 lesson 1：宠物图片分类

这些东西开始%是对jupyter notebook本身的特殊指令，它们不是Python代码。它们被称为“魔法”。表示

01

内容提取神器 beautiful Soup 的用法

上篇文章只是简单讲述正则表达式如何读懂以及 re 常见的函数的用法。我们可能读懂别人的正则表达式，但是要自己写起正则表达式的话，可能会陷入如何写的困境。正则表达式写起来费劲又出错率高，那么有没有替代方案呢？俗话说得好，条条道路通罗马。目前还两种代替其的办法，一种是使用 Xpath 神器，另一种就是本文要讲的 BeautifulSoup。

03

Django安装及简单使用 1.2

Django安装及简单使用 1.2 代码都在github： URL:https://github.com/njxshr/codes/tree/master/testdj 视图和 URL 配置在先前创建的 HelloWorld 目录下的 HelloWorld 目录新建一个 view.py 文件，并输入代码： #!/usr/bin/env python # -*- coding: utf-8 -*- # @Time : 2018/3/26 下午4:37 # @Author : lee # @F

08

BGP高级特性

在不希望接收某些AS的路由时，可以利用AS_Path Filter对携带这些AS号的路由进行过滤，从而实现拒绝某些路由。

01

Python - 警告模块 warnings

从概念上讲，警告过滤器维护着一个经过排序的过滤器类别列表；任何具体的警告都会依次与列表中的每种过滤器进行匹配，直到找到一个匹配项；过滤器决定了匹配项的处理方式。每个列表项均为 ( action , message , category , module , lineno ) 格式的元组，其中：

03

python 模板实现-引擎的编写（有时间试一下）

1.模板的编写：https://blog.csdn.net/MageeLen/article/details/68920913

04

【SpringCloud-Alibaba系列教程】10.gateway网关

在SpringCloud中网关作为一个重要的组成部分，网关的角色是作为一个 API 架构，用来保护、增强和控制对于 API 服务的访问。

03

Loki 查询语言 LogQL 使用

前面我们在学习到使用 Loki 的 Ruler 进行报警的时候，使用了一种查询语言来定义报警规则，这个就是受 PromQL 的启发，Loki 自己推出的查询语言，称为 LogQL，它就像一个分布式的 grep，可以聚合查看日志。和 PromQL 一样，LogQL 也是使用标签和运算符进行过滤的，主要有两种类型的查询功能：

03

日志解析神器——Logstash中的Grok过滤器使用详解

Logstash 作为一个强大的日志管理工具，提供了一个名为 Grok 的过滤器插件，专门用于解析复杂的文本数据。

01

初学指南| 用Python进行网页抓取

引言从网页中提取信息的需求日益剧增，其重要性也越来越明显。每隔几周，我自己就想要到网页上提取一些信息。比如上周我们考虑建立一个有关各种数据科学在线课程的欢迎程度和意见的索引。我们不仅需要找出新的课程，还要抓取对课程的评论，对它们进行总结后建立一些衡量指标。这是一个问题或产品，其功效更多地取决于网页抓取和信息提取（数据集）的技术，而非以往我们使用的数据汇总技术。网页信息提取的方式从网页中提取信息有一些方法。使用API可能被认为是从网站提取信息的最佳方法。几乎所有的大型网站，像Twitter、Facebo

08

初学指南| 用Python进行网页抓取

编译|丁雪黄念程序注释|席雄芬校对|姚佳灵引言从网页中提取信息的需求日益剧增，其重要性也越来越明显。每隔几周，我自己就想要到网页上提取一些信息。比如上周我们考虑建立一个有关各种数据科学在线课程的欢迎程度和意见的索引。我们不仅需要找出新的课程，还要抓取对课程的评论，对它们进行总结后建立一些衡量指标。这是一个问题或产品，其功效更多地取决于网页抓取和信息提取（数据集）的技术，而非以往我们使用的数据汇总技术。网页信息提取的方式从网页中提取信息有一些方法。使用API可能被认为是从网站提取信息的最佳方法。

05

Django 博客生成 Markdown 摘要的几种方式对比

在搭建博客中, 自动生成摘要是一个很普遍的需求, 今天讲的生成摘要方式均为抽取式, 并且实质仍是抽取文章前 N 个字, 真正的抽取式通常会使用 TextRank 算法计算文章中的句子权重高的再抽取句子, 更非生成式,生成式摘要需要依靠神经网络的帮助.

02

功能上新：CLS支持完全正则模式采集多行日志

多行-完全正则模式适用于日志文本中一条完整的日志数据跨占多行（例如 Java 程序日志），可按正则表达式提取为多个 key-value 键值的日志解析模式。若不需要提取 key-value，请参阅多行全文格式进行配置。配置多行-完全正则模式时，您需要先输入日志样例，再自定义正则表达式。配置完成后，系统将根据正则表达式中的捕获组提取对应的 key-value。

JMeter 后置处理器之JSON提取器

JSON后置处理器（PostProcessor）允许使用 JSON Path 语法从JSON格式的响应中提取数据。类似正则表达式提取器，必须位于HTTP采样器、或者其它可以返回JSON数据的采样器下，作为子结点。

01

快速学习-Gateway--服务网关

大家都都知道在微服务架构中，一个系统会被拆分为很多个微服务。那么作为客户端要如何去调用这么多的微服务呢？如果没有网关的存在，我们只能在客户端记录每个微服务的地址，然后分别去调用。

02

用Python执行SQL、Excel常见任务？10个方法全搞定！

数据从业者有许多工具可用于分割数据。有些人使用 Excel，有些人使用SQL，有些人使用Python。对于某些任务，使用 Python 的优点是显而易见的。以更快的速度处理更大的数据集。使用基于 Python 构建的开源机器学习库。你可以轻松导入和导出不同格式的数据。

02

Z大牛分享 | Zabbix_LLD_过滤监控项

默认情况下，自带的模板“Template OS Windows”，“Template OS Linux”中网络接口LLD自动发现除回环接口外的所有接口，当这并不是我们想要的接口。

04

awk(报告生成器),grep(文本过滤器),sed(流编辑器)使用入门

三剑客 linux下的文本三剑客 grep egrep,grep,fgrep 文本查找的需要 grep：根据模式搜索文本，并将符合模式的文本行显示出来。 pattern：文本符和正则表达式的元字符组合而成的匹配条件 grep [option] "pattern" file grep root /etc/passwd -i：忽略大小写 --color：匹配的字符高亮显示 alias alias grep='grep --color' -v:反向查找 -o：只显示被模式匹配的字符串（不显示行

万字长文带你吃透SpringCloudGateway工作原理+动态路由+源码解析

Spring Cloud 2.x 实现了社区生态下的 Spring CloudGateway（简称SCG）微服务网关项目。Spring Cloud Gateway基于WebFlux框架开发，目标是替换掉Zuul。

03

深入理解 ELK 中 Logstash 的底层原理 + 填坑指南

通过本篇内容，你可以学到如何解决 Logstash 的常见问题、理解 Logstash 的运行机制、集群环境下如何部署 ELK Stack。

01

《吃透微服务》 - 服务网关之Gateway

一个希望能够成为吹着牛X谈架构的男人！如果你也想成为我想成为的人，不然点个关注做个伴，让小菜不再孤单！

03

django 1.8 官方文档翻译： 1-1-1 Django初探

由于Django是在一个快节奏的新闻编辑室环境下开发出来的，因此它被设计成让普通的网站开发工作简单而快捷。以下简单介绍了如何用 Django 编写一个数据库驱动的Web应用程序。

02

【ES三周年】深入理解 ELK 中 Logstash 的底层原理 + 填坑指南

通过本篇内容，你可以学到如何解决 Logstash 的常见问题、理解 Logstash 的运行机制、集群环境下如何部署 ELK Stack。

【SpringCloud专题】「Gateway系列」微服务网关Gateway流程开发实践指南（2.2.X）

本次实践主要在版本：2.2.0.BUILD-SNAPSHOT上进行构建，这个项目提供了构建在Spring生态系统之上API网关。

01

日志聚合工具loki

Loki是一个水平可扩展，高可用性，多租户的日志聚合系统，受到Prometheus的启发。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签。官方介绍说到：Like Prometheus, but for logs.

02

grafana loki轻量级日志收集系统

Loki的第一个稳定版本于2019年11月19日发布是 Grafana Labs 团队最新的开源项目是一个水平可扩展，高可用性，多租户的日志聚合系统 Loki 特性

01

LogStash的安装部署与应用

1、Logstash是一个接收，处理，转发日志的工具; 2、Logstash支持网络日志、系统日志、应用日志、apache日志等等，总之可以处理所有日志类型; 3、典型应用场景ELK：logstash负责采集、解析日志，elasticsearch负责数据存储，kibana负责前端报表展示。

02

Prometheus监控学习笔记之初识PromQL

Prometheus 提供了一种功能表达式语言 PromQL，允许用户实时选择和汇聚时间序列数据。表达式的结果可以在浏览器中显示为图形，也可以显示为表格数据，或者由外部系统通过 HTTP API 调用。

02

你可能不知道的pandas的5个基本技巧

多年来我一直在SQL中使用“between”函数，但直到最近才在pandas中发现它。

04

只需4步，微软数据科学家教你用OpenRefine搞定数据清洗

导读：本文将使用OpenRefine清理我们的数据集；它很擅长数据的读取、清理以及转换数据。

02

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭