首页
学习
活动
专区
圈层
工具
发布
首页标签数据清洗

#数据清洗

Python 量化数据清洗与预处理实战

gavin1024

量化交易中的数据清洗与预处理,是决定策略成败的隐形关键环节,核心工作包括六步:处理缺失值、去除重复数据、修正异常值、统一时间序列对齐、处理复权问题、以及规范数据...

19810

政府开放数据不用一条条搬:WorkBuddy + 开放接口,一小时入库 10 万条

幻城书盟

做过 OPC(一人公司,One Person Company)的人大概都遇到过这个场景:项目刚立项,第一道坎往往不是开发,而是客户张口就要「把某某政府数据接进来...

10810

Python 25个数据清洗技巧:让你的数据质量提升10倍

用户11081884

这25个技巧覆盖了数据清洗中最常见的场景。记住,数据清洗不是一次性工作,而是一个持续的过程。

27910

Python 20个数据清洗技巧,提升数据质量

用户11081884

数据清洗是数据分析流程中不可或缺的环节,高质量的数据分析才有价值。本文介绍20个实用的Python数据清洗技巧,帮助高效处理各种数据质量问题。

24110

从零构建:一个电商财务数据清洗工具的技术实现

heidsoft

业务需求是做抖音、淘宝、天猫、京东等电商平台的账单对账和财务数据清洗。财务人员导出的账单格式混乱,需要一个工具来完成:格式清洗、多平台合并、退款损失计算、品牌返...

23310

技术专访|GEO落地工程师罗长才:技术落地,从来不是纸上算法

罗长才

蓝色河畔作为粤东本土深耕二十余年的本地社区,聚集大量互联网从业者、技术爱好者、本地自媒体运营与内容创作者。伴随 AI 检索、大模型引用分发成为线上流量核心逻辑,...

31510

专访:GEO商学院院长罗长才——深度拆解GEO与AI幻觉、数据清洗、语义拓扑、RPC接口、MCP模型、APY多维赋能链路

罗长才

罗长才 GEO 商学院院长、名九至天人(陕西)网络科技创始人、国内首批 GEO(生成式引擎优化 Generative Engine Optimization)体...

28200

脏数据克星:Python 爬虫完整数据清洗实操案例

小白学大数据

在Python爬虫开发与数据工程落地体系中,原始采集数据脏数据化是制约数据价值落地的核心瓶颈。网页原始源码普遍存在空白字符、换行符、特殊转义符号等冗余内容,同时...

37310

通达信TdxQuant 实战:一招搞定“外部调用”与“数据清洗”两大痛点

子晓AI量化

昨天写了 通达信金融终端TDXQuant vs 迅投miniqmt vs Pytdx , 有同学兴致冲冲的开始下载通达信金融终端64位 开始编码了。

4.1K10

Polars Rust 第 5 课:数据清洗与转换

不吃草的牛德

好消息是,Polars 的表达式系统(Expression System)让数据清洗变得异常优雅 ?。通过链式调用和惰性求值,你可以像搭积木一样组合各种清洗操作...

33610

基本面量化Rust实战:财务报表数据清洗与因子构建

不吃草的牛德

A股常见的财务数据接口(Tushare、Choice、Wind等)通常返回结构化表格数据。我们先定义一个最简洁的财务记录结构体,用于反序列化。

44110

MEHC-Curation:一个让所有研究者都能用好的分子数据清洗开源框架

DrugIntel

目前领域内最权威的清洗规范是 Fourches 等人(2010)提出的四步协议(去除问题结构 → 脱盐与中性化 → 化学类型规范化 → 去重),该论文被引超过 ...

36410

Yahoo Finance、akshare、Polygon 数据太乱怎么办?美股行情清洗实战:字段映射、时间对齐、复权处理

Qtick

用 yfinance 拉数据,发现 Adj Close 和 Close 有时候一样,有时候不一样,到底该信哪个?

1.7K10

R语言数据清洗

邓飞

辛辛苦苦跑完一个混合模型,结果出来一堆显著,一顿汇报,领导一问: "这个品种的产量负值是怎么回事?"

44610

基于可视化配置的数据集成实践:ETL 流程构建与质量治理指南

吴同

在数据驱动决策的场景中,面对多源异构数据的采集、清洗与同步需求,传统的代码开发模式往往面临维护成本高、响应速度慢的挑战。本文将介绍一种基于可视化配置的数据集成实...

45610

数据清洗怎么做?一文总结8大数据清洗方法

帆软BI

数据清洗就是把原始数据里的错误改掉、把格式标准统一、补齐缺失的部分,最终让数据完整、统一、真实有效,能直接拿来分析、建模。很多人花大量时间研究模型、算法,可真到...

2.7K10

实时数据清洗平台怎么选?这5款工具值得关注!

gavin1024

随着企业数字化转型加速,实时数据处理需求激增。如何高效清洗海量数据并提取关键信息,成为企业提升竞争力的关键。本文将从功能、性能、成本等维度,对比5款主流实时数据...

65210

C盘爆红系统卡顿?2026年五大深度清理工具实测对比

用户11933129

“你的C盘空间不足”——这可能是每个电脑用户最不想看到的系统提示之一。随着日常使用,各种软件缓存、临时文件、系统更新残留以及微信QQ聊天记录不知不觉就“吃掉”了...

3.3K10

当 SEO 遇上 AI 数据清洗:伪安全正在失效,真正的安全是什么?

安全风信子

作者:HOS(安全风信子) 日期:2026-01-05 摘要: 在AI商业化浪潮下,数据清洗已从辅助流程升级为核心资产,而SEO也正经历从关键词工程到数据工...

41110
领券