首页
学习
活动
专区
圈层
工具
发布
首页标签数据清洗

#数据清洗

振动温度入库:采集频率与数据清洗

节点恒存

数据清洗得再干净,也救不了装错位置。有一台减速机的振动传感器贴在薄板护罩上,测到的全是护罩共振,数值比同类设备高两倍,天天误报。这类问题只能靠现场巡检发现,之后...

1900

#WorkBuddy# 数据分析师实战:把数据清洗到模型部署的脏活累活全交给 AI 工作台

用户12814729

真正"动脑"的建模可能只占 20%,剩下 80% 是机械性的搬运、格式转换、重复跑脚本。WorkBuddy 这类 AI 工作台出现后,这部分完全可以让 AI 代...

12700

Python 量化数据清洗与预处理实战

gavin1024

量化交易中的数据清洗与预处理,是决定策略成败的隐形关键环节,核心工作包括六步:处理缺失值、去除重复数据、修正异常值、统一时间序列对齐、处理复权问题、以及规范数据...

23510

政府开放数据不用一条条搬:WorkBuddy + 开放接口,一小时入库 10 万条

幻城书盟

做过 OPC(一人公司,One Person Company)的人大概都遇到过这个场景:项目刚立项,第一道坎往往不是开发,而是客户张口就要「把某某政府数据接进来...

13710

Python 25个数据清洗技巧:让你的数据质量提升10倍

用户11081884

这25个技巧覆盖了数据清洗中最常见的场景。记住,数据清洗不是一次性工作,而是一个持续的过程。

33410

Python 20个数据清洗技巧,提升数据质量

用户11081884

数据清洗是数据分析流程中不可或缺的环节,高质量的数据分析才有价值。本文介绍20个实用的Python数据清洗技巧,帮助高效处理各种数据质量问题。

27510

从零构建:一个电商财务数据清洗工具的技术实现

heidsoft

业务需求是做抖音、淘宝、天猫、京东等电商平台的账单对账和财务数据清洗。财务人员导出的账单格式混乱,需要一个工具来完成:格式清洗、多平台合并、退款损失计算、品牌返...

25010

技术专访|GEO落地工程师罗长才:技术落地,从来不是纸上算法

罗长才

蓝色河畔作为粤东本土深耕二十余年的本地社区,聚集大量互联网从业者、技术爱好者、本地自媒体运营与内容创作者。伴随 AI 检索、大模型引用分发成为线上流量核心逻辑,...

34610

专访:GEO商学院院长罗长才——深度拆解GEO与AI幻觉、数据清洗、语义拓扑、RPC接口、MCP模型、APY多维赋能链路

罗长才

罗长才 GEO 商学院院长、名九至天人(陕西)网络科技创始人、国内首批 GEO(生成式引擎优化 Generative Engine Optimization)体...

30700

脏数据克星:Python 爬虫完整数据清洗实操案例

小白学大数据

在Python爬虫开发与数据工程落地体系中,原始采集数据脏数据化是制约数据价值落地的核心瓶颈。网页原始源码普遍存在空白字符、换行符、特殊转义符号等冗余内容,同时...

43110

通达信TdxQuant 实战:一招搞定“外部调用”与“数据清洗”两大痛点

子晓AI量化

昨天写了 通达信金融终端TDXQuant vs 迅投miniqmt vs Pytdx , 有同学兴致冲冲的开始下载通达信金融终端64位 开始编码了。

4.4K10

Polars Rust 第 5 课:数据清洗与转换

不吃草的牛德

好消息是,Polars 的表达式系统(Expression System)让数据清洗变得异常优雅 ?。通过链式调用和惰性求值,你可以像搭积木一样组合各种清洗操作...

36510

基本面量化Rust实战:财务报表数据清洗与因子构建

不吃草的牛德

A股常见的财务数据接口(Tushare、Choice、Wind等)通常返回结构化表格数据。我们先定义一个最简洁的财务记录结构体,用于反序列化。

47210

MEHC-Curation:一个让所有研究者都能用好的分子数据清洗开源框架

DrugIntel

目前领域内最权威的清洗规范是 Fourches 等人(2010)提出的四步协议(去除问题结构 → 脱盐与中性化 → 化学类型规范化 → 去重),该论文被引超过 ...

39910

Yahoo Finance、akshare、Polygon 数据太乱怎么办?美股行情清洗实战:字段映射、时间对齐、复权处理

Qtick

用 yfinance 拉数据,发现 Adj Close 和 Close 有时候一样,有时候不一样,到底该信哪个?

1.8K10

R语言数据清洗

邓飞

辛辛苦苦跑完一个混合模型,结果出来一堆显著,一顿汇报,领导一问: "这个品种的产量负值是怎么回事?"

49910

基于可视化配置的数据集成实践:ETL 流程构建与质量治理指南

吴同

在数据驱动决策的场景中,面对多源异构数据的采集、清洗与同步需求,传统的代码开发模式往往面临维护成本高、响应速度慢的挑战。本文将介绍一种基于可视化配置的数据集成实...

47910
领券