腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
腾讯云架构师技术同盟
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
腾讯云架构师技术同盟
返回腾讯云官网
Panda诚
专栏成员
举报
77
文章
147280
阅读量
17
订阅数
订阅专栏
申请加入专栏
全部文章（77）
java（16）
编程算法（14）
sql（12）
apache（11）
数据库（10）
json（9）
jvm（8）
https（8）
SSL 证书（6）
php（5）
http（5）
存储（5）
javascript（4）
html（4）
jar（4）
网络安全（4）
正则表达式（4）
oracle（3）
access（3）
api（3）
unix（3）
文件存储（3）
网站（3）
缓存（3）
zookeeper（3）
tcp/ip（3）
bash（2）
xml（2）
云数据库 SQL Server（2）
maven（2）
linux（2）
bash 指令（2）
批量计算（2）
腾讯云测试服务（2）
开源（2）
jdk（2）
hadoop（2）
hive（2）
kerberos（2）
大数据（2）
unicode（2）
data（2）
swap（2）
脚本（2）
源码（2）
官方文档（1）
c++（1）
python（1）
ruby（1）
servlet（1）
jsp（1）
bootstrap（1）
regex（1）
css（1）
jquery（1）
打包（1）
ide（1）
git（1）
github（1）
全文检索（1）
lucene/solr（1）
容器镜像服务（1）
spring（1）
express（1）
容器（1）
面向对象编程（1）
ftp（1）
单元测试（1）
socket编程（1）
微信（1）
数据分析（1）
windows（1）
ascii（1）
ipv6（1）
groovy（1）
avro（1）
back（1）
byte（1）
debug（1）
event（1）
expression（1）
field（1）
file（1）
format（1）
hash（1）
invoke（1）
key（1）
map（1）
match（1）
message（1）
object（1）
outputstream（1）
partial（1）
prefix（1）
queue（1）
repository（1）
schema（1）
sh（1）
size（1）
snapshot（1）
text（1）
thread（1）
timer（1）
trace（1）
unique（1）
进程（1）
日志（1）
搜索文章
搜索
搜索
关闭
MySQL全字段读写测试(NIFI 1.15.3)
腾讯云测试服务
tcp/ip
unix
python
GEOMETRY POINT LINESTRING POLYGON MULTIPOINT MULTILINESTRING MULTIPOLYGON GEOMETRYCOLLECTION
@阿诚
2022-03-04
1.4K
0
MySQL全字段类型概览
数据库
云数据库 SQL Server
sql
json
存储
MySQL支持多种数据类型：数字类型，日期和时间类型，字符类型，空间类型和JSON类型。
@阿诚
2022-03-04
3.2K
0
Apache NiFi中的JWT身份验证
网站
json
spring
编程算法
存储
JSON Web Tokens为众多Web应用程序和框架提供了灵活的身份验证和授权标准。RFC 7519概述了JWT的基本要素，枚举了符合公共声明属性的所需编码，格式和已注册的声明属性名称(payload里属性称为声明)。RFC 7515中的JSON Web签名和RFC 7518中的JSON Web算法描述了JWT的支持标准，其他的比如OAuth 2.0框架的安全标准构建在这些支持标准上，就可以在各种服务中启用授权。
@阿诚
2022-03-04
4.1K
0
NIFI流程微信告警
微信
https
http
网络安全
如何不写代码，只利用NIFI的组件，以及免费的资源，实现流程组件报错微信告警的功能？
@阿诚
2021-12-27
1.7K
0
使用jolt替换值(1/0->男/女)
json
编程算法
现在有一组JSON格式的数据如下，可能因为各种原因吧，其中表示性别的sex字段并没有使用男 女这样直接的值来表达，然后老板说：“我不要1/0，你给我换成我能看得懂的汉字”
@阿诚
2021-12-18
1.8K
0
Version 1.14.0的重大功能更新
apache
http
大数据
https
Apache NiFi 1.14.0 版是一个增加了重要的功能、改进和bug修复的版本，发布日期2021年7月14日。
@阿诚
2021-08-20
1.4K
0
基于日志的Oracle实时同步的实现- Oracle环境准备
数据库
sql
oracle
官方文档
全文检索
一般来说以上都默认包含LogMiner分析包，无需再安装 。如果不能确认，可以 DBA 身份登录系统，查看系统中是否存在运行 LogMiner 所需要的 dbms_logmnr、 dbms_logmnr_d 包，如果没有需要安装 LogMiner 工具，必须首先要运行下面这样两个脚本：ORACLE_HOME/rdbms/admin/dbmslm.sql ORACLE_HOME/rdbms/admin/dbmslmd.sql 。这两个脚本必须均以 DBA 用户身份运行。
@阿诚
2021-07-23
2.6K
0
Mac下使用Docker安装Oracle
容器镜像服务
oracle
容器
最近需要用到oracle(Oracle 实时采集)，但是本地又是Mac系统，所以想起来在本地使用Docker安装Oracle。
@阿诚
2021-07-23
1.8K
0
基于Oracle LogMiner的实时采集一、Logminer简介及使用
oracle
sql
数据库
Oracle LogMiner 是 Oracle 公司从产品 8i 以后提供的一个实际非常有用的分析工具，使用该工具可以轻松获得 Oracle 在线/归档日志文件中的具体内容，特别是该工具可以分析出所有对于数据库操作的 DML 和 DDL 语句。该工具特别适用于调试、审计或者回退某个特定的事务。LogMiner 分析工具实际上是由一组 PL/SQL 包和一些动态视图（ Oracle8i 内置包的一部分）组成，它作为 Oracle 数据库的一部分来发布是 8i 产品提供的一个完全免费的工具。但该工具和其他 Oracle 内建工具相比使用起来显得有些复杂，主要原因是该工具没有提供任何的图形用户界面（ GUI）。
@阿诚
2021-07-23
3.5K
0
FlowFile存储库原理
hash
map
partial
snapshot
swap
系统正在积极处理的FlowFiles保存在JVM内存中的Hash Map中。这使它们的处理效率非常高，但是由于多种原因，例如断电，内核崩溃，系统升级和维护周期，因此需要一种辅助机制来在整个进程重新启动中提供数据的持久性。FlowFile存储库是系统中当前存在的每个FlowFiles的元数据的Write-Ahead Log（或数据记录）。该FlowFile元数据包括与FlowFile相关联的所有attributes，指向FlowFile实际内容的指针（该内容存在于内容存储库中）以及FlowFile的状态，例如FlowFile所属的Connection/Queue。预写日志为NiFi提供了处理重启和意外系统故障所需的弹性。
@阿诚
2021-03-08
1.3K
0
Provenance存储库原理
lucene/solr
编程算法
文件存储
在Provenance存储库中存储每个FlowFile的历史记录。此历史记录用于提供每个数据的数据沿袭（也称为产销监管链）。每次为FlowFile发生事件（创建，分叉，克隆，修改FlowFile等）时，都会创建一个新的Provenance事件。这个出处事件是流文件的快照，因为它看起来就是在那个时间点存在的流。创建Provenance事件后，它将复制所有FlowFile的属性和指向FlowFile内容的指针，并将其与FlowFile的状态（例如其与其他出处事件的关系）聚合到Provenance存储库里。该快照将不会更改，直到过期。根据“nifi.properties”文件中的指定，Provenance存储库将在完成后的一段时间内保留所有这些来源事件。
@阿诚
2021-03-08
982
0
Apache NIFI v1.13.0发布了
ftp
apache
zookeeper
hive
SSL 证书
回顾2020年，Apache NIFI一共发布了7个版本1.12.1、1.12.0、1.11.4、1.11.3、1.11.2、1.11.1、1.11.0。版本发布之频繁前所未有，可以看出NIFI的开源社区贡献力量壮大了许多，同时也更加期待NIFI未来能够给我们带来更多的惊喜。
@阿诚
2021-03-07
822
0
Apache NiFi的 Write-Ahead Log 实现
文件存储
NiFi使用预写日志来跟踪FlowFiles（即数据记录）在系统中流动时的变化。该预写日志跟踪FlowFiles本身的更改，例如FlowFile的属性（组成元数据的键/值对）及其状态，再比如FlowFile所属的Connection /Queue。
@阿诚
2021-03-07
1.2K
0
内容存储库原理
jvm
byte
file
outputstream
repository
内容存储库就是本地存储所有FlowFiles内容的地方，通常是三个存储库中最大的。该存储库利用不变性和写时复制来最大提升读写速度和保证线程安全性。Content Repo的核心设计是将FlowFile的内容保存在磁盘上，并仅在需要时才将其读入JVM内存。这使NiFi可以处理大量小的对象，而无需生产者和消费者处理器将完整的对象保存在内存中。因此，在不损害内存的情况下，非常容易执行诸如拆分，聚合和转换非常大的对象之类的操作。
@阿诚
2021-03-07
892
0
Apache NIFI 架构
jvm
存储
zookeeper
流量控制器是操作的大脑。它为运行扩展提供线程，并管理扩展何时接收要执行的资源的时间表。
@阿诚
2021-03-07
1.2K
0
打印Java对象头
jvm
linux
ide
这部分主要用来存储对象自身的运行时数据，如hashcode、gc分代年龄等。mark word的位长度为JVM的一个Word大小，也就是说32位JVM的Mark word为32位，64位JVM为64位。 为了让一个字大小存储更多的信息，JVM将字的最低两个位设置为标记位，不同标记位下的Mark Word示意如下：
@阿诚
2021-02-04
2.5K
0
深入了解Java锁
java
数据分析
继 打印Java对象头，我们再深入探索一下Java锁。无锁状态我们就不说了，下面我们一一打印偏向锁、轻量锁，重量锁的对象头。
@阿诚
2021-02-04
449
0
偏向锁批量重偏向与批量撤销
jvm
linux
批量重偏向：当一个线程创建了大量对象并执行了初始的同步操作，后来另一个线程也来将这些对象作为锁对象进行操作，会导偏向锁重偏向的操作。 批量撤销：在多线程竞争剧烈的情况下，使用偏向锁将会降低效率，于是乎产生了批量撤销机制。 JVM的默认参数值: intx BiasedLockingBulkRebiasThreshold = 20 默认偏向锁批量重偏向阈值 intx BiasedLockingBulkRevokeThreshold = 40 默认偏向锁批量撤销阈值 批量重偏向 测试代码： pu
@阿诚
2021-02-04
1.5K
0
为什么建议使用NIFI里的Record
json
sql
许多第一次接触使用NIFI的同学在同步关系型数据库的某一张表的时候，可能会拖拽出类似于下面的一个流程。
@阿诚
2020-11-25
1.8K
0
数据抽取的常见理论方法
unix
数据库
sql
数据抽取是指从源数据源系统抽取需要的数据。实际应用中，数据源较多采用的是关系数据库。总体而言，数据抽取的常见方法有两大类，一是基于查询式的，一是基于日志的。
@阿诚
2020-09-15
1.8K
0
点击加载更多
社区活动
Python精品学习库
代码在线跑，知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客，速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·干货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档
