休辞醉倒-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

休辞醉倒

专栏成员

46

文章

130833

阅读量

14

订阅数

pig脚本求和排序取TOP

有一需求，在HDFS数据上分组聚合累加一列的值，汇总后排序取TOP，pig脚本思路如下：

2019-07-31

8710

HDFS查看文件内容

node.js hadoop 大数据

随机返回指定行数的样本数据 Hadoop fs -cat /path/txt | shuf -n 5 返回前几行的样本数据 hadoop fs -cat /path/txt | head -100 返回最后几行的样本数据 hadoop fs -cat /path/txt | tail -5 查看文本行数 hadoop fs -cat /path/txt | wc -l 查看文件大小（单位byte） hadoop fs -du hdfs://path/txt hadoop f

2019-07-26

10.1K0

JavaScript笔记顶

编程算法面向对象编程 javascript

所有通过对象直接量创建的对象都具有一个原型对象，并可以通过JavaScript代码Object.prototype获得对原型对象的引用。通过关键字new和构造函数调用创建的对象的原型就是构造函数的prototype属性的值。

2019-07-25

3160

Hive的数据存储

hive 大数据 https 网络安全存储

https://www.cnblogs.com/huifeidezhuzai/p/9251969.html

2019-07-25

1.3K0

Elasticsearch的JVM的配置

https://www.elastic.co/cn/blog/a-heap-of-trouble

2019-07-25

9550

关于nohup在连接断开后进程退出的小记

云数据库 SQL Server sql 数据库

工作中遇到了迁移数据库的操作，sql文件30G，当然不能搞到本地用Navicat导入，要通过命令导入。

2019-07-25

1.3K0

mysql通过source恢复大表小记

云数据库 SQL Server 数据库 sql

最近迁移一个数据库，500多张表大概600多万条数据，通过navicat导出的数据，再通过source命令导入到mysql8.0

2019-07-25

1.6K0

mysql语句执行顺序

云数据库 SQL Server 数据库 sql

from->join->on->where->group by->avg\sum...->having->select->distinct->order by

2019-07-25

2.9K0

centos7编译安装MySQL8问题记录

gcc linux 打包

Please install the appropriate openssl developer package.

2019-07-25

9880

centos7升级gcc

gcc https centos http 网络安全

centos7自带的gcc版本是4.8,通过gcc官网安装手册可知，依赖文件太多了，手动升级安装太繁琐。可以通过安装devtoolset的方式间接升级gcc至高版本

2019-07-25

4.5K3

centos强行卸载系统自带依赖包

有的时候卸载rpm包会被阻止，因为要卸载的包被其他包依赖，因此我们需要忽略依赖强制卸载

2019-07-25

1.1K0

Java8 lambda表达式小记

按照Java8函数式接口的定义，其只能有一个抽象方法，否则就不是函数式接口，就无法使用Lambda表达式。

2019-07-25

2730

gitlab配置https方式访问

git SSL 证书 https

前提：gitlab我安装的版本是13.*，已可以通过域名访问。 mkdir /etc/gitlab/ssl cp server.crt server.key /etc/gitlab/ssl vim /etc/gitlab/gitlab.rb 修改内容如下： nginx['ssl_certificate'] = "/etc/gitlab/ssl/ebyh.crt" nginx['ssl_certificate_key'] = "/etc/gitlab/ssl/ebyh.key" external_ur

2019-07-25

4.6K0

elasticsearch单机测试配置小记

Elasticsearch Service

修改elasticsearch目录下的./config/elasticsearch.yml，host localhost改成本服务器机器ip

2019-07-25

4790

Failed to read artifact descriptor解决小记

在使用Eclipse开发maven工程过程中，添加依赖经常会出现Failed to read artifact descriptor *.jar的错误，但是打开被maven本地仓库对应的文件夹却还能找到这个不能被读到的包. 通常都习惯去右击maven选择update Project，但是这个方式却不奏效，本地确实存在这个jar包。查看jar包所在文件夹，发现有lastupdate文件产生，用编辑器查看该文件，报错：无法连接远程仓库，那么删掉这个包所在的文件夹。重新update Project，一般

2019-07-25

7.1K0

centos7开放防火墙小记

命令行工具 http

开启某端口 firewall-cmd --get-active-zones firewall-cmd --zone=public --add-port=8081/tcp --permanent firewall-cmd --reload firewall-cmd --query-port=8081/tcp 开启HTTP服务 firewall-cmd --query-service http firewall-cmd --add-service=http > 临时 firewall-

2019-07-25

4120

Windows查看局域网内在线主机ip

for /L %i IN (1,1,254) DO ping -w 2 -n 1 192.168.1.%i

2019-07-25

3.8K0

Java静态代码块执行方法和顺序

执行代码块格式： static{ procudure... } 特点：随着类的加载而执行，且只执行一次，并优先于主函数。用于给类初始化。执行顺序：示例：静态代码块随着类的加载而加载有多个静态代码块的，按代码块前后顺序加载一个代码块，只执行一次 class StaticCode1{ static{ System.out.println("x"); } } public class StaticDemo1{ static{

2019-07-25

1.6K0

MySQL存储引擎小记

存储云数据库 SQL Server 数据库 sql

InnoDB: mysql默认的支持事务的存储引擎墙裂建议使用 MyISAM： MySQL5.1及以前默认的存储引擎优点是性能表现比较好，而且支持压缩表，省空间缺点是不支持事务，只能锁整个表没看懂部分：关于索引关于key 关于并发插入

2019-07-25

1.1K0

禁止crontab向用户发送邮件

定时条目后追加 >/dev/null 2>&1

2019-07-25

9300

点击加载更多

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态