报表工具是一个历史比较悠久的软件类产品了，已经有 20 年以上的发展历史了，在这 20 多年中，产品在不断的更新迭代，不断的随着需求的改变而进步完善，持续发挥着自己的价值
在服务设计中，经常遇到的一个问题就是如何生成一个全局唯一的ID，例如订单号，流水号等。对于ID的要求主要有以下几点：
报表工具是一个历史比较悠久的软件类产品了，已经有20年以上的发展历史了，在这20多年中，产品在不断的更新迭代，不断的随着需求的改变而进步完善，持续发挥着自己的价值
看到好些人在写更新缓存数据代码时，先删除缓存，然后再更新数据库，而后续的操作会把数据再装载的缓存中。然而，这个是逻辑是错误的。试想，两个并发操作，一个是更新操作，另一个是查询操作，更新操作删除缓存后，查询操作没有命中缓存，先把老数据读出来后放到缓存中，然后更新操作更新了数据库。于是，在缓存中的数据还是老的数据，导致缓存中的数据是脏的，而且还一直这样脏下去了。
年底了，确实有很多默默看机会的盆友，开始躁动了起来。身边很多选手也不例外，身边的 S 哥为了彰显自己牛掰，简历上斗胆撂了一句“熟练运用算法于应用中”，但是当面试官问起时，S 哥却被问的一愣一愣哒。
不知道大家在工作中还有没有写过JDBC，我在大三去过一家小公司实习，里边用的就是JDBC，只不过它封装了几个工具类。写代码的时候还是能感受到「这是真真实实的JDBC代码」
本系列文章将整理到我在GitHub上的《Java面试指南》仓库，更多精彩内容请到我的仓库里查看
今天这个坑可能以后你也会遇到, 随着爬取数据量的增加, 以及爬取的网站数据字段的变化, 以往在爬虫入门时使用的方法局限性可能会骤增.
汇总篇：http://www.cnblogs.com/dunitian/p/4822808.html#tsql 概 述：http://www.cnblogs.com/dunitian/p/60413
缓存(也成为cache)的作用是为了减去数据库的压力,提高数据库的性能,缓存实现的原理是从数据库中查询处理的对象再使用完后不要销毁,而是储存在内存(缓存)中,当再次需要获取该对象的时,直接从内存(缓存)中直接获取,不在向数据库执行select语句,从而减少了对数据库的查询次数,因此提高了数据库的性能,缓存是使用Map集合缓存数据的
有过多年应用开发经验的同学大都会体验过数据库 IO 比较慢的情况，但到底会慢到什么程度，特别是和其它读写数据的手段相比的差距，可能很多人还没有感性认识。 Java 是普遍采用的应用开发技术，我们来实际测试一下，Java 程序从 Oracle 和 MySQL 这两种典型数据库中读数的性能，并和读文本文件对比。 用国际标准 TPCH 的工具生成数据表，选用其中的 customer 表，3000 万行，8 个字段。生成的原始文本文件有 4.9G。将这些数据导入到 Oracle 和 MySQL 中。 硬件环境是单台 2CPU 共 16 核的服务器，文本文件和数据库都在 SSD 硬盘上。所有测试都在本机完成，没有实质上的网络传输时间。
优化代码实现是第一位的，特别是一些不合理的复杂实现。如果结合需求能从代码实现的角度，使用更高效的算法或方案实现，进而解决问题，那是最简单有效的。
不仅新手，包括一些有经验的程序员还是比较迷茫，究竟我该用哪种类型来存储日期时间呢？
Java在游戏服务器开发中的应用 随着游戏市场的兴起，特别是网页游戏、手机游戏的崛起，对游戏开发技术的需求越来越多。网络游戏开发是一个庞大的体系，总体来说是客户端与服务器端。客户端是玩家接触的游戏图像显示端，服务器是处理游戏运行中的各种数据，由于一台服务器要支持众多玩家的请求，所以服务器的性能高低决定了同一个游戏的用户数量。 我们公司选择使用Java做服务器开发语言，主要原因是：1.Java是跨平台的，方便部署；2.Java是安全的高级语言，可以提高开发效率；3.Java是面向对象的，代码可以重用；4.Ja
在毕业设计中，用Java写下了第一个爬虫。2019年工作之后，从Python的requests原生爬虫库，学到分布式爬虫框架Scrapy，写了60个左右爬虫。然后写了十几篇有关于爬虫的文章。但大多都是围绕着程序设计、功能模块的角度写的，今天就从数据的角度出发，来看看爬虫程序是如何开发的。
Statement接口可以用于执行sql语句，Statement对象需要通过Connection对象调用createStatement();方法来获得，得到Statement对象后才能调用执行SQL语句的方法。SQL语句分为两大类一类是更新语句一类是查询语句也就是DML和DQL，通过Statement对象调用executeUpdate方法可以执行DML类的SQL语句(更新语句)，调用executeQuery方法则可以执行DQL类的SQL语句也就是查询语句。
流式查询 指的是查询成功后不是返回一个集合而是返回一个迭代器，应用每次从迭代器取一条查询结果。流式查询的好处是能够降低内存使用。
报表的性能很重要，是一个总被谈及的问题，跑的慢的报表用户体验恶劣，无法忍受。解决这些慢的性能问题，也成了项目方和工程师头疼的事情。一出状况，就得安排技术好的，能力强的工程师去救火，本来利润就薄，还得不断的追加人工成本，而且工程师有时候也无能为力，并不是所有的性能问题都能靠程序员能力解决的
现代应用开发中，通常只用SQL实现简单的数据存取动作，而主要的计算过程和业务逻辑直接在应用程序中实现，主要原因在于：
“ 从Redis的安装到项目集成的两篇文章中，我们已经简单的了解到何如去用Redis的，再然后通过Redis和Mysql的查询性能对比和项目中如何合理运用Redis这两篇文章，又大致的明白为什么我们要用Redis以及Redis存在的一些问题。那么今天我想说一说我对Redis的一个感悟吧。能力有限，欢迎批评(反正关注后才能留言批评)。”
前段时间，写java爬虫来爬网易云音乐的评论。不料，爬了一段时间后ip被封禁了。由此，想到了使用ip代理，但是找了很多的ip代理网站，很少有可以用的代理ip。 于是，抱着边学习的心态，Fork了一个代理ip池。
下载地址：http://www.uzzf.com/soft/78115.html 下载后直接解压，无需安装，
类型别名可为 Java 类型设置一个缩写名字。 它仅用于 XML 配置，意在降低冗余的全限定类名书写。
平时我们使用缓存的方案，一般是在数据库中存储一份，在缓存中同步存储一份。当请求过来的视乎，可以先从缓存中取数据，如果有数据，直接返回缓存中的结果。如果缓存中没有数据，那么去数据库中取出数据，同时更新到缓存中，返回结果。如果数据库中也没有数据，可以直接返回空。
平时我们使用缓存的方案，一般是在数据库中存储一份，在缓存中同步存储一份。当请求过来的时候，可以先从缓存中取数据，如果有数据，直接返回缓存中的结果。如果缓存中没有数据，那么去数据库中取出数据，同时更新到缓存中，返回结果。如果数据库中也没有数据，可以直接返回空。
流式查询指的是查询成功后不是返回一个集合而是返回一个迭代器，应用每次从迭代器取一条查询结果。流式查询的好处是能够降低内存使用。
在写了七篇爬虫基础文章之后，终于写到心心念念的Scrapy了。Scrapy开启了爬虫2.0的时代，让爬虫以一种崭新的形式呈现在开发者面前。
最近在看配置中心的一些设计，好像基本都是五花八门，主要看的是还是携程的 Apollo 这个开源的配置中心项目。一直以来都觉得配置中心很重要，因为这对于灰度发布，线上实施干预都有非常重大的作用。但是嘛，你们都知道我有多懒，所以又一直没去好好了解一下，今天趁这个时间跟大家聊聊配置一个合格的配置中心应有的素养。 首先什么是配置？ 配置有什么获取方式？ 为什么需要实时变更配置？ 为什么需要配置中心 配置中心的分层有必要吗？ 实时变更配置的方式有几种？ 配置中心还有什么其他基本的素养？ 一个实时推送的配置中心架构
内容摘要 J2Cache 是开源中国开发的一个两级缓存框架，以高性能著称。那么它与同样是缓存框架的Ehcache和redis的区别在哪，又有哪些高性能的体现呢？开源中国社区创始人红薯，为你带来进行详细
缓存穿透，是指查询一个数据库一定不存在的数据。正常的使用缓存流程大致是，数据查询先进行缓存查询，如果key不存在或者key已经过期，再对数据库进行查询，并把查询到的对象，放进缓存。如果数据库查询对象为空，则不放进缓存。
1：在使用mysql数据库进行存储数据的时候，有时候，一个字段，要存储使用逗号分隔的多个数据，在查询的时候，传递的是一个keyword，需要在逗号分隔的字段中进行查询，这种情况怎么处理？
Java中的线程创建会带来显著的开销。创建线程消耗时间，增加了请求处理的延迟，并涉及JVM和操作系统的大量工作。为了减轻这些开销，引入了线程池的概念。
现在应用中的报表大都使用报表工具开发，成熟的报表工具提供了丰富的显示设置、图表类型、导出打印等功能可以简化报表开发，非常方便。但是，实际报表开发中还是经常碰到一些非常棘手的深层次问题，即使是已经熟练使用报表工具的开发老手也会很挠头。
运维兄弟沟通后，发现在每天凌晨1点都会出现若干次的业务操作失败，而数据库监控上并没有发现明显的异常。
Redis是什么大家都知道，一个非关系型数据库。大部分情况下我们使用Redis做缓存。使用缓存的情况一般是这样的：
点击上方“芋道源码”，选择“设为星标” 管她前浪，还是后浪？ 能浪的浪，才是好浪！ 每天 10:33 更新文章，每天掉亿点点头发... 源码精品专栏 原创 | Java 2021 超神之路，很肝~ 中文详细注释的开源项目 RPC 框架 Dubbo 源码解析 网络应用框架 Netty 源码解析 消息中间件 RocketMQ 源码解析 数据库中间件 Sharding-JDBC 和 MyCAT 源码解析 作业调度中间件 Elastic-Job 源码解析 分布式事务中间件 TCC-Transaction
go这些基础的东西，看起来很舒服，最起码对于写习惯java的人来讲，go真的很舒服，所以近一段时间可能一直连更，gin并没有直接封装操作MySQL的工具类，所以还是使用开源的工具
我写这个系统的主要是目的为了学习python，我对于技术学习的态度始终是：眼过千遍不如手过一遍。其次的目的是找一个便宜点的合适的房子。有更好，没有也无妨，不耽搁我学习。
实现爬虫技术的编程环境有很多种，Java、Python、C++等都可以用来爬虫。但很多人选择Python来写爬虫，为什么呢？因为Python确实很适合做爬虫，丰富的第三方库十分强大，简单几行代码便可实现你想要的功能。更重要的，Python也是数据挖掘和分析的好能手。那么，Python爬虫一般用什么框架比较好？
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
