首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    python 统计MySQL大于100万的表

    一、需求分析 线上的MySQL服务器,最近有很多慢查询。需要统计出行数大于100万的表,进行统一优化。...通过查询mysql的information_schema数据库中INFODB_SYS_TABLESTATS表,它记录了innodb类型每个表大致的数据行数 2. select count(1) from... ip地址     user="root",     passwd="root",     port=3306,  # mysql 端口号,注意:必须是int类型     connect_timeout...    for i in order_dic:         # 遍历所有表         for j in order_dic[i]["table_list"]:             # 判断行数大于...100万时             if j['rows'] > 1000000:                 # 写入库名                 sheet1.write(num + 1

    1.5K20

    Python爬取100G级别,2000K以上数据量,用mysql还是mongodb?

    一个是100G的数据量用MySQL和MongoDB在存读取上有什么区别,另一个是数据本身的结构和你要进行的应用来考虑使用哪种数据库比较方便。...100G的数据量   目前来看100G的数据量其实对MySQL和MongoDB在存放都没有什么压力,如果你要经常读取,那么我建议你的MongoDB来做存储。...如果你对查询的速度要求不高,而且爬下来的数据是结构化数据,你又熟悉MySQL的语法及相关操作,完全可以用MySQL去存这个级别的数据量,就相当于你存储了一个大型Excel表格。   ...对于mongoDB来说,100G,2000W的数据量应该算是正常,管理上会比mysql简单。但是如果需要较强的事务性、一致性等,mongo可能就不能满足要求。   ...在MySQL中,主键的指定是在MySQL插入数据时指明PRIMARY KEY来定义的。当没有指定主键的时候,另一种工具——索引,相当于替代了主键的功能。

    3.2K150
    领券