mysql 高并发更新计数问题

问题:功能为链接的点击计数,其他两个计数更新 还有两个内容表的插入,只插入链接对应的id,分4个库,共128个表,mysql每天有5000万次插入和5000万次更新操作,压力负载过大,需要想方案,对计数更新做合并处理,或者加cache,一定时间后flush到磁盘DB。

目前有batch处理程序,使用java.sql包原生类,但执行一段后就出现 java.sql.BatchUpdateException: Deadlock found when trying to get lock; try restarting transaction 错误

 

解决进行中,未完成。

解决步骤

show global status like 'Com%' 查询当前db的crud次数

mysqladmin -htestdb -P3306 -utest -p -S /tmp/mysql.sock -r -i 10 extended-status | egrep "Com_select | Com_insert|Com_update"

统计每十秒的查询 插入 更新次数

|Com_insert | 5210 |
| Com_insert_select | 0 |
| Com_select | 2033 |
| Com_update | 0 |
| Com_update_multi | 0 |

插入时出现 java.sql.BatchUpdateException: The table 'xxx' is full
有说是 tmp_table_size参数和max_heap_table_size参数问题

查看了硬盘发现是硬盘空间不足,100%使用,删除无用文件

原文地址:https://www.cnblogs.com/shenguanpu/p/2494707.html