设为首页 收藏本站
查看: 1460|回复: 0

[经验分享] Mysql的大字段问题

[复制链接]

尚未签到

发表于 2017-12-13 09:58:41 | 显示全部楼层 |阅读模式
  在对数据进行导入到新的机器时,出现错误 Row>  baidu了一下发现,是表中有多个text字段导致的。
  解决方式是在建表增加 ROW_FORMAT=COMPRESSED,然后再录入数据就正常了。
  详细问题的描述、解决参考:http://blog.sina.com.cn/s/blog_8e9cceee0101k65j.html
  原文如下:
  前段时间在项目压测的时候出现了mysql的大字段问题,导致数据层无法存储。各方找人求助,都无果,最后求助万能的google,找到国外高人的解决方案,一步步来,终于解决了。这后来也没写总结,只是写了一篇简单的有道云笔记,结果今天线上的版本又出了这个问题,才不免责怪自己怎么没有发一篇详细博文记录,以及及时的分享给兄弟们(没办法最近太忙了,忙出翔来了)。
【问题描述】最早mysql端报这个错Row> 今天线上版本的错误:Caused by: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Row> 【导致问题的原因】总结了下原因是因为mysql-innodb是按照page存储数据的,每个page max>但是innodb默认的approach(羚羊)存储格式会把每个blob字段的前864个字节存储在page里,所以你的blob超过一定数量的话,单行大小就会超过8k,所以就报错了【解决思路】解决方式是使用innodb的Barracuda(梭鱼) 存储格式这种格式对blob字段的处理方式是在page里头只存储一个20byte大小的指针,其它全存在溢出区,所以你轻易超不了8k 【详细步骤】1. 打开mysql的配置my.ini。在innodb配置出添加:innodb_file_per_table=1 DSC0000.jpg
  大概的意思就是打开mysql每张表都是独立存储空间的开关。
2. 然后命令检查下上述开关是否打开。show variables like '%per_table%'; DSC0001.jpg   如上图开关就打开了。
3. 设置mysql全局变量:innodb_file_format = Barracuda(梭鱼)命令:set GLOBAL innodb_file_format = 'Barracuda';然后检查下是否设置好了:命令:show GLOBAL VARIABLES LIKE '%file_format%'; DSC0002.jpg   如上就是好了
4. 设置对应表的属性:ROW_FORMAT=COMPRESSED然后检查下标的属性是否是你设置的:COMPRESSED 5. 如上步骤以后,就OK了 今天又让tx折腾一天,MD。长记性,再忙也要记录,要给团队分享,希望我们团队,我的兄弟们,我们公司积累越来越多的财富。【补充】1. 最后一定要检查下相关表的属性,一定要是COMPRESSED,如下图 DSC0003.jpg 这点一定要注意,这是导致线上事故的一个重要原因

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-423572-1-1.html 上篇帖子: mysql的三种驱动类型 下篇帖子: zipkin使用mysql保存数据
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表