【E-23】ConnectionError: Error 32 while writing to socket. Broken pipe.

一、问题源头

dict1 = dict(zip(X_train_t,y_train_t))

r.hmset('name',dict1)

当数量到100 0000 时候会报错。后来试了下60 0000也会报错,50 0000不会出这种错误

二、原因

您可以考虑增加套接字超时等选项,以允许在服务器端传输和解析数据,以避免套接字超时或其他与套接字相关的问题。回答1。,没有神奇的标志,使一些优化来解决这个问题。

对于这个问题,我的建议是不要每次发送这么多条目,而是将操作批量处理成更小的块,每次在10 - 100万键之间,然后一个一个地发送批处理。RPUSH可能是您想要使用的。

https://github.com/andymccurdy/redis-py/issues/997

三、解决方案

使用少量多次送入。

原文地址:https://www.cnblogs.com/yifanrensheng/p/14175413.html