csv.field_size_limit(sys.maxsize) OverflowError: Python int too large to convert to C long

203 阅读 0 评论 134 点赞

我是靠谱客的博主无奈世界，这篇文章主要介绍csv.field_size_limit(sys.maxsize) OverflowError: Python int too large to convert to C long，现在分享给大家，希望可以做个参考。

在运行torchtext.data.TabularDataset()时报错：csv.field_size_limit(sys.maxsize) OverflowError: Python int too large to convert to C long

在你电脑的某位置下的python3.XLibsite-packagestorchtextutils.py脚本里将

复制代码

1
2
3
4
5
6
7
8
9
10
11
12
13
maxInt = sys.maxsize
    while True:
        # decrease the maxInt value by factor 10
        # as long as the OverflowError occurs.
        try:
            csv.field_size_limit(maxInt)
            break
        except OverflowError:
            maxInt = int(maxInt / 10)

    csv.field_size_limit(sys.maxsize)

里面的csv.field_size_limit(sys.maxsize)注释掉，添加csv.field_size_limit(maxInt)即可