Question

我正在Django中从upload form到views.py接收数据，并将其保存到数据库（MongoDB）。但是数据太大，因此需要大量时间和CPU。我发现了为什么要花这么长时间，但是我无法通过其他方式发送此数据... 这是我的代码

csv_file = request.FILES["csv_file"]
file_type = request.POST.get("type", "")
file_data = csv_file.read().decode("utf-8")
    if file_type == "val3":
        lines = file_data.split("\n")
        items = []
        item = ""
        for line in lines:
            column = line.split(',')
            try:
                item = kokyaku(        # HERE I'm calling `kokyaku` model every time
                顧客CD = int(column[0]),
                顧客補助CD = int(column[1]),
                顧客名称s=str(column[2]),
                顧客名称=str(column[3]),
                顧客名称カナ=str(column[4]),
                法人名称=str(column[5]),
                代表者名称=str(column[6]),
                住所=str(column[7]),
                電話番号=str(int(column[8])),
                地区名称=str(column[9]),
                データマッチ用電話番号=int(column[10]),
                契約状態=str(column[11])
                )
                items.append(item)

            except Exception as e:
                print(e)

        kokyaku.objects.bulk_create(items)

我每次循环都在调用kokyaku模型，所以它的速度非常慢...我试图像这样list中的dicts发送它

    item = {      
             "顧客CD" : int(column[0]),
             .....
            }
items.append(item)

所以我可以避免每次都调用kokyaku-它使处理过程更快，但是我的模型无法接收这种格式的数据...该怎么办？如果可能的话，我想使用bulk_create来加快速度... 这是我的模型。py

class kokyaku(models.Model):
    顧客CD = models.IntegerField(blank=True)
    顧客補助CD = models.IntegerField(blank=True)
    顧客名称s = models.TextField(blank=True)
    顧客名称 = models.TextField(blank=True)
    顧客名称カナ = models.TextField(blank=True)
    法人名称 = models.CharField(max_length=15, blank=True)
    代表者名称 = models.CharField(max_length=15, blank=True)
    住所 = models.TextField(blank=True)
    地区名称 = models.TextField(blank=True)
    電話番号 = models.IntegerField(blank=True)
    データマッチ用電話番号 = models.IntegerField(blank=True)
    契約状態 = models.CharField(max_length=2, blank=True)

    def __str__(self):
        string = str(self.顧客CD) + " - " + self.顧客名称
        return string

Answer 1

相反，最好是在for循环中一个接一个地插入，您可以从csv文件中创建一个项目列表，然后一次插入所有这些项目

将值插入数据库需要太长时间

1 个答案: