Python list.insert()多索引/列表列表 - python

出于性能原因,我想使用Python列表insert()方法。我将说明原因:

我的最终列表是31k * 31k矩阵:

w=31*10**3
h=31*10**3
distance_matrix = [[0 for x in range(w)] for y in range(h)]

我打算一次更新一次矩阵:

for i in range(len(index)):
                    for j in range(len(index)):
                        distance_matrix[index[i]][index[j]] = k[0][i][j]

显然,这不能很好地执行。

我想从一个空列表开始并逐渐填充它,以使计算在过程结束时变得很紧张(开始时很容易):

distance_matrix = []
for i in range(len(index)):
                    for j in range(len(index)):
                        distance_matrix.insert([index[i]][index[j]], k[0][i][j])

但是这种多索引或列表中插入似乎是不可能的。

您如何建议继续进行?我也研究了numpy数组,但到目前为止没有运气。

准确地说:这里是按索引更新(有序的)零索引大数组的问题。在DataFrame中,我可以使用自定义列/索引,但这在性能上是不可扩展的。

附加信息:
我将整个原始数据矩阵分为几部分,以并行计算距离矩阵。这个过程中的问题是再次将距离矩阵与计算值进行聚合。距离矩阵/数组很大,因此简单的列表插入或编辑将花费很长时间。

参考方案

我认为这种方法可以实现我的初衷:

distance_matrix = []
def dynamic_append(x,i,j,val):
    if((len(x)-1)<i):
        dif_x = i-len(x)+1
        for k in range(dif_x):
            x.append([])
        dif_y = j-len(x[i])+1
        for l in range(dif_y):
            x[i].append([])
    elif((len(x[i])-1)<j):
        dif_y = j-len(x[i])+1
        for l in range(dif_y):
            x[i].append([])
    x[i][j]=val
    return(x)

for i in range(len(index)):
                    for j in range(len(index)):
                        distance_matrix=dynamic_append(distance_matrix,index[i],index[j],k[0][i][j])

Python sqlite3数据库已锁定 - python

我在Windows上使用Python 3和sqlite3。我正在开发一个使用数据库存储联系人的小型应用程序。我注意到,如果应用程序被强制关闭(通过错误或通过任务管理器结束),则会收到sqlite3错误(sqlite3.OperationalError:数据库已锁定)。我想这是因为在应用程序关闭之前,我没有正确关闭数据库连接。我已经试过了: connectio…

将单个str字符转换为整数并将其保存在列表中时出错 - python

这是导致坐标初始化错误的代码:self.estate = "x" def set_estate(self, estate): self.estate = estate self.table[coordinate_line][coordinate_column].set_estate("!") 我收到此错误:list i…

Python:集群作业管理 - python

我在具有两个阶段的计算群集(Slurm)上运行python脚本,它们是顺序的。我编写了两个python脚本,一个用于阶段1,另一个用于阶段2。每天早上,我检查所有第1阶段的工作是否都以视觉方式完成。只有这样,我才开始第二阶段。通过在单个python脚本中组合所有阶段和作业管理,是否有一种更优雅/自动化的方法?我如何知道工作是否完成?工作流程类似于以下内容:w…

Python-Excel导出 - python

我有以下代码:import pandas as pd import requests from bs4 import BeautifulSoup res = requests.get("https://www.bankier.pl/gielda/notowania/akcje") soup = BeautifulSoup(res.cont…

Python:传递记录器是个好主意吗? - python

我的Web服务器的API日志如下:started started succeeded failed 那是同时收到的两个请求。很难说哪一个成功或失败。为了彼此分离请求,我为每个请求创建了一个随机数,并将其用作记录器的名称logger = logging.getLogger(random_number) 日志变成[111] started [222] start…