是否有可能创建一个列表,其中包含另一个列表的一定比例的元素?

12 浏览
0 Comments

是否有可能创建一个列表,其中包含另一个列表的一定比例的元素?

我正在尝试从语料库中创建一个依赖解析器。这个语料库的格式是conll,所以我有一个函数可以读取文件并返回一个列表的列表,其中每个列表都是一个解析过的句子(我使用的语料库已经解析过了,我的任务是在这个解析中找到另一种替代方案)。我的教授要求我从这个语料库中随机挑选只有5%的句子,因为它太大了。

我尝试创建一个空列表并使用append函数,但我不知道如何通过索引来指定我想要从语料库的每100个句子中挑选出5个。

我为转换conll文件编写的函数如下:

import os, nltk, glob
def read_files(path):
    """
    Function to load Ancora Dependency corpora (GLICOM style)
    path = full path to the files
    returns de corpus in sentences
        each sentence is a list of tuples
            each tuple is a token with the follwoing info:
                index of the token in the sentence
                token
                lemma
                POS /es pot eliminar
                POS
                FEAT /es pot eliminar
                head
                DepRelation
    """
    corpus = []
    for f in glob.glob(path):
        sents1 = open(f).read()[185:-2].split('\n\n')
        sents2 = []
        for n in range(len(sents1)):
            sents2.append(sents1[n].split('\n'))
        sents3 = []
        for s in sents2:
            sent = []
            for t in s:
                sent.append(tuple(t.split('\t')))
            sents3.append(sent)
        corpus.extend(sents3)
    return corpus

我想要一种方法来选择语料库中每100个句子中的5个句子,这样我就可以得到一个只包含这些句子的列表的列表。

提前感谢!

0
0 Comments

从上述内容中,我们可以看到这样一个问题:如何创建一个由另一个列表元素的百分比构成的列表?

解决这个问题的方法是使用random.sample函数。在给定的例子中,首先定义了一个路径,然后使用read_files函数读取该路径下的文件并将其存储在corpus列表中。接下来,通过调用random.sample函数,从corpus列表中随机选择出一个百分比的元素,该百分比由corpus列表的长度除以20得到。最后,将得到的随机选择的元素构成的列表作为结果。

这个问题的出现可能是因为用户希望从一个较大的列表中,按照一定的比例选择出一部分元素,以满足特定的需求。使用random.sample函数可以轻松地实现这个目标,而不需要编写复杂的代码。

下面是解决这个问题的代码示例:

# 定义路径
path = "/path/to/files"
# 读取文件到corpus列表
corpus = read_files(path)
# 从corpus列表中选择出百分比的元素
selected_elements = random.sample(corpus, len(corpus) // 20)
# 输出结果
print(selected_elements)

在这个示例中,我们假设read_files函数已经定义,并且可以正确读取并返回路径下的文件列表。然后,我们使用random.sample函数从corpus列表中选择出了一个百分比的元素,并将结果存储在selected_elements列表中。最后,我们输出selected_elements列表的内容。

通过使用random.sample函数,我们可以轻松地创建一个由另一个列表元素百分比构成的列表,满足特定的需求。这种方法简单、高效,适用于各种编程语言和场景。

0
0 Comments

问题:是否可以创建一个列表,该列表由另一个列表中的一定比例的元素组成?

原因:提问者想要在一个循环中添加元素到列表中,并只选择原列表中的一定比例的元素。他们尝试使用取模运算符"%"来实现,但遇到了类型错误的问题。他们猜测可能是输入列表的格式问题,但并未得出确切结论。

解决方法:其他回答者给出了一些解决方法。其中一个回答建议将corpus.extend(sents3)改为corpus.append(sents3),因为Python对extendappend的处理方式不同。还有一个回答提到了[list_1] +[list_2]的用法可能会导致类型错误。

在这个的问题中,参与者还提到了代码中的一些细节和可能出现错误的地方,例如变量名的替换和代码中的其他操作。他们互相交流并试图找出问题所在。

提问者想要在一个循环中将另一个列表的一定比例的元素添加到新的列表中。然而,他们遇到了类型错误的问题,并尝试通过更改代码中的一些细节来解决。其他参与者提供了一些解决方法和可能的原因。整个讨论过程展示了他们的合作和共同解决问题的努力。

0