Neo4j无休止的慢节点创建

Question

有数据集在. csv文件格式

"title"|year|"word"
"Into the Wild"|2007|"abandoned-bus"
"Into the Wild"|2007|"adolescence"
"Into the Wild"|2007|"adoption"

这个文件有超过4百万行。

我在远程超级计算机上运行数据库，我使用ssh隧道连接。我创建2个索引：

CREATE INDEX ON :MOVIE(title)
CREATE INDEX ON :KEYWORD(word)

然后执行查询：

USING PERIODIC COMMIT
LOAD CSV WITH HEADERS FROM "file:c:/Users/.../Data/rels.csv" AS csv
FIELDTERMINATOR '|'
MERGE (m:MOVIE {title:csv.title })
ON CREATE SET m.year = toInt(csv.year)
MERGE (k:KEYWORD {word:csv.word})

过了一段时间，我不知道一个小时，有关查询执行的信息消失或出现未知错误。但是当我localhost:7474/webadmin统计数据时，节点数量增长非常缓慢——大约10秒内增加5-8个节点。

当我执行查询时：（我可以，因为没有显示正在运行的查询）

match (m)
return count(m)

大约有79K个节点。但在21小时内，这一数字正在增加。我需要创建大约120万个节点，然后在它们之间建立大约400万个关系。当我进行基本计算时，创建120万个节点将持续大约13天。我真的不想知道建立400万人的关系会持续多久。

发生了什么事？怎么扣？我能做什么呢？请帮忙。

注:

我以前已经创建了电影和关键字的节点，并且是从单独的csv文件中创建的，只包含电影或关键字，没有使用定期提交，而是手动选择了大约60K行并对其执行查询。但是我把它们全部删除了，以便在2个查询中使用关系，而不需要分割csv文件。无法想象手动将4M行文件划分为60K行文件。

Answer 1

我稍微改变了一下程序。

>

从仅包含关键字的关键字csv加载所有160K关键字（几毫秒）

使用PERIODIC COMMIT 1000 LOAD CSV with HEADERS from'file： c：/.../kw.csv'as csv CREATE（： KEYWORD{word：csv.word}）

从仅包含电影标题和年份（几秒钟）的电影csv加载所有200万部电影

使用定期提交1000从“file:c:/…”加载带有标题的CSV/压敏电阻。csv'作为csv创建（：MOVIE{title:csv.title，year:toInt（csv.year）}）

在MOVIE和KEYWORD上创建索引

CREATE INDEX ON:MOVIE（title）CREATE INDEX ON:MOVIE（year）CREATE INDEX ON:关键字（word）

从包含电影标题、年份和关键字的csv加载关系（这需要几个小时，但速度相当快，可以在webadmin界面中看到进展）

使用定期提交1000从“file:c:/…”加载带有标题的CSV/雷尔斯。csv'作为csv匹配（m:MOVIE{title:csv.title，year:toInt（csv.year）}）匹配（k:KEYWORD{word:csv.word}）合并（m）-[：HAS{weight:1}]-

希望这对将来的人有帮助。