使用不正确的输入数据格式将数据从csv文件导入ClickHouse数据库表
我已经完成了连接Clickhouse服务器/客户端和创建表的任务。然后，我想将数据从csv导入到该表中。问题是ClickHouse中的DateTime类型需要这样的格式:YYYY-MM-DD hh:mm:ss，但是我下载的数据集只有这个时间格式:2016-01-13 6:15:00am(YYYY-MM-DD h:MM:ss)小时在我的数据集中只有h，应该是hh。请告诉我如何将csv文件中的所有数据转换成正确的数据格式(可能是Python代码或者别的什么)？请给我一个样品。
下面是我的数据库表：
CREATE TABLE ChicagoTaxi
(
taxi_id Int32,
trip_start_timestamp DateTime,
trip_end_timestamp DateTime,
trip_seconds Int16,
trip_miles Float32,
pickup_community_area Int8,
dropoff_community_area Int8,
fare Nullable(Float32),
tips Float32,
tolls Nullable(Float32),
extras Nullable(Float32),
trip_total Nullable(Float32),
payment_type Nullable(String),
company Int16,
pickup_latitude Int16,
pickup_longitude Int16,
dropoff_latitude Nullable(Float64),
dropoff_longitude Nullable(Float64)
) ENGINE = Log
共有1个答案
只需将best_effort作为参数传递
clickhouse-client --date_time_input_format=best_effort
-
想要知道更多东西吗？当你需要从表中查找某些值时，可以使用冗长的 case 语句或 selectors 实现，但更整洁的方式是使用 extlookup 函数实现。 在 puppetmaster 上可以使用 extlookup 函数查询外部的 CSV 文件，并返回匹配的数据片段。 将所有数据组织到一个单一的文件并将它从 Puppet 配置清单中分离出来， 可以使维护工作变得更简单，也便于与其他人分享：
-
我正在尝试将csv导入postgres。 我已经建立了我的表，我的csv文件的格式是这样的，它是明确的数据，我需要的是，但它不是以相同的方式格式化的表。 举个简单的例子：我有 表1与字段1字段2和字段3 表2包括字段1和字段2 我的csv有值1、值2、值3、值4 我想将值1加载到表1字段2中，将值2加载到表2字段1中，将值3加载到表1字段3中。 我想知道postgres内部或外部是否有任何工具用于
-
问题内容： 我有一个CSV文件，我想使用Python将此文件批量导入到sqlite3数据库中。该命令是“ .import .....”。但似乎不能这样工作。谁能给我一个在sqlite3中做事的例子吗？我正在使用Windows，以防万一。谢谢 问题答案：
-
我用的是Oracle 10g，SQL Developer我想知道有没有办法从CSV文件导入数据，其中字段用'，'分隔，行用' \n '结束使用SQL查询我尝试了这个查询 < code >将文件“C:/tmp.csv”中的数据加载到表CSVTEST2字段终止于“，”行终止于“\n”忽略1行(ID，FIRSTNAME，LASTNAME，birth date)； 但是它不起作用，我总是从sql开发人员那
-
问题内容： 是否可以将数据从XML文件导入到SQL数据库，如果可以，该怎么做。我有一个包含约50000条目的XML文件，我必须创建一个可以操纵该数据（主要是读取和比较）的应用程序- 因此，我担心的是使用该数量的数据进行操纵（而且很可能未来还会有更多）将会非常缓慢且效率低下。如果您认为还有其他选择会更好，请告知。谢谢 问题答案： 您可以使用SQL Server导入和导出向导。您还可以查看SQL Se
-
1. 数据准备 请提前准备好需要导入的数据，数据格式参考下图1： 图 1 数据格式 2.数据导入过程 2.1添加数据 打开OpenQuant2014，点击Data->Import->CSV or Text Files 进入到数据导入界面，如图2：