数据写入接口
数据写入接口
WebSocket 接口
各语言连接器通过 taosAdapter 的 WebSocket 接口,能够实现 SQL 执行、无模式写入、参数绑定和数据订阅功能。参考 开发指南。
InfluxDB v1 接口
taosAdapter 兼容 InfluxDB v1 的写入和 ping 接口。
InfluxDB v1 数据写入
你可以使用任何支持 HTTP 协议的客户端访问 Restful 接口地址 http://<fqdn>:6041/influxdb/v1/write 来写入 InfluxDB 兼容格式的数据到 TDengine。
支持 InfluxDB 参数如下:
db指定 TDengine 使用的数据库名precisionTDengine 使用的时间精度uTDengine 用户名pTDengine 密码ttl自动创建的子表生命周期,以子表的第一条数据的 TTL 参数为准,不可更新。更多信息请参考 创建表文档的 TTL 参数。table_name_key自定义子表名使用的标签名,如果设置了该参数,则子表名将使用该标签对应的值。
注意:目前不支持 InfluxDB 的 token 验证方式,仅支持 Basic 验证和查询参数验证。 示例:
curl --request POST http://127.0.0.1:6041/influxdb/v1/write?db=test --user "root:taosdata" --data-binary "measurement,host=host1 field1=2i,field2=2.0 1577836800000000000"
InfluxDB v1 ping 接口
taosAdapter 兼容 InfluxDB v1 的 ping 接口,可用于健康检查与连通性探测。你可以使用任何支持 HTTP 协议的客户端访问 http://<fqdn>:6041/influxdb/v1/ping。
该接口支持 GET 和 HEAD 方法,无需认证,行为与 InfluxDB 1.x 的 /ping 保持一致:
- 响应头携带
X-InfluxDB-Version,值为 taosAdapter 的版本号。 - 默认返回
204 No Content,无响应体。 - 当查询参数
verbose的值非空且不为false或0(例如verbose=true)时,返回200 OK,响应体为 JSON 格式的版本信息,例如{"version":"3.4.0.0"}。
示例:
curl -i http://127.0.0.1:6041/influxdb/v1/ping
curl http://127.0.0.1:6041/influxdb/v1/ping?verbose=true
OpenTSDB JSON 和 telnet 格式写入
你可以使用任何支持 HTTP 协议的客户端访问 Restful 接口地址 http://<fqdn>:6041/<APIEndPoint> 来写入 OpenTSDB 兼容格式的数据到 TDengine。EndPoint 如下:
/opentsdb/v1/put/json/<db>
/opentsdb/v1/put/telnet/<db>
collectd 数据写入
collectd 使用插件机制可以以多种形式将采集到的监控数据写入到不同的数据存储软件。TDengine 支持写入 collectd write_tsdb 插件数据和 collectd 二进制数据。
collectd write_tsdb 插件是 collectd 官方提供的插件,支持将数据转为 OpenTSDB 协议格式发送到后端存储。
collectd write_tsdb 插件数据写入
配置 taosAdapter
- 在 taosAdapter 配置文件(默认位置为 /etc/taos/taosadapter.toml)中使能配置项
# 写入 Schemaless 数据时自动创建数据库
smlAutoCreateDB = true
[opentsdb_telnet]
enable = true
maxTCPConnections = 250
tcpKeepAlive = false
dbs = ["opentsdb_telnet", "collectd", "icinga2", "tcollector"]
ports = [6046, 6047, 6048, 6049]
user = "root"
password = "taosdata"
其中 taosAdapter 默认写入的数据库名称为 collectd,也可以修改 taosAdapter 配置文件 dbs 项来指定不同的名称。user 和 password 填写实际 TDengine 配置的值。修改过配置文件 taosAdapter 需重新启动。
smlAutoCreateDB 配置项用于使能自动创建数据库功能,设置为 true 时,taosAdapter 会在接收到数据时自动创建对应的数据库(如果不存在)。
- 使用 taosAdapter 命令行参数或设置环境变量启动的方式,使能 taosAdapter 接收 collectd 数据功能,具体细节请参考 taosAdapter 的参考手册。
配置 collectd
修改 collectd 配置文件(默认位置 /etc/collectd/collectd.conf)相关配置项。
LoadPlugin write_tsdb
<Plugin write_tsdb>
<Node>
Host "<taosAdapter's host>"
Port "<port for collectd write_tsdb plugin>"
...
</Node>
</Plugin>
其中 <taosAdapter's host> 填写运行 taosAdapter 的服务器域名或 IP 地址。<port for collectd write_tsdb plugin> 填写 taosAdapter 用于接收 collectd write_tsdb 插件的数据(默认为 6047)。
LoadPlugin write_tsdb
<Plugin write_tsdb>
<Node>
Host "127.0.0.1"
Port "6047"
HostTags "status=production"
StoreRates false
AlwaysAppendDS false
</Node>
</Plugin>
然后重启 collectd:
systemctl restart collectd
collectd 二进制数据写入
配置 taosAdapter
-
在 taosAdapter 配置文件(默认位置为 /etc/taos/taosadapter.toml)中使能配置项
...
[collectd]
enable = true
port = 6045
db = "collectd"
user = "root"
password = "taosdata"
worker = 10
...其中 taosAdapter 默认写入的数据库名称为
collectd,也可以修改 taosAdapter 配置文件 db 项来指定不同的名称。user 和 password 填写实际 TDengine 配置的值。修改过配置文件 taosAdapter 需重新启动。 -
使用 taosAdapter 命令行参数或设置环境变量启动的方式,使能 taosAdapter 接收 collectd 数据功能,具体细节请参考 taosAdapter 的参考手册。
配置 collectd
修改 collectd 配置文件(默认位置 /etc/collectd/collectd.conf)相关配置项。
LoadPlugin network
<Plugin network>
Server "<taosAdapter's host>" "<port for collectd direct>"
</Plugin>
其中 <taosAdapter's host> 填写运行 taosAdapter 的服务器域名或 IP 地址。<port for collectd direct> 填写 taosAdapter 用于接收 collectd 数据的端口(默认为 6045)。
示例如下:
LoadPlugin network
<Plugin network>
Server "127.0.0.1" "6045"
</Plugin>
然后重启 collectd:
systemctl restart collectd
StatsD 数据写入
配置 taosAdapter
配置 taosAdapter 接收 StatsD 数据的方法:
-
在 taosAdapter 配置文件(默认位置 /etc/taos/taosadapter.toml)中使能配置项
# 写入 Schemaless 数据时自动创建数据库
smlAutoCreateDB = true
[statsd]
enable = true
port = 6044
db = "statsd"
user = "root"
password = "taosdata"
worker = 10
gatherInterval = "5s"
protocol = "udp"
maxTCPConnections = 250
tcpKeepAlive = false
allowPendingMessages = 50000
deleteCounters = true
deleteGauges = true
deleteSets = true
deleteTimings = true其中 taosAdapter 默认写入的数据库名称为
statsd,也可以修改 taosAdapter 配置文件 db 项来指定不同的名称。user 和 password 填写实际 TDengine 配置的值。修改过配置文件 taosAdapter 需重新启动。smlAutoCreateDB配置项用于使能自动创建数据库功能,设置为 true 时,taosAdapter 会在接收到数据时自动创建对应的数据库(如果不存在)。 -
使用 taosAdapter 命令行参数或设置环境变量启动的方式,使能 taosAdapter 接收 StatsD 数据功能,具体细节请参考 taosAdapter 的参考手册
配置 StatsD
使用 StatsD 需要下载其源代码。其配置文件请参考其源代码下载到本地的根目录下的示例文件 exampleConfig.js 进行修改。其中 <taosAdapter's host> 填写运行 taosAdapter 的服务器域名或 IP 地址,<port for StatsD> 请填写 taosAdapter 接收 StatsD 数据的端口(默认为 6044)。
backends 部分添加 "./backends/repeater"
repeater 部分添加 { host:'<taosAdapter's host>', port: <port for StatsD>}
示例配置文件:
{
port: 8125
, backends: ["./backends/repeater"]
, repeater: [{ host: '127.0.0.1', port: 6044}]
}
增加如下内容后启动 StatsD(假设配置文件修改为 config.js)。
npm install
node stats.js config.js &
icinga2 OpenTSDB writer 数据写入
配置 taosAdapter
配置 taosAdapter 接收 icinga2 数据的方法:
-
在 taosAdapter 配置文件(默认位置 /etc/taos/taosadapter.toml)中使能配置项
# 写入 Schemaless 数据时自动创建数据库
smlAutoCreateDB = true
[opentsdb_telnet]
enable = true
maxTCPConnections = 250
tcpKeepAlive = false
dbs = ["opentsdb_telnet", "collectd", "icinga2", "tcollector"]
ports = [6046, 6047, 6048, 6049]
user = "root"
password = "taosdata"其中 taosAdapter 默认写入的数据库名称为
icinga2,也可以修改 taosAdapter 配置文件 dbs 项来指定不同的名称。user 和 password 填写实际 TDengine 配置的值。修改过 taosAdapter 需重新启动。smlAutoCreateDB配置项用于使能自动创建数据库功能,设置为 true 时,taosAdapter 会在接收到数据时自动创建对应的数据库(如果不存在)。 -
使用 taosAdapter 命令行参数或设置环境变量启动的方式,使能 taosAdapter 接收 icinga2 数据功能,具体细节请参考 taosAdapter 的参考手册
配置 icinga2
-
使能 icinga2 的 opentsdb-writer参考链接
-
修改配置文件
/etc/icinga2/features-enabled/opentsdb.conf填写<taosAdapter's host>为运行 taosAdapter 的服务器的域名或 IP 地址,<port for icinga2>填写 taosAdapter 支持接收 icinga2 数据的相应端口(默认为 6048)object OpenTsdbWriter "opentsdb" {
host = "<taosAdapter's host>"
port = <port for icinga2>
}示例文件:
object OpenTsdbWriter "opentsdb" {
host = "127.0.0.1"
port = 6048
}
TCollector 数据写入
配置 taosAdapter
配置 taosAdapter 接收 TCollector 数据的方法:
-
在 taosAdapter 配置文件(默认位置 /etc/taos/taosadapter.toml)中使能配置项
# 写入 Schemaless 数据时自动创建数据库
smlAutoCreateDB = true
[opentsdb_telnet]
enable = true
maxTCPConnections = 250
tcpKeepAlive = false
dbs = ["opentsdb_telnet", "collectd", "icinga2", "tcollector"]
ports = [6046, 6047, 6048, 6049]
user = "root"
password = "taosdata"其中 taosAdapter 默认写入的数据库名称为
tcollector,也可以修改 taosAdapter 配置文件 dbs 项来指定不同的名称。user 和 password 填写实际 TDengine 配置的值。修改过配置文件 taosAdapter 需重新启动。smlAutoCreateDB配置项用于使能自动创建数据库功能,设置为 true 时,taosAdapter 会在接收到数据时自动创建对应的数据库(如果不存在)。 -
使用 taosAdapter 命令行参数或设置环境变量启动的方式,使能 taosAdapter 接收 tcollector 数据功能,具体细节请参考 taosAdapter 的参考手册
配置 TCollector
使用 TCollector 需下载其源代码。其配置项在其源代码中。注意:TCollector 各个版本区别较大,这里仅以当前 master 分支最新代码 (git commit: 37ae920) 为例。
修改 collectors/etc/config.py 和 tcollector.py 两个文件中相应内容。将原指向 OpenTSDB 宿主机的地址修改为 taosAdapter 被部署的服务器域名或 IP 地址,修改端口为 taosAdapter 支持 TCollector 使用的相应端口(默认为 6049)。
示例为源代码修改内容的 git diff 输出:
index e7e7a1c..ec3e23c 100644
--- a/collectors/etc/config.py
+++ b/collectors/etc/config.py
@@ -59,13 +59,13 @@ def get_defaults():
'http_password': False,
'reconnectinterval': 0,
'http_username': False,
- 'port': 4242,
+ 'port': 6049,
'pidfile': '/var/run/tcollector.pid',
'http': False,
'http_api_path': "api/put",
'tags': [],
'remove_inactive_collectors': False,
- 'host': '',
+ 'host': '127.0.0.1',
'logfile': '/var/log/tcollector.log',
'cdir': default_cdir,
'ssl': False,
diff --git a/tcollector.py b/tcollector.py
index 21f9b23..4c71ba2 100755
--- a/tcollector.py
+++ b/tcollector.py
@@ -64,7 +64,7 @@ ALIVE = True
# exceptions, something is not right and tcollector will shutdown.
# Hopefully some kind of supervising daemon will then restart it.
MAX_UNCAUGHT_EXCEPTIONS = 100
-DEFAULT_PORT = 4242
+DEFAULT_PORT = 6049
MAX_REASONABLE_TIMESTAMP = 2209212000 # Good until Tue 3 Jan 14:00:00 GMT 2040
# How long to wait for datapoints before assuming
# a collector is dead and restarting it
@@ -943,13 +943,13 @@ def parse_cmdline(argv):
'http_password': False,
'reconnectinterval': 0,
'http_username': False,
- 'port': 4242,
+ 'port': 6049,
'pidfile': '/var/run/tcollector.pid',
'http': False,
'http_api_path': "api/put",
'tags': [],
'remove_inactive_collectors': False,
- 'host': '',
+ 'host': '127.0.0.1',
'logfile': '/var/log/tcollector.log',
'cdir': default_cdir,
'ssl': False,
OpenMetrics 采集写入
OpenMetrics 是一种由 CNCF(云原生计算基金会)支持的开放标准,专注于规范指标数据的采集和传输,是云原生生态中监控和可观测性系统的核心规范之一。
从 3.3.7.0 版本开始,taosAdapter 支持 OpenMetrics v1.0.0 数据采集与写入,同时兼容 Prometheus 0.0.4 协议,确保与 Prometheus 生态的无缝集成。
启用 OpenMetrics 数据采集写入需要以下步骤:
- 启用 taosAdapter 的配置
open_metrics.enable - 设置 OpenMetrics 的相关配置
- 重新启动 taosAdapter
Prometheus remote_read 和 remote_write
首先创建一个 Prometheus 数据库,用于存储 Prometheus 指标数据:
CREATE DATABASE prometheus_data;
配置 Prometheus 是通过编辑 Prometheus 配置文件 prometheus.yml(默认位置 /etc/prometheus/prometheus.yml)完成的。
配置第三方数据库地址
将其中的 remote_read url 和 remote_write url 指向运行 taosAdapter 服务的服务器域名或 IP 地址,REST 服务端口(taosAdapter 默认使用 6041),以及希望写入 TDengine 的数据库名称,并确保相应的 URL 形式如下:
- remote_read url :
http://<taosAdapter's host>:<REST service port>/prometheus/v1/remote_read/<database name> - remote_write url :
http://<taosAdapter's host>:<REST service port>/prometheus/v1/remote_write/<database name>
配置 Basic 验证
- username: <TDengine's username>
- password: <TDengine's password>
prometheus.yml 文件中 remote_write 和 remote_read 相关部分配置示例
remote_write:
- url: "http://localhost:6041/prometheus/v1/remote_write/prometheus_data"
basic_auth:
username: root
password: taosdata
remote_read:
- url: "http://localhost:6041/prometheus/v1/remote_read/prometheus_data"
basic_auth:
username: root
password: taosdata
remote_timeout: 10s
read_recent: true
node_exporter 采集写入
从 3.3.7.0 版本开始,可以使用 OpenMetrics 插件替代 node_exporter 进行数据采集和写入。
Prometheus 使用的由 *NIX 内核暴露的硬件和操作系统指标的输出器。
- 启用 taosAdapter 的配置 node_exporter.enable
- 设置 node_exporter 的相关配置
- 重新启动 taosAdapter
JSON 数据写入
taosAdapter 从 3.4.0.0 版本开始支持通过 RESTful 接口写入 JSON 格式的数据到 TDengine。你可以使用任何支持 HTTP 协议的客户端通过 POST RESTful 接口地址 http://<fqdn>:6041/input_json/v1/{endpoint} 来写入 JSON 格式的数据到 TDengine。
JSON 格式要求为一个包含多行数据的数组,每行数据为一个 JSON 对象。每个 JSON 对象对应一条数据记录,数据提取可通过配置文件进行定义,如果输入 JSON 格式与要求不符,可以通过 JSONata 表达式进行转换(支持 JSONata 1.5.4 版本)。
一个配置样例如下(默认配置文件路径:/etc/taos/taosadapter.toml):
[input_json]
enable = true
[[input_json.rules]]
endpoint = "rule1"
dbKey = "db"
superTableKey = "stb"
subTableKey = "table"
timeKey = "time"
timeFormat = "datetime"
timeZone = "UTC"
transformation = '''
$sort(
(
$ts := time;
$each($, function($value, $key) {
$key = "time" ? [] : (
$each($value, function($groupValue, $groupKey) {
$each($groupValue, function($deviceValue, $deviceKey) {
{
"db": "test_input_json",
"time": $ts,
"location": $key,
"groupid": $number($split($groupKey, "_")[1]),
"stb": "meters",
"table": $deviceKey,
"current": $deviceValue.current,
"voltage": $deviceValue.voltage,
"phase": $deviceValue.phase
}
})[]
})[]
)
})
).[*][*],
function($l, $r) {
$l.table > $r.table
}
)
'''
fields = [
{key = "current", optional = false},
{key = "voltage", optional = false},
{key = "phase", optional = false},
{key = "location", optional = false},
{key = "groupid", optional = false},
]
修改配置文件后需要重启 taosAdapter 服务以使配置生效。
完整配置参数说明:
input_json.enable:启用或禁用 JSON 数据写入功能(默认值:false)。input_json.rules:定义 JSON 数据写入规则的数组,可以配置多个规则。endpoint:指定 RESTful 接口的端点名称,只允许大小写字母与数字以及_和-。db:指定写入数据的目标数据库名称,禁止包含反引号`。dbKey:指定 JSON 对象中用于表示数据库名称的键名,与db不可同时配置。superTable:指定写入数据的目标超级表名称,禁止包含反引号`。superTableKey:指定 JSON 对象中用于表示超级表名称的键名,与superTable不可同时配置。subTable:指定写入数据的目标子表名称。subTableKey:指定 JSON 对象中用于表示子表名称的键名,与subTable不可同时配置。timeKey:指定 JSON 对象中用于表示时间戳的键名,如果不设置则默认ts。timeFormat:指定时间解析的格式,当 timeKey 设置时有效,具体支持格式见时间解析格式说明。timezone:指定时间戳的时区,当 timeKey 设置时有效,IANA 时区格式,默认值 taosAdapter 所在机器时区。transformation:使用 JSONata 表达式对输入的 JSON 数据进行转换,以符合 TDengine 的数据写入要求,具体语法见 JSONata 文档。fields:定义要写入的字段列表,每个字段包含以下属性:key:指定 JSON 对象中用于表示字段值的键名,需要与数据库字段名相同,禁止包含反引号`。optional:指定该字段是否为可选字段,默认值为false,表示该字段为必填字段,如果key不存在时会报错。如果设置为true,则表示该字段为可选字段,如果key不存在则不会报错,生成 SQL 时将不会包含该列。
数据写入前需要确保目标数据库和超级表已经创建完成,假设已经创建了如下数据库和超级表:
create database test_input_json;
create table test_input_json.meters (ts timestamp, current float, voltage int, phase float) tags (location nchar(64), `groupid` int);
请求示例:
```shell
curl -L 'http://localhost:6041/input_json/v1/rule1' \
-u root:taosdata \
-d '{"time":"2025-11-04 09:24:13.123","Los Angeles":{"group_1":{"d_001":{"current":10.5,"voltage":220,"phase":30},"d_002":{"current":15.2,"voltage":230,"phase":45},"d_003":{"current":8.7,"voltage":210,"phase":60}},"group_2":{"d_004":{"current":12.3,"voltage":225,"phase":15},"d_005":{"current":9.8,"voltage":215,"phase":75}}},"New York":{"group_1":{"d_006":{"current":11.0,"voltage":240,"phase":20},"d_007":{"current":14.5,"voltage":235,"phase":50}},"group_2":{"d_008":{"current":13.2,"voltage":245,"phase":10},"d_009":{"current":7.9,"voltage":220,"phase":80}}}}'
返回结果示例:
{
"code": 0,
"desc": "",
"affected": 9
}
code:表示请求的状态码,0表示成功,非0表示失败。desc:表示请求的描述信息,如果code非0,则会包含错误信息。affected:表示成功写入的记录数。
检查写入结果:
taos> select tbname,* from test_input_json.meters order by tbname asc;
tbname | ts | current | voltage | phase | location | groupid |
======================================================================================================================================================================
d_001 | 2025-11-04 17:24:13.123 | 10.5 | 220 | 30 | Los Angeles | 1 |
d_002 | 2025-11-04 17:24:13.123 | 15.2 | 230 | 45 | Los Angeles | 1 |
d_003 | 2025-11-04 17:24:13.123 | 8.7 | 210 | 60 | Los Angeles | 1 |
d_004 | 2025-11-04 17:24:13.123 | 12.3 | 225 | 15 | Los Angeles | 2 |
d_005 | 2025-11-04 17:24:13.123 | 9.8 | 215 | 75 | Los Angeles | 2 |
d_006 | 2025-11-04 17:24:13.123 | 11 | 240 | 20 | New York | 1 |
d_007 | 2025-11-04 17:24:13.123 | 14.5 | 235 | 50 | New York | 1 |
d_008 | 2025-11-04 17:24:13.123 | 13.2 | 245 | 10 | New York | 2 |
d_009 | 2025-11-04 17:24:13.123 | 7.9 | 220 | 80 | New York | 2 |
TDengine 中的数据已经成功写入,TDengine 配置为 UTC+8 时区,因此时间显示为 2025-11-04 17:24:13.123。
时间解析格式说明
时间格式预设以下几种类型:
unix:表示时间戳为秒级别的整数或浮点数。unix_ms:表示时间戳为毫秒级别的整数或浮点数。unix_us:表示时间戳为微秒级别的整数或浮点数。unix_ns:表示时间戳为纳秒级别的整数或浮点数。ansic:表示时间格式为Mon Jan _2 15:04:05 2006。rubydate:表示时间格式为Mon Jan 02 15:04:05 -0700 2006。rfc822z:表示时间格式为02 Jan 06 15:04 -0700。rfc1123z:表示时间格式为Mon, 02 Jan 2006 15:04:05 -0700。rfc3339:表示时间格式为2006-01-02T15:04:05Z07:00。rfc3339nano:表示时间格式为2006-01-02T15:04:05.999999999Z07:00。stamp:表示时间格式为Jan _2 15:04:05。stampmilli:表示时间格式为Jan _2 15:04:05.000。datetime:表示时间格式为2006-01-02 15:04:05.999999999。
如果不满足要求可以按照 strftime 解析方式进行扩展。
transformation 示例说明
对于复杂的 JSON 数据格式,可以通过配置 transformation 使用 JSONata 表达式对输入的 JSON 数据进行转换,以符合 TDengine 的数据写入要求。可以通过 JSONata 在线编辑器 来调试和验证 JSONata 表达式。
假设输入的 JSON 数据如下:
{
"time": "2025-11-04 09:24:13.123",
"Los Angeles": {
"group_1": {
"d_001": {
"current": 10.5,
"voltage": 220,
"phase": 30
},
"d_002": {
"current": 15.2,
"voltage": 230,
"phase": 45
},
"d_003": {
"current": 8.7,
"voltage": 210,
"phase": 60
}
},
"group_2": {
"d_004": {
"current": 12.3,
"voltage": 225,
"phase": 15
},
"d_005": {
"current": 9.8,
"voltage": 215,
"phase": 75
}
}
},
"New York": {
"group_1": {
"d_006": {
"current": 11.0,
"voltage": 240,
"phase": 20
},
"d_007": {
"current": 14.5,
"voltage": 235,
"phase": 50
}
},
"group_2": {
"d_008": {
"current": 13.2,
"voltage": 245,
"phase": 10
},
"d_009": {
"current": 7.9,
"voltage": 220,
"phase": 80
}
}
}
}
转换表达式使用样例中的配置,转换后的数据如下:
[
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "Los Angeles",
"groupid": 1,
"stb": "meters",
"table": "d_001",
"current": 10.5,
"voltage": 220,
"phase": 30
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "Los Angeles",
"groupid": 1,
"stb": "meters",
"table": "d_002",
"current": 15.2,
"voltage": 230,
"phase": 45
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "Los Angeles",
"groupid": 1,
"stb": "meters",
"table": "d_003",
"current": 8.7,
"voltage": 210,
"phase": 60
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "Los Angeles",
"groupid": 2,
"stb": "meters",
"table": "d_004",
"current": 12.3,
"voltage": 225,
"phase": 15
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "Los Angeles",
"groupid": 2,
"stb": "meters",
"table": "d_005",
"current": 9.8,
"voltage": 215,
"phase": 75
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "New York",
"groupid": 1,
"stb": "meters",
"table": "d_006",
"current": 11,
"voltage": 240,
"phase": 20
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "New York",
"groupid": 1,
"stb": "meters",
"table": "d_007",
"current": 14.5,
"voltage": 235,
"phase": 50
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "New York",
"groupid": 2,
"stb": "meters",
"table": "d_008",
"current": 13.2,
"voltage": 245,
"phase": 10
},
{
"db": "test_input_json",
"time": "2025-11-04 09:24:13.123",
"location": "New York",
"groupid": 2,
"stb": "meters",
"table": "d_009",
"current": 7.9,
"voltage": 220,
"phase": 80
}
]
需要注意的是,转换表达式中的 $each 函数用于遍历 JSON Object 的键值对,虽然文档中说明 $each 函数的返回值是一个数组,但如果只有一个键值对时,返回值会是一个单独的对象而不是数组。因此在使用 $each 函数时,需要在外层使用 [] 将结果强制转换为数组,以确保后续处理的一致性。
具体可以参考 JSONata 文档。
SQL 转换示例
以参考配置样例为例,输入 transformation 示例说明 中的 JSON 数据,生成的 SQL 如下:
insert into `test_input_json`.`meters`(`tbname`,`ts`,`current`,`voltage`,`phase`,`location`,`groupid`)values
('d_001','2025-11-04T09:24:13.123Z',10.5,220,30,'Los Angeles',1)
('d_002','2025-11-04T09:24:13.123Z',15.2,230,45,'Los Angeles',1)
('d_003','2025-11-04T09:24:13.123Z',8.7,210,60,'Los Angeles',1)
('d_004','2025-11-04T09:24:13.123Z',12.3,225,15,'Los Angeles',2)
('d_005','2025-11-04T09:24:13.123Z',9.8,215,75,'Los Angeles',2)
('d_006','2025-11-04T09:24:13.123Z',11,240,20,'New York',1)
('d_007','2025-11-04T09:24:13.123Z',14.5,235,50,'New York',1)
('d_008','2025-11-04T09:24:13.123Z',13.2,245,10,'New York',2)
('d_009','2025-11-04T09:24:13.123Z',7.9,220,80,'New York',2)
生成 SQL 过程说明:
- 写入 SQL 中的时间戳会根据配置的
timeFormat和timezone进行解析和转换,最终以 RFC3339nano 格式拼接到 SQL 语句中。 - 数据会按照
db、superTable、subTable、 获取到的fields(optional有可能设置为true,因此获取的数据并不一定包含全部的fields)进行分组,分组后按照时间升序排序后生成 SQL 语句。 - 生成的 SQL 语句会尽量拼接成接近 1M 的 SQL 进行批量写入,以提高写入性能,如果数据量过大则会拆分成多条 SQL 语句进行写入。
dry run 模式
为了方便调试和验证 JSON 配置规则的正确性,taosAdapter 提供了 dry run 模式,可以通过在写入请求中添加查询参数 dry_run=true 来启用该模式。在 dry-run 模式下,taosAdapter 不会将数据写入 TDengine,而是返回转换后的 JSON 和生成的 SQL 语句供用户查看和验证。
示例请求:
curl -L 'http://localhost:6041/input_json/v1/rule1?dry_run=true' \
-u root:taosdata \
-d '{"time":"2025-11-04 09:24:13.123","Los Angeles":{"group_1":{"d_001":{"current":10.5,"voltage":220,"phase":30},"d_002":{"current":15.2,"voltage":230,"phase":45},"d_003":{"current":8.7,"voltage":210,"phase":60}},"group_2":{"d_004":{"current":12.3,"voltage":225,"phase":15},"d_005":{"current":9.8,"voltage":215,"phase":75}}},"New York":{"group_1":{"d_006":{"current":11.0,"voltage":240,"phase":20},"d_007":{"current":14.5,"voltage":235,"phase":50}},"group_2":{"d_008":{"current":13.2,"voltage":245,"phase":10},"d_009":{"current":7.9,"voltage":220,"phase":80}}}}'
返回结果示例:
{
"code": 0,
"desc": "",
"json": "[{\"current\":10.5,\"db\":\"test_input_json\",\"groupid\":1,\"location\":\"Los Angeles\",\"phase\":30,\"stb\":\"meters\",\"table\":\"d_001\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":220},{\"current\":15.2,\"db\":\"test_input_json\",\"groupid\":1,\"location\":\"Los Angeles\",\"phase\":45,\"stb\":\"meters\",\"table\":\"d_002\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":230},{\"current\":8.7,\"db\":\"test_input_json\",\"groupid\":1,\"location\":\"Los Angeles\",\"phase\":60,\"stb\":\"meters\",\"table\":\"d_003\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":210},{\"current\":12.3,\"db\":\"test_input_json\",\"groupid\":2,\"location\":\"Los Angeles\",\"phase\":15,\"stb\":\"meters\",\"table\":\"d_004\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":225},{\"current\":9.8,\"db\":\"test_input_json\",\"groupid\":2,\"location\":\"Los Angeles\",\"phase\":75,\"stb\":\"meters\",\"table\":\"d_005\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":215},{\"current\":11,\"db\":\"test_input_json\",\"groupid\":1,\"location\":\"New York\",\"phase\":20,\"stb\":\"meters\",\"table\":\"d_006\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":240},{\"current\":14.5,\"db\":\"test_input_json\",\"groupid\":1,\"location\":\"New York\",\"phase\":50,\"stb\":\"meters\",\"table\":\"d_007\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":235},{\"current\":13.2,\"db\":\"test_input_json\",\"groupid\":2,\"location\":\"New York\",\"phase\":10,\"stb\":\"meters\",\"table\":\"d_008\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":245},{\"current\":7.9,\"db\":\"test_input_json\",\"groupid\":2,\"location\":\"New York\",\"phase\":80,\"stb\":\"meters\",\"table\":\"d_009\",\"time\":\"2025-11-04 09:24:13.123\",\"voltage\":220}]",
"sql": [
"insert into `test_input_json`.`meters`(`tbname`,`ts`,`current`,`voltage`,`phase`,`location`,`groupid`)values('d_001','2025-11-04T09:24:13.123Z',10.5,220,30,'Los Angeles',1)('d_002','2025-11-04T09:24:13.123Z',15.2,230,45,'Los Angeles',1)('d_003','2025-11-04T09:24:13.123Z',8.7,210,60,'Los Angeles',1)('d_004','2025-11-04T09:24:13.123Z',12.3,225,15,'Los Angeles',2)('d_005','2025-11-04T09:24:13.123Z',9.8,215,75,'Los Angeles',2)('d_006','2025-11-04T09:24:13.123Z',11,240,20,'New York',1)('d_007','2025-11-04T09:24:13.123Z',14.5,235,50,'New York',1)('d_008','2025-11-04T09:24:13.123Z',13.2,245,10,'New York',2)('d_009','2025-11-04T09:24:13.123Z',7.9,220,80,'New York',2)"
]
}
code:表示请求的状态码,0表示成功,非0表示失败。desc:表示请求的描述信息,如果code非0,则会包含错误信息。json:表示转换后的 JSON 数据。sql:表示生成的 SQL 语句数组。
RESTful 接口
你可以使用任何支持 HTTP 协议的客户端通过访问 RESTful 接口地址 http://<fqdn>:6041/rest/sql 来写入数据到 TDengine 或从 TDengine 中查询数据。细节请参考 REST API 文档。








