REST API

为支持各种不同类型平台的开发,TDengine 提供符合 REST 设计标准的 API,即 REST API。为最大程度降低学习成本,不同于其他数据库 REST API 的设计方法,TDengine 直接通过 HTTP POST 请求 BODY 中包含的 SQL 语句来操作数据库,仅需要一个 URL。REST 连接器的使用参见视频教程

REST API - 图1note

与原生连接器的一个区别是,RESTful 接口是无状态的,因此 USE db_name 指令没有效果,所有对表名、超级表名的引用都需要指定数据库名前缀。从 2.2.0.0 版本开始,支持在 RESTful URL 中指定 db_name,这时如果 SQL 语句中没有指定数据库名前缀的话,会使用 URL 中指定的这个 db_name。从 2.4.0.0 版本开始,RESTful 默认由 taosAdapter 提供,要求必须在 URL 中指定 db_name。

安装

RESTful 接口不依赖于任何 TDengine 的库,因此客户端不需要安装任何 TDengine 的库,只要客户端的开发语言支持 HTTP 协议即可。

验证

在已经安装 TDengine 服务器端的情况下,可以按照如下方式进行验证。

下面以 Ubuntu 环境中使用 curl 工具(确认已经安装)来验证 RESTful 接口的正常,验证前请确认 taosAdapter 服务已开启,在 Linux 系统上此服务默认由 systemd 管理,使用命令 systemctl start taosadapter 启动。

下面示例是列出所有的数据库,请把 h1.taosdata.com 和 6041(缺省值)替换为实际运行的 TDengine 服务 FQDN 和端口号:

  1. curl -L -H "Authorization: Basic cm9vdDp0YW9zZGF0YQ==" -d "show databases;" h1.taosdata.com:6041/rest/sql

返回值结果如下表示验证通过:

  1. {
  2. "status": "succ",
  3. "head": [
  4. "name",
  5. "created_time",
  6. "ntables",
  7. "vgroups",
  8. "replica",
  9. "quorum",
  10. "days",
  11. "keep1,keep2,keep(D)",
  12. "cache(MB)",
  13. "blocks",
  14. "minrows",
  15. "maxrows",
  16. "wallevel",
  17. "fsync",
  18. "comp",
  19. "precision",
  20. "status"
  21. ],
  22. "data": [
  23. [
  24. "log",
  25. "2020-09-02 17:23:00.039",
  26. 4,
  27. 1,
  28. 1,
  29. 1,
  30. 10,
  31. "30,30,30",
  32. 1,
  33. 3,
  34. 100,
  35. 4096,
  36. 1,
  37. 3000,
  38. 2,
  39. "us",
  40. "ready"
  41. ]
  42. ],
  43. "rows": 1
  44. }

HTTP 请求格式

  1. http://<fqdn>:<port>/rest/sql/[db_name]

参数说明:

  • fqnd: 集群中的任一台主机 FQDN 或 IP 地址
  • port: 配置文件中 httpPort 配置项,缺省为 6041
  • db_name: 可选参数,指定本次所执行的 SQL 语句的默认数据库库名。(从 2.2.0.0 版本开始支持)

例如:http://h1.taos.com:6041/rest/sql/test 是指向地址为 h1.taos.com:6041 的 URL,并将默认使用的数据库库名设置为 test

HTTP 请求的 Header 里需带有身份认证信息,TDengine 支持 Basic 认证与自定义认证两种机制,后续版本将提供标准安全的数字签名机制来做身份验证。

  • 自定义身份认证信息如下所示(token 稍后介绍)

    1. Authorization: Taosd <TOKEN>
  • Basic 身份认证信息如下所示

    1. Authorization: Basic <TOKEN>

HTTP 请求的 BODY 里就是一个完整的 SQL 语句,SQL 语句中的数据表应提供数据库前缀,例如 db_name.tb_name。如果表名不带数据库前缀,又没有在 URL 中指定数据库名的话,系统会返回错误。因为 HTTP 模块只是一个简单的转发,没有当前 DB 的概念。

使用 curl 通过自定义身份认证方式来发起一个 HTTP Request,语法如下:

  1. curl -L -H "Authorization: Basic <TOKEN>" -d "<SQL>" <ip>:<PORT>/rest/sql/[db_name]

或者

  1. curl -L -u username:password -d "<SQL>" <ip>:<PORT>/rest/sql/[db_name]

其中,TOKEN{username}:{password} 经过 Base64 编码之后的字符串,例如 root:taosdata 编码后为 cm9vdDp0YW9zZGF0YQ==

HTTP 返回格式

返回值为 JSON 格式,如下:

  1. {
  2. "status": "succ",
  3. "head": ["ts","current", …],
  4. "column_meta": [["ts",9,8],["current",6,4], …],
  5. "data": [
  6. ["2018-10-03 14:38:05.000", 10.3, …],
  7. ["2018-10-03 14:38:15.000", 12.6, …]
  8. ],
  9. "rows": 2
  10. }

说明:

  • status: 告知操作结果是成功还是失败。
  • head: 表的定义,如果不返回结果集,则仅有一列 “affected_rows”。(从 2.0.17.0 版本开始,建议不要依赖 head 返回值来判断数据列类型,而推荐使用 column_meta。在后续版本中,有可能会从返回值中去掉 head 这一项。)
  • column_meta: 从 2.0.17.0 版本开始,返回值中增加这一项来说明 data 里每一列的数据类型。具体每个列会用三个值来说明,分别为:列名、列类型、类型长度。例如["current",6,4]表示列名为“current”;列类型为 6,也即 float 类型;类型长度为 4,也即对应 4 个字节表示的 float。如果列类型为 binary 或 nchar,则类型长度表示该列最多可以保存的内容长度,而不是本次返回值中的具体数据长度。当列类型是 nchar 的时候,其类型长度表示可以保存的 unicode 字符数量,而不是 bytes。
  • data: 具体返回的数据,一行一行的呈现,如果不返回结果集,那么就仅有 [[affected_rows]]。data 中每一行的数据列顺序,与 column_meta 中描述数据列的顺序完全一致。
  • rows: 表明总共多少行数据。

column_meta 中的列类型说明:

  • 1:BOOL
  • 2:TINYINT
  • 3:SMALLINT
  • 4:INT
  • 5:BIGINT
  • 6:FLOAT
  • 7:DOUBLE
  • 8:BINARY
  • 9:TIMESTAMP
  • 10:NCHAR

自定义授权码

HTTP 请求中需要带有授权码 <TOKEN>,用于身份识别。授权码通常由管理员提供,可简单的通过发送 HTTP GET 请求来获取授权码,操作如下:

  1. curl http://<fqnd>:<port>/rest/login/<username>/<password>

其中,fqdn 是 TDengine 数据库的 FQDN 或 IP 地址,port 是 TDengine 服务的端口号,username 为数据库用户名,password 为数据库密码,返回值为 JSON 格式,各字段含义如下:

  • status:请求结果的标志位

  • code:返回值代码

  • desc:授权码

获取授权码示例:

  1. curl http://192.168.0.1:6041/rest/login/root/taosdata

返回值:

  1. {
  2. "status": "succ",
  3. "code": 0,
  4. "desc": "/KfeAzX/f9na8qdtNZmtONryp201ma04bEl8LcvLUd7a8qdtNZmtONryp201ma04"
  5. }

使用示例

  • 在 demo 库里查询表 d1001 的所有记录:

    1. curl -L -H "Authorization: Basic cm9vdDp0YW9zZGF0YQ==" -d "select * from demo.d1001" 192.168.0.1:6041/rest/sql

    返回值:

    1. {
    2. "status": "succ",
    3. "head": ["ts", "current", "voltage", "phase"],
    4. "column_meta": [
    5. ["ts", 9, 8],
    6. ["current", 6, 4],
    7. ["voltage", 4, 4],
    8. ["phase", 6, 4]
    9. ],
    10. "data": [
    11. ["2018-10-03 14:38:05.000", 10.3, 219, 0.31],
    12. ["2018-10-03 14:38:15.000", 12.6, 218, 0.33]
    13. ],
    14. "rows": 2
    15. }
  • 创建库 demo:

    1. curl -L -H "Authorization: Basic cm9vdDp0YW9zZGF0YQ==" -d "create database demo" 192.168.0.1:6041/rest/sql

    返回值:

    1. {
    2. "status": "succ",
    3. "head": ["affected_rows"],
    4. "column_meta": [["affected_rows", 4, 4]],
    5. "data": [[1]],
    6. "rows": 1
    7. }

其他用法

结果集采用 Unix 时间戳

HTTP 请求 URL 采用 /rest/sqlt 时,返回结果集的时间戳将采用 Unix 时间戳格式表示,例如

  1. curl -L -H "Authorization: Basic cm9vdDp0YW9zZGF0YQ==" -d "select * from demo.d1001" 192.168.0.1:6041/rest/sqlt

返回结果:

  1. {
  2. "status": "succ",
  3. "head": ["ts", "current", "voltage", "phase"],
  4. "column_meta": [
  5. ["ts", 9, 8],
  6. ["current", 6, 4],
  7. ["voltage", 4, 4],
  8. ["phase", 6, 4]
  9. ],
  10. "data": [
  11. [1538548685000, 10.3, 219, 0.31],
  12. [1538548695000, 12.6, 218, 0.33]
  13. ],
  14. "rows": 2
  15. }

结果集采用 UTC 时间字符串

HTTP 请求 URL 采用 /rest/sqlutc 时,返回结果集的时间戳将采用 UTC 时间字符串表示,例如

  1. curl -L -H "Authorization: Basic cm9vdDp0YW9zZGF0YQ==" -d "select * from demo.t1" 192.168.0.1:6041/rest/sqlutc

返回值:

  1. {
  2. "status": "succ",
  3. "head": ["ts", "current", "voltage", "phase"],
  4. "column_meta": [
  5. ["ts", 9, 8],
  6. ["current", 6, 4],
  7. ["voltage", 4, 4],
  8. ["phase", 6, 4]
  9. ],
  10. "data": [
  11. ["2018-10-03T14:38:05.000+0800", 10.3, 219, 0.31],
  12. ["2018-10-03T14:38:15.000+0800", 12.6, 218, 0.33]
  13. ],
  14. "rows": 2
  15. }

重要配置项

下面仅列出一些与 RESTful 接口有关的配置参数,其他系统参数请看配置文件里的说明。

  • 对外提供 RESTful 服务的端口号,默认绑定到 6041(实际取值是 serverPort + 11,因此可以通过修改 serverPort 参数的设置来修改)。
  • httpMaxThreads: 启动的线程数量,默认为 2(2.0.17.0 版本开始,默认值改为 CPU 核数的一半向下取整)。
  • restfulRowLimit: 返回结果集(JSON 格式)的最大条数,默认值为 10240。
  • httpEnableCompress: 是否支持压缩,默认不支持,目前 TDengine 仅支持 gzip 压缩格式。
  • httpDebugFlag: 日志开关,默认 131。131:仅错误和报警信息,135:调试信息,143:非常详细的调试信息。
  • httpDbNameMandatory: 是否必须在 RESTful URL 中指定默认的数据库名。默认为 0,即关闭此检查。如果设置为 1,那么每个 RESTful URL 中都必须设置一个默认数据库名,否则无论此时执行的 SQL 语句是否需要指定数据库,都会返回一个执行错误,拒绝执行此 SQL 语句。
REST API - 图2note

如果使用 taosd 提供的 REST API, 那么以上配置需要写在 taosd 的配置文件 taos.cfg 中。如果使用 taosAdapter 提供的 REST API, 那么需要参考 taosAdapter 对应的配置方法