负载均衡

当部署多个 FE 节点时,用户可以在多个 FE 之上部署负载均衡层来实现 Doris 的高可用。

代码实现

自己在应用层代码进行重试和负载均衡。比如发现一个连接挂掉,就自动在其他连接上进行重试。应用层代码重试需要应用自己配置多个 doris 前端节点地址。

JDBC Connector

如果使用 mysql jdbc connector 来连接 Doris,可以使用 jdbc 的自动重试机制:

  1. jdbc:mysql:loadbalance://[host:port],[host:port].../[database][?propertyName1][=propertyValue1][&propertyName2][=propertyValue

详细可以参考Mysql官网文档

ProxySQL 方式

ProxySQL是灵活强大的MySQL代理层, 是一个能实实在在用在生产环境的MySQL中间件,可以实现读写分离,支持 Query 路由功能,支持动态指定某个 SQL 进行 cache,支持动态加载配置、故障切换和一些 SQL的过滤功能。

Doris 的 FE 进程负责接收用户连接和查询请求,其本身是可以横向扩展且高可用的,但是需要用户在多个 FE 上架设一层 proxy,来实现自动的连接负载均衡。

安装ProxySQL (yum方式)

  1. 配置yum
  2. # vim /etc/yum.repos.d/proxysql.repo
  3. [proxysql_repo]
  4. name= ProxySQL YUM repository
  5. baseurl=http://repo.proxysql.com/ProxySQL/proxysql-1.4.x/centos/\$releasever
  6. gpgcheck=1
  7. gpgkey=http://repo.proxysql.com/ProxySQL/repo_pub_key
  8. 执行安装
  9. # yum clean all
  10. # yum makecache
  11. # yum -y install proxysql
  12. 查看版本
  13. # proxysql --version
  14. ProxySQL version 1.4.13-15-g69d4207, codename Truls
  15. 设置开机自启动
  16. # systemctl enable proxysql
  17. # systemctl start proxysql
  18. # systemctl status proxysql
  19. 启动后会监听两个端口, 默认为603260336032端口是ProxySQL的管理端口,6033ProxySQL对外提供服务的端口 (即连接到转发后端的真正数据库的转发端口)。
  20. # netstat -tunlp
  21. Active Internet connections (only servers)
  22. Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name
  23. tcp 0 0 0.0.0.0:6032 0.0.0.0:* LISTEN 23940/proxysql
  24. tcp 0 0 0.0.0.0:6033 0.0.0.0:* LISTEN

ProxySQL 配置

ProxySQL 有配置文件 /etc/proxysql.cnf 和配置数据库文件/var/lib/proxysql/proxysql.db这里需要特别注意:如果存在"proxysql.db"文件(在/var/lib/proxysql目录下),则 ProxySQL 服务只有在第一次启动时才会去读取proxysql.cnf文件并解析;后面启动会就不会读取proxysql.cnf文件了!如果想要让proxysql.cnf 文件里的配置在重启 proxysql 服务后生效(即想要让 proxysql 重启时读取并解析 proxysql.cnf配置文件),则需要先删除 /var/lib/proxysql/proxysql.db数据库文件,然后再重启 proxysql 服务。这样就相当于初始化启动 proxysql 服务了,会再次生产一个纯净的 proxysql.db 数据库文件(如果之前配置了 proxysql 相关路由规则等,则就会被抹掉)

查看及修改配置文件

这里主要是几个参数,在下面已经注释出来了,可以根据自己的需要进行修改

  1. # egrep -v "^#|^$" /etc/proxysql.cnf
  2. datadir="/var/lib/proxysql" #数据目录
  3. admin_variables=
  4. {
  5. admin_credentials="admin:admin" #连接管理端的用户名与密码
  6. mysql_ifaces="0.0.0.0:6032" #管理端口,用来连接proxysql的管理数据库
  7. }
  8. mysql_variables=
  9. {
  10. threads=4 #指定转发端口开启的线程数量
  11. max_connections=2048
  12. default_query_delay=0
  13. default_query_timeout=36000000
  14. have_compress=true
  15. poll_timeout=2000
  16. interfaces="0.0.0.0:6033" #指定转发端口,用于连接后端mysql数据库的,相当于代理作用
  17. default_schema="information_schema"
  18. stacksize=1048576
  19. server_version="5.5.30" #指定后端mysql的版本
  20. connect_timeout_server=3000
  21. monitor_username="monitor"
  22. monitor_password="monitor"
  23. monitor_history=600000
  24. monitor_connect_interval=60000
  25. monitor_ping_interval=10000
  26. monitor_read_only_interval=1500
  27. monitor_read_only_timeout=500
  28. ping_interval_server_msec=120000
  29. ping_timeout_server=500
  30. commands_stats=true
  31. sessions_sort=true
  32. connect_retries_on_failure=10
  33. }
  34. mysql_servers =
  35. (
  36. )
  37. mysql_users:
  38. (
  39. )
  40. mysql_query_rules:
  41. (
  42. )
  43. scheduler=
  44. (
  45. )
  46. mysql_replication_hostgroups=
  47. (
  48. )

连接 ProxySQL 管理端口测试

  1. # mysql -uadmin -padmin -P6032 -hdoris01
  2. 查看main库(默认登陆后即在此库)的global_variables表信息
  3. MySQL [(none)]> show databases;
  4. +-----+---------------+-------------------------------------+
  5. | seq | name | file |
  6. +-----+---------------+-------------------------------------+
  7. | 0 | main | |
  8. | 2 | disk | /var/lib/proxysql/proxysql.db |
  9. | 3 | stats | |
  10. | 4 | monitor | |
  11. | 5 | stats_history | /var/lib/proxysql/proxysql_stats.db |
  12. +-----+---------------+-------------------------------------+
  13. 5 rows in set (0.000 sec)
  14. MySQL [(none)]> use main;
  15. Reading table information for completion of table and column names
  16. You can turn off this feature to get a quicker startup with -A
  17. Database changed
  18. MySQL [main]> show tables;
  19. +--------------------------------------------+
  20. | tables |
  21. +--------------------------------------------+
  22. | global_variables |
  23. | mysql_collations |
  24. | mysql_group_replication_hostgroups |
  25. | mysql_query_rules |
  26. | mysql_query_rules_fast_routing |
  27. | mysql_replication_hostgroups |
  28. | mysql_servers |
  29. | mysql_users |
  30. | proxysql_servers |
  31. | runtime_checksums_values |
  32. | runtime_global_variables |
  33. | runtime_mysql_group_replication_hostgroups |
  34. | runtime_mysql_query_rules |
  35. | runtime_mysql_query_rules_fast_routing |
  36. | runtime_mysql_replication_hostgroups |
  37. | runtime_mysql_servers |
  38. | runtime_mysql_users |
  39. | runtime_proxysql_servers |
  40. | runtime_scheduler |
  41. | scheduler |
  42. +--------------------------------------------+
  43. 20 rows in set (0.000 sec)

ProxySQL 配置后端 Doris FE

使用 insert 语句添加主机到 mysql_servers 表中,其中:hostgroup_id 为10表示写组,为20表示读组,我们这里不需要读写分离,无所谓随便设置哪一个都可以。

  1. [root@mysql-proxy ~]# mysql -uadmin -padmin -P6032 -h127.0.0.1
  2. ............
  3. MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values(10,'192.168.9.211',9030);
  4. Query OK, 1 row affected (0.000 sec)
  5. MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values(10,'192.168.9.212',9030);
  6. Query OK, 1 row affected (0.000 sec)
  7. MySQL [(none)]> insert into mysql_servers(hostgroup_id,hostname,port) values(10,'192.168.9.213',9030);
  8. Query OK, 1 row affected (0.000 sec)
  9. 如果在插入过程中,出现报错:
  10. ERROR 1045 (#2800): UNIQUE constraint failed: mysql_servers.hostgroup_id, mysql_servers.hostname, mysql_servers.port
  11. 说明可能之前就已经定义了其他配置,可以清空这张表 或者 删除对应host的配置
  12. MySQL [(none)]> select * from mysql_servers;
  13. MySQL [(none)]> delete from mysql_servers;
  14. Query OK, 6 rows affected (0.000 sec)
  15. 查看这3个节点是否插入成功,以及它们的状态。
  16. MySQL [(none)]> select * from mysql_servers\G;
  17. *************************** 1. row ***************************
  18. hostgroup_id: 10
  19. hostname: 192.168.9.211
  20. port: 9030
  21. status: ONLINE
  22. weight: 1
  23. compression: 0
  24. max_connections: 1000
  25. max_replication_lag: 0
  26. use_ssl: 0
  27. max_latency_ms: 0
  28. comment:
  29. *************************** 2. row ***************************
  30. hostgroup_id: 10
  31. hostname: 192.168.9.212
  32. port: 9030
  33. status: ONLINE
  34. weight: 1
  35. compression: 0
  36. max_connections: 1000
  37. max_replication_lag: 0
  38. use_ssl: 0
  39. max_latency_ms: 0
  40. comment:
  41. *************************** 3. row ***************************
  42. hostgroup_id: 10
  43. hostname: 192.168.9.213
  44. port: 9030
  45. status: ONLINE
  46. weight: 1
  47. compression: 0
  48. max_connections: 1000
  49. max_replication_lag: 0
  50. use_ssl: 0
  51. max_latency_ms: 0
  52. comment:
  53. 6 rows in set (0.000 sec)
  54. ERROR: No query specified
  55. 如上修改后,加载到RUNTIME,并保存到disk,下面两步非常重要,不然退出以后你的配置信息就没了,必须保存
  56. MySQL [(none)]> load mysql servers to runtime;
  57. Query OK, 0 rows affected (0.006 sec)
  58. MySQL [(none)]> save mysql servers to disk;
  59. Query OK, 0 rows affected (0.348 sec)

监控Doris FE节点配置

添 doris fe 节点之后,还需要监控这些后端节点。对于后端多个FE高可用负载均衡环境来说,这是必须的,因为 ProxySQL 需要通过每个节点的 read_only 值来自动调整

它们是属于读组还是写组。

首先在后端master主数据节点上创建一个用于监控的用户名

  1. doris fe master主数据库节点行执行:
  2. # mysql -P9030 -uroot -p
  3. mysql> create user monitor@'192.168.9.%' identified by 'P@ssword1!';
  4. Query OK, 0 rows affected (0.03 sec)
  5. mysql> grant ADMIN_PRIV on *.* to monitor@'192.168.9.%';
  6. Query OK, 0 rows affected (0.02 sec)
  7. 然后回到mysql-proxy代理层节点上配置监控
  8. # mysql -uadmin -padmin -P6032 -h127.0.0.1
  9. MySQL [(none)]> set mysql-monitor_username='monitor';
  10. Query OK, 1 row affected (0.000 sec)
  11. MySQL [(none)]> set mysql-monitor_password='P@ssword1!';
  12. Query OK, 1 row affected (0.000 sec)
  13. 修改后,加载到RUNTIME,并保存到disk
  14. MySQL [(none)]> load mysql variables to runtime;
  15. Query OK, 0 rows affected (0.001 sec)
  16. MySQL [(none)]> save mysql variables to disk;
  17. Query OK, 94 rows affected (0.079 sec)
  18. 验证监控结果:ProxySQL监控模块的指标都保存在monitor库的log表中。
  19. 以下是连接是否正常的监控(对connect指标的监控):
  20. 注意:可能会有很多connect_error,这是因为没有配置监控信息时的错误,配置后如果connect_error的结果为NULL则表示正常。
  21. MySQL [(none)]> select * from mysql_server_connect_log;
  22. +---------------+------+------------------+-------------------------+---------------+
  23. | hostname | port | time_start_us | connect_success_time_us | connect_error |
  24. +---------------+------+------------------+-------------------------+---------------+
  25. | 192.168.9.211 | 9030 | 1548665195883957 | 762 | NULL |
  26. | 192.168.9.212 | 9030 | 1548665195894099 | 399 | NULL |
  27. | 192.168.9.213 | 9030 | 1548665195904266 | 483 | NULL |
  28. | 192.168.9.211 | 9030 | 1548665255883715 | 824 | NULL |
  29. | 192.168.9.212 | 9030 | 1548665255893942 | 656 | NULL |
  30. | 192.168.9.211 | 9030 | 1548665495884125 | 615 | NULL |
  31. | 192.168.9.212 | 9030 | 1548665495894254 | 441 | NULL |
  32. | 192.168.9.213 | 9030 | 1548665495904479 | 638 | NULL |
  33. | 192.168.9.211 | 9030 | 1548665512917846 | 487 | NULL |
  34. | 192.168.9.212 | 9030 | 1548665512928071 | 994 | NULL |
  35. | 192.168.9.213 | 9030 | 1548665512938268 | 613 | NULL |
  36. +---------------+------+------------------+-------------------------+---------------+
  37. 20 rows in set (0.000 sec)
  38. 以下是对心跳信息的监控(对ping指标的监控)
  39. MySQL [(none)]> select * from mysql_server_ping_log;
  40. +---------------+------+------------------+----------------------+------------+
  41. | hostname | port | time_start_us | ping_success_time_us | ping_error |
  42. +---------------+------+------------------+----------------------+------------+
  43. | 192.168.9.211 | 9030 | 1548665195883407 | 98 | NULL |
  44. | 192.168.9.212 | 9030 | 1548665195885128 | 119 | NULL |
  45. ...........
  46. | 192.168.9.213 | 9030 | 1548665415889362 | 106 | NULL |
  47. | 192.168.9.213 | 9030 | 1548665562898295 | 97 | NULL |
  48. +---------------+------+------------------+----------------------+------------+
  49. 110 rows in set (0.001 sec)
  50. read_only日志此时也为空(正常来说,新环境配置时,这个只读日志是为空的)
  51. MySQL [(none)]> select * from mysql_server_read_only_log;
  52. Empty set (0.000 sec)
  53. 3个节点都在hostgroup_id=10的组中。
  54. 现在,将刚才mysql_replication_hostgroups表的修改加载到RUNTIME生效。
  55. MySQL [(none)]> load mysql servers to runtime;
  56. Query OK, 0 rows affected (0.003 sec)
  57. MySQL [(none)]> save mysql servers to disk;
  58. Query OK, 0 rows affected (0.361 sec)
  59. 现在看结果
  60. MySQL [(none)]> select hostgroup_id,hostname,port,status,weight from mysql_servers;
  61. +--------------+---------------+------+--------+--------+
  62. | hostgroup_id | hostname | port | status | weight |
  63. +--------------+---------------+------+--------+--------+
  64. | 10 | 192.168.9.211 | 9030 | ONLINE | 1 |
  65. | 20 | 192.168.9.212 | 9030 | ONLINE | 1 |
  66. | 20 | 192.168.9.213 | 9030 | ONLINE | 1 |
  67. +--------------+---------------+------+--------+--------+
  68. 3 rows in set (0.000 sec)

配置Doris用户

上面的所有配置都是关于后端 Doris FE 节点的,现在可以配置关于 SQL 语句的,包括:发送 SQL 语句的用户、SQL 语句的路由规则、SQL 查询的缓存、SQL 语句的重写等等。

本小节是 SQL 请求所使用的用户配置,例如 root 用户。这要求我们需要先在后端 Doris FE 节点添加好相关用户。这里以 root 和 doris 两个用户名为例.

  1. 首先,在Doris FE master主数据库节点上执行:
  2. # mysql -P9030 -uroot -p
  3. .........
  4. mysql> create user doris@'%' identified by 'P@ssword1!';
  5. Query OK, 0 rows affected, 1 warning (0.04 sec)
  6. mysql> grant ADMIN_PRIV on *.* to doris@'%';
  7. Query OK, 0 rows affected, 1 warning (0.03 sec)
  8. 然后回到mysql-proxy代理层节点,配置mysql_users表,将刚才的两个用户添加到该表中。
  9. admin> insert into mysql_users(username,password,default_hostgroup) values('root','',10);
  10. Query OK, 1 row affected (0.001 sec)
  11. admin> insert into mysql_users(username,password,default_hostgroup) values('doris','P@ssword1!',10);
  12. Query OK, 1 row affected (0.000 sec)
  13. 加载用户到运行环境中,并将用户信息保存到磁盘
  14. admin> load mysql users to runtime;
  15. Query OK, 0 rows affected (0.001 sec)
  16. admin> save mysql users to disk;
  17. Query OK, 0 rows affected (0.108 sec)
  18. mysql_users表有不少字段,最主要的三个字段为usernamepassworddefault_hostgroup
  19. - username:前端连接ProxySQL,以及ProxySQLSQL语句路由给MySQL所使用的用户名。
  20. - password:用户名对应的密码。可以是明文密码,也可以是hash密码。如果想使用hash密码,可以先在某个MySQL节点上执行
  21. select password(PASSWORD),然后将加密结果复制到该字段。
  22. - default_hostgroup:该用户名默认的路由目标。例如,指定root用户的该字段值为10时,则使用root用户发送的SQL语句默认
  23. 情况下将路由到hostgroup_id=10组中的某个节点。
  24. admin> select * from mysql_users\G
  25. *************************** 1. row ***************************
  26. username: root
  27. password:
  28. active: 1
  29. use_ssl: 0
  30. default_hostgroup: 10
  31. default_schema: NULL
  32. schema_locked: 0
  33. transaction_persistent: 1
  34. fast_forward: 0
  35. backend: 1
  36. frontend: 1
  37. max_connections: 10000
  38. *************************** 2. row ***************************
  39. username: doris
  40. password: P@ssword1!
  41. active: 1
  42. use_ssl: 0
  43. default_hostgroup: 10
  44. default_schema: NULL
  45. schema_locked: 0
  46. transaction_persistent: 1
  47. fast_forward: 0
  48. backend: 1
  49. frontend: 1
  50. max_connections: 10000
  51. 2 rows in set (0.000 sec)
  52. 虽然这里没有详细介绍mysql_users表,但只有active=1的用户才是有效的用户。
  53. MySQL [(none)]> load mysql users to runtime;
  54. Query OK, 0 rows affected (0.001 sec)
  55. MySQL [(none)]> save mysql users to disk;
  56. Query OK, 0 rows affected (0.123 sec)
  57. 这样就可以通过sql客户端,使用doris的用户名密码去连接了ProxySQL

通过 ProxySQL 连接 Doris 进行测试

下面,分别使用 root 用户和 doris 用户测试下它们是否能路由到默认的 hostgroup_id=10 (它是一个写组)读数据。下面是通过转发端口 6033 连接的,连接的是转发到后端真正的数据库!

  1. #mysql -uroot -p -P6033 -hdoris01 -e "show databases;"
  2. Enter password:
  3. ERROR 9001 (HY000) at line 1: Max connect timeout reached while reaching hostgroup 10 after 10000ms
  4. 这个时候发现出错,并没有转发到后端真正的doris fe
  5. 通过日志看到有set autocommit=0 这样开启事务
  6. 检查配置发现:
  7. mysql-forward_autocommit=false
  8. mysql-autocommit_false_is_transaction=false
  9. 我们这里不需要读写分离,只需要将这两个参数通过下面语句直接搞成true就可以了
  10. mysql> UPDATE global_variables SET variable_value='true' WHERE variable_name='mysql-forward_autocommit';
  11. Query OK, 1 row affected (0.00 sec)
  12. mysql> UPDATE global_variables SET variable_value='true' WHERE variable_name='mysql-autocommit_false_is_transaction';
  13. Query OK, 1 row affected (0.01 sec)
  14. mysql> LOAD MYSQL VARIABLES TO RUNTIME;
  15. Query OK, 0 rows affected (0.00 sec)
  16. mysql> SAVE MYSQL VARIABLES TO DISK;
  17. Query OK, 98 rows affected (0.12 sec)
  18. 然后我们在重新试一下,显示成功
  19. [root@doris01 ~]# mysql -udoris -pP@ssword1! -P6033 -h192.168.9.211 -e "show databases;"
  20. Warning: Using a password on the command line interface can be insecure.
  21. +--------------------+
  22. | Database |
  23. +--------------------+
  24. | doris_audit_db |
  25. | information_schema |
  26. | retail |
  27. +--------------------+

OK,到此就结束了,你就可以用 Mysql 客户端,JDBC 等任何连接 mysql 的方式连接 ProxySQL 去操作你的 doris 了

Nginx TCP反向代理方式

概述

Nginx能够实现HTTP、HTTPS协议的负载均衡,也能够实现TCP协议的负载均衡。那么,问题来了,可不可以通过Nginx实现Apache Doris数据库的负载均衡呢?答案是:可以。接下来,就让我们一起探讨下如何使用Nginx实现Apache Doris的负载均衡。

环境准备

注意:使用Nginx实现Apache Doris数据库的负载均衡,前提是要搭建Apache Doris的环境,Apache Doris FE的IP和端口分别如下所示, 这里我是用一个FE来做演示的,多个FE只需要在配置里添加多个FE的IP地址和端口即可

通过Nginx访问MySQL的Apache Doris和端口如下所示。

  1. IP: 172.31.7.119
  2. 端口: 9030

安装依赖

  1. sudo apt-get install build-essential
  2. sudo apt-get install libpcre3 libpcre3-dev
  3. sudo apt-get install zlib1g-dev
  4. sudo apt-get install openssl libssl-dev

安装Nginx

  1. sudo wget http://nginx.org/download/nginx-1.18.0.tar.gz
  2. sudo tar zxvf nginx-1.18.0.tar.gz
  3. cd nginx-1.18.0
  4. sudo ./configure --prefix=/usr/local/nginx --with-stream --with-http_ssl_module --with-http_gzip_static_module --with-http_stub_status_module
  5. sudo make && make install

配置反向代理

这里是新建了一个配置文件

  1. vim /usr/local/nginx/conf/default.conf

然后在里面加上下面的内容

  1. events {
  2. worker_connections 1024;
  3. }
  4. stream {
  5. upstream mysqld {
  6. hash $remote_addr consistent;
  7. server 172.31.7.119:9030 weight=1 max_fails=2 fail_timeout=60s;
  8. ##注意这里如果是多个FE,加载这里就行了
  9. }
  10. ###这里是配置代理的端口,超时时间等
  11. server {
  12. listen 6030;
  13. proxy_connect_timeout 300s;
  14. proxy_timeout 300s;
  15. proxy_pass mysqld;
  16. }
  17. }

启动Nginx

指定配置文件启动

  1. cd /usr/local/nginx
  2. /usr/local/nginx/sbin/nginx -c conf.d/default.conf

验证

  1. mysql -uroot -P6030 -h172.31.7.119

参数解释:

  • -u 指定Doris用户名
  • -p 指定Doris密码,我这里密码是空,所以没有
  • -h 指定Nginx代理服务器IP
  • -P 指定端口
  1. mysql -uroot -P6030 -h172.31.7.119
  2. Welcome to the MySQL monitor. Commands end with ; or \g.
  3. Your MySQL connection id is 13
  4. Server version: 5.1.0 Doris version 0.15.1-rc09-Unknown
  5. Copyright (c) 2000, 2022, Oracle and/or its affiliates.
  6. Oracle is a registered trademark of Oracle Corporation and/or its
  7. affiliates. Other names may be trademarks of their respective
  8. owners.
  9. Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
  10. mysql> show databases;
  11. +--------------------+
  12. | Database |
  13. +--------------------+
  14. | information_schema |
  15. | test |
  16. +--------------------+
  17. 2 rows in set (0.00 sec)
  18. mysql> use test;
  19. Reading table information for completion of table and column names
  20. You can turn off this feature to get a quicker startup with -A
  21. Database changed
  22. mysql> show tables;
  23. +------------------+
  24. | Tables_in_test |
  25. +------------------+
  26. | dwd_product_live |
  27. +------------------+
  28. 1 row in set (0.00 sec)
  29. mysql> desc dwd_product_live;
  30. +-----------------+---------------+------+-------+---------+---------+
  31. | Field | Type | Null | Key | Default | Extra |
  32. +-----------------+---------------+------+-------+---------+---------+
  33. | dt | DATE | Yes | true | NULL | |
  34. | proId | BIGINT | Yes | true | NULL | |
  35. | authorId | BIGINT | Yes | true | NULL | |
  36. | roomId | BIGINT | Yes | true | NULL | |
  37. | proTitle | VARCHAR(1024) | Yes | false | NULL | REPLACE |
  38. | proLogo | VARCHAR(1024) | Yes | false | NULL | REPLACE |
  39. | shopId | BIGINT | Yes | false | NULL | REPLACE |
  40. | shopTitle | VARCHAR(1024) | Yes | false | NULL | REPLACE |
  41. | profrom | INT | Yes | false | NULL | REPLACE |
  42. | proCategory | BIGINT | Yes | false | NULL | REPLACE |
  43. | proPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  44. | couponPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  45. | livePrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  46. | volume | BIGINT | Yes | false | NULL | REPLACE |
  47. | addedTime | BIGINT | Yes | false | NULL | REPLACE |
  48. | offTimeUnix | BIGINT | Yes | false | NULL | REPLACE |
  49. | offTime | BIGINT | Yes | false | NULL | REPLACE |
  50. | createTime | BIGINT | Yes | false | NULL | REPLACE |
  51. | createTimeUnix | BIGINT | Yes | false | NULL | REPLACE |
  52. | amount | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  53. | views | BIGINT | Yes | false | NULL | REPLACE |
  54. | commissionPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  55. | proCostPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  56. | proCode | VARCHAR(1024) | Yes | false | NULL | REPLACE |
  57. | proStatus | INT | Yes | false | NULL | REPLACE |
  58. | status | INT | Yes | false | NULL | REPLACE |
  59. | maxPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  60. | liveView | BIGINT | Yes | false | NULL | REPLACE |
  61. | firstCategory | BIGINT | Yes | false | NULL | REPLACE |
  62. | secondCategory | BIGINT | Yes | false | NULL | REPLACE |
  63. | thirdCategory | BIGINT | Yes | false | NULL | REPLACE |
  64. | fourCategory | BIGINT | Yes | false | NULL | REPLACE |
  65. | minPrice | DECIMAL(18,2) | Yes | false | NULL | REPLACE |
  66. | liveVolume | BIGINT | Yes | false | NULL | REPLACE |
  67. | liveClick | BIGINT | Yes | false | NULL | REPLACE |
  68. | extensionId | VARCHAR(128) | Yes | false | NULL | REPLACE |
  69. | beginTime | BIGINT | Yes | false | NULL | REPLACE |
  70. | roomTitle | TEXT | Yes | false | NULL | REPLACE |
  71. | beginTimeUnix | BIGINT | Yes | false | NULL | REPLACE |
  72. | nickname | TEXT | Yes | false | NULL | REPLACE |
  73. +-----------------+---------------+------+-------+---------+---------+
  74. 40 rows in set (0.06 sec)