Linux下配置数据源
ODBC连接数据库之前需要准备好所需资源。连接数据库是通过配置ODBC数据源，使用ODBC API或者相应的驱动程序，实现应用程序与数据库之间的通信和交互。本节介绍如何在Linux系统下配置数据源并连接到数据库。
操作步骤
- 安装unixODBC（默认unixODBC源码包已在环境准备中获取）。如果机器上已经安装了其他版本的unixODBC，可以直接覆盖安装。
以unixODBC-2.3.7版本为例，在客户端执行如下命令安装unixODBC。
tar zxvf unixODBC-2.3.7.tar.gz cd unixODBC-2.3.7 ./configure --enable-gui=no #如果要在ARM服务器上编译，请追加一个configure参数： --build=aarch64-unknown-linux-gnu make #安装可能需要root权限 make install
- 目前不支持unixODBC-2.2.1版本。
- 默认安装到“/usr/local”目录下，生成数据源文件到 “/usr/local/etc”目录下，库文件生成在“/usr/local/lib”目录。
- 通过编译带有--enable-fastvalidate=yes选项的unixODBC来获得更高性能。但此选项可能会导致向ODBC API传递无效句柄的应用程序发生故障，而不是返回SQL_INVALID_HANDLE错误。
- 替换客户端GaussDB驱动程序。
将GaussDB-Kernel_数据库版本号_操作系统版本号_64bit_Odbc.tar.gz解压。解压后会得到两个文件夹：lib与odbc，在odbc文件夹中还会有一个lib文件夹。将解压后得到的/lib文件夹与/odbc/lib文件夹中的所有动态库都复制到“/usr/local/lib”目录下。
- 配置数据源。
- 配置ODBC驱动文件。
在“/usr/local/etc/odbcinst.ini”文件中追加以下内容。
[GaussMPP] Driver64=/usr/local/lib/gsqlodbcw.so setup=/usr/local/lib/gsqlodbcw.so
odbcinst.ini文件中的配置参数说明如表1所示。
- 配置数据源文件。
在“/usr/local/etc/odbc.ini”文件中追加以下内容。
[MPPODBC] Driver=GaussMPP Servername=127.0.0.1 #数据库Server IP Database=db1 #数据库名 Username=omm #数据库用户名 Password= #数据库用户密码 Port=8000 #数据库侦听端口 Sslmode=allow
odbc.ini文件配置参数说明如表2所示。
表2 odbc.ini文件配置参数 参数
描述
示例
[DSN]
数据源的名称。
[MPPODBC]
Driver
驱动名，对应odbcinst.ini中的DriverName。
Driver=DRIVER_N
Servername
服务器的IP地址。可配置多个IP地址。支持IPv4和IPv6。
Servername=127.0.0.1
Database
要连接的数据库的名称。
Database=db1
Username
数据库用户名称。
Username=omm
Password
数据库用户密码。
说明：ODBC驱动本身已经对内存密码进行过清理，以保证用户密码在连接后不会再在内存中保留。
但是如果配置了此参数，由于UnixODBC对数据源文件等进行缓存，可能导致密码长期保留在内存中。
推荐在应用程序连接时，将密码传递给相应API，而非写在数据源配置文件中。同时连接成功后，应当及时清理保存密码的内存段。
须知：配置文件中填写密码时，需要遵循http规则：- 字符应当采用URL编码规范，如"!"应写作"%21"，"%"应写作"%25"，因此应当特别注意字符。
- "+"会被替换为空格" "。
Password=********
Port
服务器的端口号。
Port=8000
Sslmode
是否启用 SSL 连接。
说明：关于Sslmode的选项的允许值，具体信息如表3 Sslmode的可选项及其描述所示。
Sslmode=allow
Debug
是否启用调试模式。
取值范围：0 ~ INT_MAX
- 设置为0时表示不开启。
- 设置为大于0时表示将会打印gsqlodbc驱动的mylog，日志生成目录为/tmp/。
默认值为0。
Debug=1
UseServerSidePrepare
是否开启数据库端扩展查询协议。
取值范围：0，1
- 取值为0表示不开启。
- 取值为1表示开启。
默认值为1。
UseServerSidePrepare=1
UseBatchProtocol
是否开启批量查询协议（打开可提高DML性能）。
取值范围：0，1
- 取值为0时，不使用批量查询协议（主要用于与早期数据库版本通信兼容）。
- 取值为1，并且数据库support_batch_bind参数存在且为on时，将打开批量查询协议。
默认值为1。
UseBatchProtocol=1
ForExtensionConnector
此开关控制着savepoint是否发送，savepoint相关问题可以注意此开关，
取值范围：0，1
- 取值为0时表示发送savepoint。
- 取值为1时表示不发送savepoint。
默认值为1。
ForExtensionConnector=1
ConnectionExtraInfo
GUC参数connection_info中显示驱动部署路径和进程属主用户的开关。
取值范围：0，1
- 取值为0时表示不打开此开关。
- 取值为1时表示打开此开关。
默认值为0。
说明：当设置为1时，ODBC驱动会将当前驱动的部署路径、进程属主用户上报到数据库中，记录在GUC参数connection_info里，同时可以在PG_STAT_ACTIVITY中查询到。
ConnectionExtraInfo=1
BoolsAsChar
是否将布尔值作为字符处理。
取值范围：0，1
- 取值为0时表示Bools值将会映射为SQL_BIT。
- 取值为1时表示Bools值将会映射为SQL_CHAR。
默认值为1。
BoolsAsChar = 1
RowVersioning
是否在更新一行数据时，允许应用检测数据有没有被其他用户进行修改。
取值范围：0，1
- 取值为0时表示不允许应用检测。
- 取值为1时表示允许应用检测。
默认值为0。
RowVersioning=1
ShowSystemTables
是否将默认系统表格视为普通SQL表格。
取值范围：0，1
- 取值为0时驱动不会将默认系统表格视为普通SQL表格。
- 取值为1时驱动将默认系统表格视为普通SQL表格。
默认值为0。
ShowSystemTables=1
MaxCacheQueries
控制每个连接缓存的预编译语句个数。
取值范围：0 ~ 4096
默认值为0。
说明：如果设置为0，则不开启客户端预编译语句缓存池。设置为大于4096的值会限制为4096。如果执行过的语句个数超过MaxCacheQueries设置的上限，则淘汰最近最少使用的语句。
MaxCacheQueries=128
MaxCacheSizeMiB
控制每个连接缓存的预编译语句总大小，在MaxCacheQueries大于0时生效。
取值范围：0 ~ 4096
默认值为1。
说明：如果缓存的语句总长度大于MaxCacheSizeMiB则淘汰最近最少使用的语句。单位为MB，设置为大于4096的值会限制为4096。
MaxCacheSizeMiB=10
TcpUserTimeout
在支持TCP_USER_TIMEOUT套接字选项的操作系统上，指定传输的数据在TCP连接被强制关闭之前可以保持未确认状态的最大时长。
取值范围：0 ~ INT_MAX
默认值为0。
说明：0表示使用系统缺省。通过Unix域套接字做的连接忽略这个参数。单位为毫秒。
TcpUserTimeout=5000
TargetServerType
设定连接的主机的类型。主机的类型和设定的值一致时才能连接成功。设置规则如下：
- primary（默认值）：仅对主备系统中的主节点进行连接。
- standby：仅对主备系统中的备节点进行连接。
- prefer-standby：首先尝试与主备系统中的备节点进行连接。如果与hosts列表的所有备节点都连接失败，则尝试any模式进行连接。
- read-write：仅对可读写的主机进行连接。
- read-only：仅对只读的主机进行连接。
- any：可以对所有类型的主机进行连接。
TargetServerType=primary
KeepaliveTime
在TCP应该发送一个保持激活的信息给服务器之后，控制不活动的秒数。通过Unix域套接字做的连接或者如果禁用了保持激活则忽略这个参数。
取值范围：0 ~ INT_MAX
默认值为0。
KeepaliveTime=2
KeepaliveInterval
在TCP保持激活信息没有被应该传播的服务器承认之后，控制秒数。通过Unix域套接字做的连接或者如果禁用了保持激活则忽略这个参数。
取值范围：0 ~ INT_MAX
默认值为0。
KeepaliveInterval=2
KeepaliveCount
控制TCP发送保持激活信息的次数。通过Unix域套接字做的连接或者如果禁用了保持激活则忽略这个参数。
取值范围：0 ~ INT_MAX
默认值为0。
KeepaliveCount=2
SocketTimeout
用于控制客户端与服务端建立连接完全成功后的socket读写超时时间。单位为秒，默认为0。
说明：该参数包括了数据库语句执行的超时时间，设置的过小可能导致语句执行时间本身发生超时，因此默认为0，需根据场景配置，建议设置非0值。
SocketTimeout=5
SocketTimeoutInConnect
用于控制TCP三次握手成功后，客户端与服务端建立连接阶段的socket读写超时时间。单位为秒，默认为5。
说明：该参数区别于SocketTimeout：由于三次握手成功后的客户端与服务端建立连接阶段可能存在阻塞，因此需要设置不影响语句执行超时的socket读写超时时间。
SocketTimeoutInConnect=5
CancelTimeout
用于控制应用端发送cancel消息的超时时间。单位为秒，默认为0。
CancelTimeout=5
TcpSYNRetries
用于控制TCP三次握手阶段时SYN最多重传的次数，超过该次数仍未建连成功即报错。默认为0次。
说明：该参数在支持TCP_SYNCNT套接字选项的操作系统上,指定客户端建立连接三次握手阶段SYN包发送失败而重传的次数。0值表示使用系统缺省。通过Unix域套接字的连接忽略这个参数。
TcpSYNRetries=3
TextAsLongVarchar
若TextAsLongVarchar=1，则将内核侧text类型映射为驱动侧的SQL_LONGVARCHAR类型；TextAsLongVarchar=0，则将内核侧text类型映射为驱动侧的SQL_VARCHAR类型。默认值为1。
TextAsLongVarchar=1
MaxLongVarcharSize
驱动侧的SQL_LONGVARCHAR类型的最大长度。默认值为8190。
MaxLongVarcharSize=8190
MaxVarcharSize
驱动侧的SQL_VARCHAR类型的最大长度。默认值为255。
MaxVarcharSize=255
表3 Sslmode的可选项及其描述 Sslmode
是否会启用SSL加密
描述
disable
否
不使用SSL安全连接。
allow
可能
如果数据库服务器要求使用，则可以使用SSL安全加密连接，但不验证数据库服务器的真实性。
prefer
可能
如果数据库支持，那么首选使用SSL安全加密连接，但不验证数据库服务器的真实性。
require
是
必须使用SSL安全连接，但是只做了数据加密，并不验证数据库服务器的真实性。
verify-ca
是
必须使用SSL安全连接，并且验证数据库是否具有可信证书机构签发的证书。
verify-full
是
必须使用SSL安全连接，在verify-ca的验证范围之外，同时验证数据库所在主机的主机名是否与证书内容一致。GaussDB不支持此模式。
用户通过ODBC连接GaussDB服务器时，可以通过开启SSL加密客户端和服务器之间的通讯。在使用SSL时，默认用户已经获取了服务端和客户端所需要的证书和私钥文件，关于证书等文件的获取请参考Openssl相关文档和命令。
- 配置ODBC驱动文件。
- 在客户端配置环境变量。
vim ~/.bashrc
在配置文件中追加以下内容。
export LD_LIBRARY_PATH=/usr/local/lib/:$LD_LIBRARY_PATH export ODBCSYSINI=/usr/local/etc export ODBCINI=/usr/local/etc/odbc.ini
- 执行如下命令使设置生效。
source ~/.bashrc
- 测试连接。
安装后/usr/bin下面会存放生成的二进制，可执行isql -v MPPODBC（数据源名称）命令。
- 如果显示如下信息，表明配置正确，连接成功。
+---------------------------------------+ | Connected! | | | | sql-statement | | help [tablename] | | quit | | | +---------------------------------------+
- 若显示ERROR信息，则表明配置错误。请检查上述配置步骤是否正确执行。
目前通过ODBC连接数据库时，会如下设置内核参数：SET extra_float_digits = 2; SET DateStyle = 'ISO';
这些参数可能会导致ODBC客户端的行为与gsql客户端的行为不一致，例如，Date数据显示方式、浮点数精度表示。如果实际期望和这些配置不符，建议在ODBC应用代码中显式设定这些参数。
M-Compatibility模式数据库下，extra_float_digits的默认值为0。
- 如果显示如下信息，表明配置正确，连接成功。
常见问题处理
- [UnixODBC][Driver Manager]Can't open lib 'xxx/xxx/gsqlodbcw.so':file not found.
- [UnixODBC]connect to server failed: no such file or directory
- [unixODBC]The password-stored method is not supported.
数据源中未配置sslmode配置项。
解决办法：
请配置该选项至allow或以上选项。此配置的更多信息，请参见表3。
- Server common name "xxxx" does not match host name "xxxxx"
使用了SSL加密的“verify-full”选项，驱动程序会验证证书中的主机名与实际部署数据库的主机名是否一致。
解决办法：
碰到此问题可以使用“verify-ca”选项，不再校验主机名，或者重新生成一套与数据库所在主机名相同的CA证书。
- Driver's SQLAllocHandle on SQL_HANDLE_DBC failed
可执行文件（比如UnixODBC的isql，以下都以isql为例）与数据库驱动（gsqlodbcw.so）依赖于不同的ODBC的库版本：libodbc.so.1或者libodbc.so.2。此问题可以通过如下方式确认：
ldd `which isql` | grep odbc ldd gsqlodbcw.so | grep odbc
这时，如果输出的libodbc.so最后的后缀数字不同或者指向不同的磁盘物理文件，那么基本就可以断定是此问题。isql与gsqlodbcw.so都会要求加载libodbc.so，这时如果它们加载的是不同的物理文件，便会导致两套完全同名的函数列表，同时出现在同一个可见域里（UnixODBC的libodbc.so.*的函数导出列表完全一致），产生冲突，无法加载数据库驱动。
解决办法：
确定一个要使用的UnixODBC，卸载另外一个（比如卸载库版本号为.so.2的UnixODBC），然后将剩下的.so.1的库，新建一个同名但是后缀为.so.2的软链接，便可解决此问题。
- FATAL: Forbid remote connection with trust method!
由于安全原因，数据库主节点禁止数据库内部其他节点无认证接入。
如果要在数据库内部访问数据库主节点，请将ODBC程序部署在数据库主节点所在机器，服务器地址使用"127.0.0.1"。建议业务系统单独部署在数据库外部，否则可能会影响数据库运行性能。
- [unixODBC][Driver Manager]Invalid attribute value
有可能是unixODBC的版本并非推荐版本，建议通过“odbcinst --version”命令排查环境中的unixODBC版本。
- authentication method 10 not supported.
数据库中存储的密码校验只存储了SHA256格式哈希，而开源客户端只识别MD5校验，双方校验方法不匹配报错。
- 数据库并不存储用户密码，只存储用户密码的哈希码。
- 当用户更新用户密码或者新建用户时，数据库会同时存储两种格式的哈希码，这时将兼容开源的认证协议。
- 当旧版本数据库升级到新版本时，由于哈希的不可逆性，数据库无法还原用户密码，进而生成新格式的哈希，所以仍然只保留了SHA256格式的哈希，导致仍然无法使用MD5做密码认证。
- MD5加密算法安全性低，存在安全风险，建议使用更安全的加密算法。
要解决该问题，可以更新用户密码（请参见ALTER USER），或者新建一个用户（请参见CREATE USER），赋予同等权限，使用新用户连接数据库。
- unsupported frontend protocol 3.51: server supports 1.0 to 3.0
请使用对应版本的数据库驱动连接目标数据库。
- FATAL: GSS authentication method is not allowed because XXXX user password is not disabled.
目标数据库主节点的gs_hba.conf里配置了当前客户端IP使用"gss"方式来做认证，该认证算法不支持用作客户端的身份认证，请修改到"sha256"后再试。
- isql：error while loading shared libraries:xxx
