序
某生成环境需要定期连接Sybase数据库提取数据,服务器实体机的操作系统为windows server 2016,尝试了官方的odbc驱动,能连上数据库,但它是收费软件试用期30天,过期就不能用了。
也尝试过windows下其他第三方客户端(TOAD等),可能由于对方数据库的版本等关系,都不太成功,最终转向使用linux下的freeTDS和unixODBC进行数据库对接。
FreeTDS
FreeTDS官网:http://www.freetds.org/,官网首页上关于FreeTDS的简介(翻译):
FreeTDS是一套允许你的程序自然地与微软SQL Server和Sybase交互的Unix和Linux库。
它是官方数据库客户端所采用的协议的开源实现,因此可以免费使用。
环境
- VMware Player 12.5(CPU较旧,不支持SLA,只能安装较老版本的VMware)
- CentOS 7 x64
- Python 3.7
安装和配置
- 安装必要的库
yum安装wget、gcc和unixODBC驱动
yum install wget gcc -y
yum install unixODBC unixODBC-devel -y
下载freeTDS源码,配置、编译安装,注意更改实际下载的版本号。
cd /tmp
wget ftp://ftp.freetds.org/pub/freetds/stable/freetds-patched.tar.gz
tar xzvf freetds-patched.tar.gz
cd freetds-1.00.111
./configure --prefix=/usr/local --sysconfdir=/etc
make
make install
- 配置
主要包括3个配置文件,其中两个ODBC相关的配置位于/etc下,可以通过 odbjinst -j 确认。
一个freeTDS的配置,在安装过程中已指定放在/etc下。
因此3个文件均位于/etc下。
以数据库标签DBSVR2,IP地址10.11.12.13,端口4100,数据库名称pmdb为例:
- 配置odbc数据库:
cat <<EOF >> /etc/odbc.ini
[DBSVR2]
Driver = FreeTDS
Description = AS YOU LIKE
Server = 10.11.12.13
Port = 4100
Database = pmdb
TDS_Version = 5.0
- 配置odbc驱动路径:
cat <<EOF >> /etc/odbcinst.ini
[FreeTDS]
Description = FreeTDS unixODBC Driver
Driver = /usr/local/lib/libtdsodbc.so
Setup = /usr/local/lib/libtdsodbc.so
EOF
- 配置freetds数据库:
cat <<EOF >> /etc/freetds.conf
[DBSVR2]
host = 10.11.12.13
port = 4100
tds version = 5.0
EOF
几点说明:
odbcinst.ini中只需对驱动配置一次,名称(该例中为FreeTDS)需要与odbc.ini中每个数据库的Driver字段匹配。
如果需访问多个数据库,freetds.conf 和 odbc.ini 需对每个需要访问的数据库单独配置一块内容,freetds.conf 中的数据库标签(方括号中内容)需与 odbc.ini 中的数据库标签(方括号中内容)相匹配。
-
TDS VERSION这个参数,控制不同的协议版本,对应不同的数据库,官方说明如下:
TDS 4.2 Sybase and Microsoft
The version in use at the time of the Sybase/Microsoft split.
TDS 5.0 Sybase
Introduced for Sybase. Because TDS 5.0 includes negotiated capabilities through which protocol features can be expanded, we are unlikely to see a new TDS version from Sybase.
TDS 7.0 Microsoft
Introduced for SQL Server 7.0. Includes support for the extended datatypes in SQL Server 7.0 (such as char/varchar fields of more than 255 characters). It also includes support for Unicode.
……所以这里配置5.0,实际测试这个协议版本正常,其余协议版本确实无法连接。
连接测试
- 利用tsql命令可对数据库连接进行测试。
tsql -S DBSVR2 -p 4100 -U username -P password
读到对端的字符集,出现提示符,表示测试成功。
- 交互式SQL命令行
使用isql命令可连接数据库进行交互式SQL操作。
isql DBSVR2 username password
出现Connected表示连接成功,在提示符后可以执行SQL指令。
利用Python连接数据库并完成查询
需安装pyodbc库,以查询输出到pandas DataFrame为例,代码如下(非常简单,注意DSN写法):
import pyodbc
dsn = "DSN=DBSVR2;UID=username;PWD=password"
sy_conn = pyodbc.connect(dsn)
sql = "select ..." # 一个查询SQL
_df = pd.read_sql(sql, sy_conn)
sy_conn.close()
总结
由于官方驱动和客户端等都为收费软件,故采用linux下的odbc驱动连接Sybase数据库。驱动安装和配置完成后,可以正常使用的情况下,就可以利用Python等编程语言随心所欲地进行数据库操作了。