Python查询oracle数据库速度慢

比眉伴天荒 2022-03-30 06:50 286阅读 0赞

conn = cx_Oracle.connect('username/password@ip:port/servername')
    cur = conn.cursor()
    cur.execute('SELECT * FROM "db"."table"')
    cur是一个迭代器,不要用fetchall一次性取完數據
    直接 for row in cur 即可取数据

`使用：sqlalchemy`

MySQL-Python
        mysql+mysqldb://<user>:<password>@<host>[:<port>]/<dbname>
    
    pymysql
        mysql+pymysql://<username>:<password>@<host>/<dbname>[?<options>]
    
    MySQL-Connector
        mysql+mysqlconnector://<user>:<password>@<host>[:<port>]/<dbname>
    
    cx_Oracle
        oracle+cx_oracle://user:pass@host:port/dbname[?key=value&key=value...]

create_engine('oracle+cx_oracle://{a}:{b}@{c}:{d}/?service_name={e}'.format(a,b,c,d,e))
    create_engine('mysql+pymysql://%(user)s:%(password)s@%(host)s/%(database)s?charset=utf8' % laoshifu_info)
    
    1. df = pd.read_sql_table(table_name="table_name", con=engine)  
    （the function to_sql is case-sensitive，Found the root cause from DBMS (mysql) autoconvert the table name to lowercase.）
    2. df = pd.read_sql_query(sql=sql,con=engine)  # 很慢
    
    3. 
    ordf = pd.read_sql("SELECT * FROM db.table ",engine,chunksize=50000)
    dflist = []
    for chunk in ordf:
        dflist.append(chunk)
    df = pd.concat(dflist)

发表评论取消回复

表情：

评论列表（有 0 条评论，286人围观）

还没有评论，来说两句吧...

相关阅读

相关 WordPress 优化 MySQL 数据库慢查询提升网站访问速度

当你百度搜索 WordPress CPU 关键词的时候，你会发现可以搜索到很多使用 WordPress 搭建的网站都不同程度的有出现过 CPU 超负荷的情况，当然本站也不例外。

灰太狼/ 2024年03月17日 23:43/ 0 赞/ 85 阅读

相关 python下载速度慢

官网下载python速度慢怎么办问题 python官网下载速度太慢，有时候甚至下载个半天，突然又下载失败了。解决方案 1.推荐使用360极速浏览器，需注

￡神魔★判官ぃ/ 2023年02月13日 11:10/ 0 赞/ 26 阅读

相关 oracle11g读写速度慢,关于oracle dml 慢的问题

![rar.gif][] 文件: awr.rar 大小: 73KB 下载: 困扰了好几天的问题了，至今没有得到一个特别有效的解决办法，请大家帮忙给下参考，现

Dear 丶/ 2023年01月18日 05:28/ 0 赞/ 126 阅读

相关 h2 MySQL 速度_H2数据库：虽然使用索引,但查询速度慢

使用H2 1.3.176. 1)表定义： CREATE TABLE TEST(ID BIGINT PRIMARY KEY, ACCOUNT BIGINT, TXID BIG

小咪咪/ 2023年01月12日 04:09/ 0 赞/ 115 阅读

相关 Oracle数据库慢查看数据库

1、查看数据库正在运行的sql select a.program, b.spid, c.sql_text,c.SQL_ID from v$sessi

ゝ一纸荒年。/ 2022年10月09日 06:17/ 0 赞/ 231 阅读

相关 mysql cluster 子查询速度很慢

在整个mysql cluster 的测试过程当中，对于insert、update 、delete、groupby或order by等等都会执行的很快，远远超出单台机

超、凢脫俗/ 2022年09月20日 08:42/ 0 赞/ 168 阅读

相关 Python查询oracle数据库速度慢

conn = cx_Oracle.connect('username/password@ip:port/servername') cur = conn.curs

比眉伴天荒/ 2022年03月30日 06:50/ 0 赞/ 287 阅读

相关 oracle数据库创建表分区，提升表查询速度

首先创建空表分区结构如下：c\_year为主分区 c\_process\_id为子分区 create table TB\_CNB\_PAY\_RECORD\_2

谁践踏了优雅/ 2022年02月27日 07:24/ 0 赞/ 313 阅读

相关 mysql 查询速度为变慢

> 分析阶段 1、观察，至少跑1天，看看生产的慢sql 情况 2、开启慢查询日志设置阈值，比如超过5秒就是慢sql, 抓取出来 3、explain+慢sql分析 4

Bertha 。/ 2021年11月05日 15:42/ 0 赞/ 395 阅读

相关 order by --- limit 导致查询速度慢

[2019独角兽企业重金招聘Python工程师标准>>> ][2019_Python_] ![hot3.png][] 前言在一次上线之后，发现一个列表查询出来的数据

男娘i/ 2021年09月20日 04:20/ 0 赞/ 885 阅读