python如何导出数据库数据,python将数据导入数据库

  python如何导出数据库数据,python将数据导入数据库

  1、常见数据库

  (1)Scikit-learn:需要覆盖特征工程、模型训练和模型测试所有功能的库。Scikit-learn是最好的选择。这个优秀的免费软件可以提供机器学习和数据挖掘所需的所有工具。现在是python机器学习的标准库。建议使用成熟的机器学习算法。

  (2)NLTK:虽然不是机器学习的程序库,但却是自然语言处理的必备库。除了文本处理功能,还包括聚类、分词、词干提取、标注、分析等大量的数据集和词汇资源。

  2、转移数据

  Python基于Python2.7的版本环境,实现了数据库的跨服务器迁移,每次提交5000个查询,代码中每次查询提交的数量可以自行改变。

  #-*-编码:utf-8-*-

  importMySQLdb

  进口时间

  导入警告

  warnings.filterwarnings(“忽略”)

  classConnectMysql(对象):

  def__init__(self):

  #此处设置分页查询。每页查询多少数据?

  self.page_size=5000

  defgetTable(self):

  conn=MySQLdb.connect(

  主机=***。***.**.**,

  用户=**** ,

  passwd=************* ,

  db= * * * * ,

  charset=utf8

  )

  conn_local=MySQLdb.connect(

  host= * * * * * * * * * * * * * * * * * * * * * * * * * * * * * ,

  user= * * * * * * * * * * ,

  passwd= * * * * * * * * * * ,

  db=******* ,

  charset=utf8

  )

  铌

  sp;cur=conn.cursor()

  cur_local=conn_local.cursor()

  cur.execute('showtables')

  tables=cur.fetchall()

  fortableintables:

  printstr(table[0]).lower()

  #需要迁移的数据库查询表的列数

  cur.execute("SELECTCOUNT(*)FROMinformation_schema.COLUMNSWHEREtable_schema='china'ANDtable_name='"+table[0]+"'")

  table_col_count=cur.fetchone()

  #printtable_col_count[0]

  #需要迁移的数据库查询表的结构

  cur.execute('showcreatetable'+table[0])

  result=cur.fetchall()

  create_sql=result[0][1]

  #查询需要迁移的数据库表的数据条数

  cur.execute('selectcount(*)from'+table[0])

  total=cur.fetchone()

  page=total[0]/self.page_size

  page1=total[0]%self.page_size

  ifpage1!=0:

  page=page+1

  

  #阿里云数据库创建表

  cur_local.execute("SELECTtable_nameFROMinformation_schema.`TABLES`WHEREtable_schema='user'ANDtable_name='"+str(table[0]).lower()+"'")

  table_name=cur_local.fetchone()

  iftable_nameisNone:

  cur_local.execute(create_sql)

  forpinrange(0,page):

  whileTrue:

  try:

  print'开始',table[0],'的第',p+1,'页查询'

  ifp==0:

  limit_param='limit'+str(p*self.page_size)+','+str(self.page_size)

  else:

  limit_param='limit'+str(p*self.page_size+1)+','+str(self.page_size)

  cur.execute('select*from'+table[0]+limit_param)

  inserts=cur.fetchall()

  print'查询成功'

  param=''

  foriinrange(0,table_col_count[0]):

  param=param+'%s,'

  print'开始插入'

  cur_local.executemany('replaceinto'+table[0]+'values('+param[0:-1]+')',inserts)

  printtable[0],'的第',p+1,'页,插入完成,还有',page-p-1,'页,任重而道远'

  conn_local.commit()

  break

  exceptExceptionase:

  printe

  time.sleep(60)

  cur=conn.cursor()

  cur_local=conn_local.cursor()

  printtable[0],'插入完成'

  print'\n\n========================================================================\n\n'

  cur_local.close()

  conn_local.close()

  cur.close()

  conn.close()

  

  

  if__name__=='__main__':

  conn_mysql=ConnectMysql()

  conn_mysql.getTable()以上就是python转移数据库里数据的方法,希望对大家有所帮助。更多Python学习指路:python基础教程

  本文教程操作环境:windows7系统、Python 2.7,DELL G3电脑。

郑重声明:本文由网友发布,不代表盛行IT的观点,版权归原作者所有,仅为传播更多信息之目的,如有侵权请联系,我们将第一时间修改或删除,多谢。

相关文章阅读

  • 关系型数据库与非关系型数据库简介一样吗,关系型数据库非关系型数据库有哪些
  • 关系型数据库与非关系型数据库简介一样吗,关系型数据库非关系型数据库有哪些,关系型数据库与非关系型数据库简介
  • 关于redis数据库入门详细介绍图片,redis数据库的使用,关于Redis数据库入门详细介绍
  • 使用php连接mysql数据库,php连接数据库的方法
  • 使用php连接mysql数据库,php连接数据库的方法,一文详解PHP连接MySQL数据库的三种方式
  • 什么是分库分表,为什么要进行分库分表-,分库分表的区别,数据库分库分表是什么,什么情况下需要用分库分表
  • vb中adodb连接数据库,
  • treeview控件绑定数据,wpf treeview数据绑定,详解TreeView绑定数据库
  • sql的多表查询,数据库如何实现多表查询
  • SQL数据库的图形管理界面工具是,sql图形界面创建数据库
  • SQL数据库的图形管理界面工具是,sql图形界面创建数据库,SQLServer2019 数据库的基本使用之图形化界面操作的实现
  • sql数据库定时备份怎么弄,mysql 定期备份
  • sql数据库定时备份怎么弄,mysql 定期备份,MySQL 数据库定时备份的几种方式(全面)
  • sqlserver的nvarchar和varchar,数据库varchar和nvarchar
  • sqlserver的nvarchar和varchar,数据库varchar和nvarchar,SQL中varchar和nvarchar的基本介绍及其区别
  • 留言与评论(共有 条评论)
       
    验证码: