爬取数据保存至mysql数据库(爬取数据保存至mysql数据库中)

发布时间:2022-11-13

本文目录一览:

  1. IDEA怎么爬取咸鱼数据存储到MYSQL里面
  2. python怎样将数据存入mysql数据库
  3. python爬虫爬下来的数据怎么导入到MySQL

IDEA怎么爬取咸鱼数据存储到MYSQL里面

启动MySQL的爬取代码功能。

  1. IDEA想要爬取咸鱼数据存储到MYSQL里面,首先打开任务管理器开启MySQL服务。
  2. 打开后连接到数据库,建表打上勾,防止运行会报错,即可爬取。

python怎样将数据存入mysql数据库

下载mysql.connector库 然后把爬虫爬到的数据通过mysql里面的insert语句查到数据库,当然也可以建表,一般我没用python建表 是先建好再写数据的

import mysql.connector
conn = mysql.connector.connect(
    user='root',
    password='root',
    host='127.0.0.1',
    port='3306',
    database='test_demo'
)
cursor = conn.cursor()
cursor.execute("INSERT INTO test_user(`uuid`,`user_name`,`user_level`) VALUES (%s,%s,%s)", [id, user_name, user_level])
cursor.execute("INSERT INTO tieba_user_detail(`user_name`,`user_exp`,`user_sex`,`tieba_age`,`tieba_note`,`user_favorites`,`user_fans`) VALUES (%s,%s,%s,%s,%s,%s,%s)", [user_name, user_exp, user_sex, tieba_age, tieba_note, user_favorites, user_fans])
print('************** %s %s 数据保存成功 **************' % (user_rank, user_name))
conn.commit()
cursor.close()

python爬虫爬下来的数据怎么导入到MySQL

下载mysql.connector库 然后把爬虫爬到的数据通过mysql里面的insert语句查到数据库,当然也可以建表,一般我没用python建表 是先建好再写数据的

import mysql.connector
conn = mysql.connector.connect(
    user='root',
    password='root',
    host='127.0.0.1',
    port='3306',
    database='test_demo'
)
cursor = conn.cursor()
cursor.execute("INSERT INTO test_user(`uuid`,`user_name`,`user_level`) VALUES (%s,%s,%s)", [id, user_name, user_level])
cursor.execute("INSERT INTO tieba_user_detail(`user_name`,`user_exp`,`user_sex`,`tieba_age`,`tieba_note`,`user_favorites`,`user_fans`) VALUES (%s,%s,%s,%s,%s,%s,%s)", [user_name, user_exp, user_sex, tieba_age, tieba_note, user_favorites, user_fans])
print('************** %s  %s 数据保存成功 **************' % (user_rank, user_name))
conn.commit()
cursor.close()

插入就是这样的。