Python采集api接口数据导入Mysql

Python采集api接口数据导入Mysql使用Python获取Api接口存入Mysql

使用Pycham安装三个包
第一步:
import requests
import pymysql
import base64
在这里插入图片描述第二步
通过鹰图平台来获取api-key
在这里插入图片描述第三步
search = ‘title=“北京”’
search = base64.urlsafe_b64encode(search.encode(“utf-8”))
api_key=‘7525cd8de596b48190c03c60db3748442c7f5xxxxxxxxxxxxxx’

url = “https://hunter.qianxin.com/openApi/search?api-key=”+api_key+
“&search=”+str(search)[2:-1]+
“&page=1&page_size=10”

r = requests.get(url)

在这里插入图片描述第四步
打印Json的数组
json_data = r.json()
company_list = [arr[‘company’] for arr in json_data[‘data’][‘arr’]]
isp_list = [arr[‘isp’] for arr in json_data[‘data’][‘arr’]]
print(company_list)
print(isp_list)
在这里插入图片描述第五步:
配置连接Mysql的参数
(博主使用的是本地,也可以liunx的Mysql的IP地址)
conn_obj = pymysql.connect(
host=‘127.0.0.1’, # MySQL服务端的IP地址
port=3306, # MySQL默认PORT地址(端口号)
user=‘root’, # 用户名
password=‘123456’, # 密码,也可以简写为passwd
db=‘testapi_db’,
charset=‘utf8’ # 字符编码
)
#sql_create_db = ‘CREATE DATABASE IF NOT EXISTS testapi_db’
sql_create_table = ‘CREATE TABLE tb_test_api (company VARCHAR(50), isp VARCHAR(50));’

cursor = conn_obj.cursor()
#cursor.execute(sql_create_db)
cursor.execute(sql_create_table)
在这里插入图片描述第六步:
插入数据库字段
for i in range(len(isp_list)):
print(company_list[i],isp_list[i])
sql = “insert into tb_test_api(company,isp) values (‘”+company_list[i]+“‘,’”+isp_list[i]+“’)”
print(sql)
cursor.execute(sql)
cursor.connection.commit()
在这里插入图片描述
最终结果:
在这里插入图片描述
在这里插入图片描述

!!!api可以更换其他的地址,数据库的字段也可进行修改。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。
如需转载请保留出处:https://bianchenghao.cn/36777.html

(0)
编程小号编程小号

相关推荐

发表回复

您的电子邮箱地址不会被公开。 必填项已用*标注