91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

Python數據持久化存儲實現方法分析

發布時間:2020-09-25 09:21:04 來源:腳本之家 閱讀:136 作者:為挽月明 欄目:開發技術

本文實例講述了Python數據持久化存儲實現方法。分享給大家供大家參考,具體如下:

1、pymongo的使用

前三步為創建對象

  • 第一步創建連接對象
conn = pymongo.MongoClient('IP地址',27017)
  • 第二步創建庫
db = conn['庫名']
  • 第三步創建表
myset = db['集合名']

  • 第四步把數據插入數據庫
myset.inset.one({})

#!/usr/bin/python
# -*- coding: utf-8 -*-
# @Time : 2019/6/26 8:56
# @Author : #####
# @Site :
# @File : 貓眼電影_mongo存儲.py
# @Software: PyCharm
from urllib import request
import re
import time
import pymongo
class MaoyanSpider(object):
  def __init__(self):
    self.headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.5221.400 QQBrowser/10.0.1125.400'}
    #用來計數
    self.page=1
    #連接對象
    self.coon =pymongo.MongoClient('locslhost',27017)
    #創建庫對象
    self.db=self.coon['maoyaodb']
    #集合對象
    self.myset=self.db['top100']
  def get_page(self,url):
    req = request.Request(url,headers=self.headers)
    res = request.urlopen(req)
    html = res.read().decode('utf-8')
    self.parse_page(html)
  def parse_page(self,html):
    p = re.compile( '<div class="movie-item-info">.*?title="(.*?)".*?class="star">(.*?)</p>.*?class="releasetime">(.*?)</p>',re.S)
    r_list = p.findall(html)
    self.write_mongo(r_list)
  def write_mongo(self,r_list):
    for r_t in r_list:
      d={
        '電影名稱:':r_t[0].strip(),
        '電影主演:':r_t[1].strip(),
        '上映時間:':r_t[2].strip()
      }
    #插入數據庫
      self.myset.inset.one(d)
  def work_on(self):
    for pn in range(0,41,10):
      url = 'https://maoyan.com/board/4?offset=%s' % str(pn)
      self.get_page(url)
      print('第%d頁爬取成功' % self.page)
      self.page += 1
      time.sleep(4)
if __name__ == '__main__':
  begin = time.time()
  spider = MaoyanSpider()
  spider.work_on()
  end = time.time()
  print("執行時間%.2f" % (end - begin)) #注不完美,仍然需修改

2、mysql的使用

Mysql-front可視化工具,建庫建表添加字段

1、創建連接對象:db = pymysql.connet

2、創建游標對象:cursor = db.sursor

3、執行命令:cursor.execute()

4、提交到數據庫執行

5、關閉:cursor.close

mysql-Front使用流程

1、創建數據庫:

localhost--數據庫--新建---數據庫

數據庫名改為maoyan (項目mysql庫名)--- 字符集utf8 ---確定

2、創建表:

流程:選中maoyao數據庫 --選中數據 ----新建 ----出現添加菜單 ---名稱改為top100 ---創建成功

3、往表格中添加字段:

流程:選中top100表單  --- 數據庫  ----新建  ----字段  ---出現添加界面 ----名稱改為name  ---默認varchar  ---- 長度50  --確定

用同樣的方法穿件字段star和time

ID一般設置為int 長度視情況而定

更多關于Python相關內容感興趣的讀者可查看本站專題:《Python常見數據庫操作技巧匯總》、《Python數學運算技巧總結》、《Python數據結構與算法教程》、《Python函數使用技巧總結》、《Python字符串操作技巧匯總》、《Python入門與進階經典教程》及《Python文件與目錄操作技巧匯總》

希望本文所述對大家Python程序設計有所幫助。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

阜南县| 罗城| 密山市| 岳阳市| 尼玛县| 长宁区| 池州市| 无极县| 永城市| 枣阳市| 云南省| 宝兴县| 弥勒县| 吉安市| 永嘉县| 焉耆| 和硕县| 宿州市| 宜宾县| 伊春市| 永州市| 绍兴县| 隆子县| 运城市| 郯城县| 玉龙| 吐鲁番市| 双峰县| 偃师市| 新野县| 志丹县| 正宁县| 大厂| 中宁县| 囊谦县| 武定县| 深圳市| 鄂伦春自治旗| 杭锦旗| 阿克苏市| 浦东新区|