網(wǎng)站性能檢測評分
注:本網(wǎng)站頁面html檢測工具掃描網(wǎng)站中存在的基本問題,僅供參考。
python項目實戰(zhàn)
成都python學習:7個Python實戰(zhàn)項目代碼,讓你分分鐘晉級大神! 營銷視頻課程
成都python學習:7個Python實戰(zhàn)項目代碼,讓你分分鐘晉級大神!
Python的應用十分廣泛,今天我們來分享7個Python實戰(zhàn)項目代碼,希望你有所收獲。
關于Python有一句名言:不要重復造輪子。
但是問題有三個:
1、你不知道已經(jīng)有哪些輪子已經(jīng)造好了,哪個適合你用。有名有姓的的著名輪子就400多個,更別說沒名沒姓自己在制造中的輪子。
2、確實沒重復造輪子,但是在重復制造汽車。包括好多大神寫的好幾百行代碼,為的是解決一個Excel本身就有的成熟功能。
3、很多人是用來抓圖,數(shù)據(jù),抓點圖片、視頻、天氣預報自娛自樂一下,然后呢?抓到大數(shù)據(jù)以后做什么用呢?比如某某啤酒賣的快,然后呢?比如某某電影票房多,然后呢?
我認為用Python應該能分析出來,這個現(xiàn)實的世界屬于政治家,商業(yè)精英,藝術家,農(nóng)民,而絕對不會屬于Python程序員,縱使代碼再精彩也沒什么用。
以下是經(jīng)過Python3.6.4調(diào)試通過的代碼,與大家分享:
1、抓取知乎圖片
2、聽兩個聊天機器人互相聊天(圖靈、青云、小i)
3、AI分析唐詩的作者是李白還是杜
4、彩票隨機生成35選7
5、自動寫檢討書
6、屏幕錄相機
7、制作Gif動圖
1、抓取知乎圖片,只用30行代碼:
import re
from selenium import webdriver
import time
import urllib.request
driver = webdriver.Chrome()
driver.maximize_window()
driver.get("https://zhihu/question/29134042")
i = 0
while i < 10:
driver.execute_script("window.scrollTo(0, document.body.scrollHeight);")
time.sleep(2)
try:
driver.find_element_by_css_selector('button.QuestionMainAction').click()
print("page" + str(i))
time.sleep(1)
except:
break
result_raw = driver.page_source
content_list = re.findall("img src=\"(.+?)\" ", str(result_raw))
n = 0
while n < len(content_list):
i = time.time()
local = (r"%s.jpg" % (i))
urllib.request.urlretrieve(content_list[n], local)
print("編號:" + str(i))
n = n + 1
2、沒事閑的時候,聽兩個聊天機器人互相聊天:
from time import sleep
import requests
s = input("請主人輸入話題:")
while True:
resp = requests.post("http://tuling123/openapi/api",data={"key":"4fede3c4384846b9a7d0456a5e1e2943", "info": s, })
resp = resp.json()
sleep(1)
print('小魚:', resp['text'])
s = resp['text']
resp = requests.get("http://api.qingyunke/api.php", {'key': 'free', 'appid': 0, 'msg': s})
resp.encoding = 'utf8'
resp = resp.json()
sleep(1)
print('菲菲:', resp['content'])
網(wǎng)上還有一個據(jù)說智商比較高的小i機器人,用爬蟲的功能來實現(xiàn)一下:
import urllib.request
import re
while True:
x = input("主人:")
x = urllib.parse.quote(x)
link = urllib.request.urlopen(
html_doc = link.read().decode()
reply_list = re.findall(r'\"content\":\"(.+?)\\r\\n\"', html_doc)
print("小i:" + reply_list[-1])
3、分析唐詩的作者是李白還是杜甫:
import jieba
from nltk.classify import NaiveBayesClassifier
# 需要提前把李白的詩收集一下,放在libai.txt文本中。
text1 = open(r"libai.txt", "rb").read()
list1 = jieba.cut(text1)
result1 = " ".join(list1)
# 需要提前把杜甫的詩收集一下,放在dufu.txt文本中。
text2 = open(r"dufu.txt", "rb").read()
list2 = jieba.cut(text2)
result2 = " ".join(list2)
# 數(shù)據(jù)準備
libai = result1
dufu = result2
# 特征提取
def word_feats(words):
return dict([(word, True) for word in words])
libai_features = [(word_feats(lb), 'lb') for lb in libai]
dufu_features = [(word_feats(df), 'df') for df in dufu]
train_set = libai_features + dufu_features
# 訓練決策
classifier = NaiveBayesClassifier.train(train_set)
# 分析測試
sentence = input("請輸入一句你喜歡的詩:")
print("\n")
seg_list = jieba.cut(sentence)
result1 = " ".join(seg_list)
words = result1.split(" ")
# 統(tǒng)計結果
lb = 0
df = 0
for word in words:
classResult = classifier.classify(word_feats(word))
if classResult == 'lb':
lb = lb + 1
if classResult == 'df':
df = df + 1
# 呈現(xiàn)比例
x = float(str(float(lb) / len(words)))
y = float(str(float(df) / len(words)))
print('李白的可能性:%.2f%%' % (x * 100))
print('杜甫的可能性:%.2f%%' % (y * 100))
4、彩票隨機生成35選7:
import random
temp = [i + 1 for i in range(35)]
random.shuffle(temp)
i = 0
list = []
while i < 7:
list.append(temp[i])
i = i + 1
list.sort()
print('\033[0;31;;1m')
print(*list[0:6], end="")
print('\033[0;34;;1m', end=" ")
print(list[-1])
5、自動寫檢討書:
import random
import xlrd
ExcelFile = xlrd.open_workbook(r'test.xlsx')
sheet = ExcelFile.sheet_by_name('Sheet1')
i = []
x = input("請輸入具體事件:")
y = int(input("老師要求的字數(shù):"))
while len(str(i)) < y * 1.2:
s = random.randint(1, 60)
rows = sheet.row_values(s)
i.append(*rows)
print(" "*8+"檢討書"+"\n"+"老師:")
print("我不應該" + str(x)+",", *i)
print("再次請老師原諒!")
以下是樣稿:
請輸入具體事件:抽煙
老師要求的字數(shù):200
檢討書
老師:
我不應該抽煙, 學校一開學就三令五申,一再強調(diào)校規(guī)校紀,提醒學生不要違反校規(guī),可我卻沒有把學校和老師的話放在心上,沒有重視老師說的話,沒有重視學校頒布的重要事項,當成了耳旁風,這些都是不應該的。 同時也真誠地希望老師能繼續(xù)關心和支持我,并卻對我的問題酌情處理。 無論在學習還是在別的方面我都會用校規(guī)來嚴格要求自己,我會把握這次機會。 但事實證明,僅僅是熱情投入、刻苦努力、鉆研學業(yè)是不夠的,還要有清醒的政治頭腦、大局意識和紀律觀念,否則就會在學習上迷失方向,使國家和學校受損失。
再次請老師原諒!
6、屏幕錄相機,抓屏軟件:
from time import sleep
from PIL import ImageGrab
m = int(input("請輸入想抓屏幾分鐘:"))
m = m * 60
n = 1
while n < m:
sleep(0.02)
im = ImageGrab.grab()
local = (r"%s.jpg" % (n))
im.save(local, 'jpeg')
n = n + 1
7、制作Gif動圖:
from PIL import Image
im = Image.open("1.jpg")
images = []
images.append(Image.open('2.jpg'))
images.append(Image.open('3.jpg'))
im.save('gif.gif', save_all=True, append_images=images, loop=1, duration=1, comment=b"aaabb")
GitHub上超9Kstars的Python爬蟲項目——pyspider(國人編寫) 行業(yè)視頻課程
A Powerful Spider(Web Crawler) System in Python.
簡介
PySpider:一個國人編寫的強大的網(wǎng)絡爬蟲系統(tǒng)并帶有強大的WebUI。采用Python語言編寫,分布式架構,支持多種數(shù)據(jù)庫后端,強大的WebUI支持腳本編輯器,任務監(jiān)視器,項目管理器以及結果查看器。
特性
python 腳本控制,可以用任何你喜歡的html解析包(內(nèi)置 pyquery)
WEB 界面編寫調(diào)試腳本,起停腳本,監(jiān)控執(zhí)行狀態(tài),查看活動歷史,獲取結果產(chǎn)出
數(shù)據(jù)存儲支持MySQL, MongoDB, Redis, SQLite, Elasticsearch; PostgreSQL 及 SQLAlchemy
隊列服務支持RabbitMQ, Beanstalk, Redis 和 Kombu
支持抓取 JavaScript 的頁面
組件可替換,支持單機/分布式部署,支持 Docker 部署
強大的調(diào)度控制,支持超時重爬及優(yōu)先級設置
支持python2&3
快速入門
安裝
如果你使用 ubuntu請先安裝以下依賴包:apt-get install python python-dev python-distribute python-pip libcurl4-openssl-dev libxml2-dev libxslt1-dev python-lxml如果需要調(diào)用js解析框架,請先照著phantomjs官網(wǎng)說明安裝phantomjs應用,并把可執(zhí)行程序添加到系統(tǒng)環(huán)境變量PATH中以方便調(diào)用。
注意:本程序在WINDOWNS系統(tǒng)中運行問題比較多,作者也沒有對win系統(tǒng)做兼容性測試.如果沒有特別強的解決問題的能力不建議用WINDOWS類系統(tǒng).
以上安裝完成后,執(zhí)行以下命令安裝pyspider
pip install pyspider
啟動環(huán)境
安裝完成后運行以下命令運行pyspider程序
#pyspider
注意:pyspider命令默認會以all模式運行所有的組件,方便調(diào)試。作者建議在線上模式分開部署各各組件,詳情請查看部署章節(jié)
運行成功后用瀏覽器打開http://localhost:5000/訪問控制臺
編寫腳本
在web控制臺點create按鈕新建任務,項目名自定義。本例項目名為test。
保存后打開代碼編輯器(代碼編輯器默認有簡單的實例代碼)
右側就是代碼編輯器,以后可以直接在這添加修改代碼。本實例就直接使用以自帶的代碼吧。代碼如下
#!/usr/bin/env python
# -*- encoding: utf-8 -*-
# Created on 2015-10-08 12:45:44
# Project: test
from pyspider.libs.base_handler import *
class Handler(BaseHandler):
crawl_config = {
}
@every(minutes=24 * 60)
def on_start(self):
self.crawl('http://scrapy.org/', callback=self.index_page)
@config(age=10 * 24 * 60 * 60)
def index_page(self, response):
for each in response.doc('a[href^="http"]').items():
self.crawl(each.attr.href, callback=self.detail_page)
@config(priority=2)
def detail_page(self, response):
return {
"url": response.url,
"title": response.doc('title').text(),
代碼簡單分析:
def on_start(self) 方法是入口代碼。當在web控制臺點擊run按鈕時會執(zhí)行此方法。
self.crawl(url, callback=self.index_page)這個方法是調(diào)用API生成一個新的爬取任務,這個任務被添加到待抓取隊列。
def index_page(self, response) 這個方法獲取一個Response對象。 response.doc是pyquery對象的一個擴展方法。pyquery是一個類似于jQuery的對象選擇器。
def detail_page(self, response)返回一個結果集對象。這個結果默認會被添加到resultdb數(shù)據(jù)庫(如果啟動時沒有指定數(shù)據(jù)庫默認調(diào)用sqlite數(shù)據(jù)庫)。你也可以重寫on_result(self,result)方法來指定保存位置。
更多知識:
@every(minutes=24*60, seconds=0) 這個設置是告訴scheduler(調(diào)度器)on_start方法每天執(zhí)行一次。
@config(age=10 * 24 * 60 * 60) 這個設置告訴scheduler(調(diào)度器)這個request(請求)過期時間是10天,10天內(nèi)再遇到這個請求直接忽略。這個參數(shù)也可以在self.crawl(url, age=10*24*60*60) 和 crawl_config中設置。
@config(priority=2) 這個是優(yōu)先級設置。數(shù)字越大越先執(zhí)行。
執(zhí)行任務
當您完成腳本編寫,調(diào)試無誤后,請先保存您的腳本!然后返回到控制臺首頁。
直接點擊項目狀態(tài)status那欄,把狀態(tài)由TODO改成debug或running。
最后點擊項目最右邊那個RUN按鈕啟動項目。
當progress那欄有數(shù)據(jù)顯示說明啟動成功。到現(xiàn)在就可以點最右側的results查看結果了。
項目地址:https://github/binux/pyspider
近期好文
Python最全入門資源(學習課程、博客、開發(fā)環(huán)境)
Python項目實戰(zhàn)——開發(fā)網(wǎng)易云音樂插件
Python小項目——使用Python寫詩
python教程之項目實戰(zhàn)——飛機大戰(zhàn)模塊安裝 推廣視頻課程
項目實戰(zhàn) —— 飛機大戰(zhàn)
目標
強化 面向對象 程序設計
體驗使用 `pygame` 模塊進行 游戲開發(fā)
實戰(zhàn)步驟
1. `pygame` 快速體驗
2. 飛機大戰(zhàn) 實戰(zhàn)
確認模塊 —— pygame
`pygame` 就是一個 Python 模塊,專為電子游戲設計
提示:要學習第三方模塊,通常最好的參考資料就在官方網(wǎng)站
| 網(wǎng)站欄目 | 內(nèi)容 |
| --- | --- |
| `GettingStarted` | 在各平臺安裝模塊的說明 |
| `Docs` | `pygame` 模塊所有 類 和 子類 的參考手冊 |
安裝 pygame
$ sudo pip3 install pygame
驗證安裝
$ python3 -m pygame.examples.aliens
小白也可以玩轉的Python任務清單,少走彎路,快速學習 企業(yè)視頻課程
站在風口上,豬都能飛起來。人工智能風口,讓Pyhon這門膠水語言轉變成非常火的網(wǎng)紅語言。
編程功力深厚的程序員花一兩個星期就能上手Python,而一些新手程序員花幾個月就可以上手。
學編程,用Python確實是一個相當不錯的選擇。
不過,面對Python網(wǎng)上有紛雜的資料,一些程序員卻不知道該怎么選擇。
學習Python沒有章法,那么編程就無法建立體系,這就導致了一種現(xiàn)象:學了好長的一段時間感覺仍然只學了一個皮毛。
所以,小編整理了一份Python學習任務清單,按照先后順序,由簡單到復雜學習Python,假以時日定能玩轉Python。
0、Python簡明教程
Python簡明教程是一本非常簡潔的教材,如果你沒有編程基礎,那么閱讀這本編程書籍剛好合適。
你可以像看小說一樣閱讀它,一兩天可以看完。
1、笨辦法學python
笨辦法學python也是眾多程序員網(wǎng)友強推的,作為Python入門完全夠用。
它采用問答形式,閱讀的過程相對來說比較有趣。
2、W3Cschool Python3編程微課
如果你閱讀完前面的教程,就可以開始學W3cschool Python3編程微課。
一方面,它可以幫助你復習一些核心的概念,加深學習印象。
比如基礎概念、控制結構、函數(shù)與模塊、面向對象編程,配合章節(jié)練習進行。
另一方面,它可以幫助你測試Python學習的效果。
3、大神的教程
廖學峰大神的Python教程,這是寫得非常之好的Python開發(fā)教程之一。
講解比較生動,形象,很值得一讀。
4、Python項目實戰(zhàn)
實踐是學習編程最好方法,Python的學習仍然需要項目實戰(zhàn)。
可以在廖學峰大神的Python教程完成一些實戰(zhàn)項目。