python爬蟲(chóng)小腳本

codeGoogle 發(fā)布于2019-07-31 11:41 / 1828人閱讀

摘要：天朝上網(wǎng)需要經(jīng)常改文件的，你們都懂的。要在網(wǎng)上找啊，找到了還要復(fù)制粘貼，那叫一個(gè)麻煩啊。我是出了名的懶人嘛，寫(xiě)個(gè)腳本干這事吧獲取網(wǎng)頁(yè)內(nèi)容，網(wǎng)址是假的，我只是想說(shuō)一下方法設(shè)置文件路徑備份文件讀取文件，準(zhǔn)備添加開(kāi)始添加寫(xiě)入并關(guān)閉文件

天朝上網(wǎng)需要經(jīng)常改hosts文件的，你們都懂的。要在網(wǎng)上找啊，找到了還要復(fù)制粘貼，那叫一個(gè)麻煩啊。
我是出了名的懶人嘛，寫(xiě)個(gè)腳本干這事吧……

#!/usr/bin/env python
import urllib
import os
import platform
import shutil

#獲取網(wǎng)頁(yè)內(nèi)容，網(wǎng)址是假的，我只是想說(shuō)一下方法
r = urllib.urlopen("http://www.baidu.com/hosts.html")

for line in r:
    if line.find("NEW HOSTS") >= 0:
        url = line[line.find("http://"):][:line[line.find("http://"):].find(""")]

#設(shè)置hosts文件路徑
if platform.system() == "Windows":
    sysdir = os.getenv("SystemDrive")
    hostspath = sysdir + "/windows/system32/drivers/etc/hosts"
if platform.system() == "Linux":
    hostspath = "/etc/hosts"

#備份hosts文件
if os.path.isfile(hostspath+"_bak") == False:
    shutil.copyfile(hostspath,hostspath+"_bak")
shutil.copyfile(hostspath+"_bak",hostspath)

#讀取文件，準(zhǔn)備添加
host = open(hostspath,"r")
content = host.read()
host.close()
r = urllib.urlopen(url)

#開(kāi)始添加
for line in r:
    line=line.strip("
")
    content = content + line
    
#寫(xiě)入并關(guān)閉文件
host = open(hostspath,"w")
host.write(content)
host.close()

云服務(wù)器 GPU云服務(wù)器爬蟲(chóng)腳本爬蟲(chóng)小工具 python腳本 python 寫(xiě)腳本

文章版權(quán)歸作者所有，未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址：http://www.ezyhdfw.cn/yun/45416.html

相關(guān)文章

首次公開(kāi)，整理12年積累的博客收藏夾，零距離展示《收藏夾吃灰》系列博客

摘要：時(shí)間永遠(yuǎn)都過(guò)得那么快，一晃從年注冊(cè)，到現(xiàn)在已經(jīng)過(guò)去了年那些被我藏在收藏夾吃灰的文章，已經(jīng)太多了，是時(shí)候把他們整理一下了。那是因?yàn)槭詹貖A太亂，橡皮擦給設(shè)置私密了，不收拾不好看呀。 ...

Harriet666 2021-09-10 10:51 評(píng)論0 收藏0
Evil Python

摘要：用將倒放這次讓我們一個(gè)用做一個(gè)小工具將動(dòng)態(tài)圖片倒序播放發(fā)現(xiàn)引力波的機(jī)構(gòu)使用的包美國(guó)科學(xué)家日宣布，他們?nèi)ツ暝率状翁綔y(cè)到引力波。宣布這一發(fā)現(xiàn)的，是激光干涉引力波天文臺(tái)的負(fù)責(zé)人。這個(gè)機(jī)構(gòu)誕生于上世紀(jì)年代，進(jìn)行引力波觀測(cè)已經(jīng)有近年。那些年我們寫(xiě)過(guò)的爬蟲(chóng) 從寫(xiě) nodejs 的第一個(gè)爬蟲(chóng)開(kāi)始陸陸續(xù)續(xù)寫(xiě)了好幾個(gè)爬蟲(chóng)，從爬拉勾網(wǎng)上的職位信息到爬豆瓣上的租房帖子，再到去爬知乎上的妹子照片什么的，爬蟲(chóng)...

Turbo 2019-07-30 15:07 評(píng)論0 收藏0
小程序開(kāi)發(fā)（一）：使用scrapy爬蟲(chóng)采集數(shù)據(jù)

摘要：用途廣泛，可以用于數(shù)據(jù)挖掘監(jiān)測(cè)和自動(dòng)化測(cè)試。運(yùn)行下，發(fā)現(xiàn)數(shù)據(jù)全部存到了數(shù)據(jù)庫(kù)中。提供了一些接口來(lái)查看項(xiàng)目爬蟲(chóng)情況，以及執(zhí)行或者停止執(zhí)行爬蟲(chóng)。完成小程序所需要的所有接口的開(kāi)發(fā)，以及使用定時(shí)任務(wù)執(zhí)行爬蟲(chóng)腳本。過(guò)完年回來(lái)，業(yè)余時(shí)間一直在獨(dú)立開(kāi)發(fā)一個(gè)小程序。主要數(shù)據(jù)是8000+個(gè)視頻和10000+篇文章，并且數(shù)據(jù)會(huì)每天自動(dòng)更新。我會(huì)整理下整個(gè)開(kāi)發(fā)過(guò)程中遇到的問(wèn)題和一些細(xì)節(jié)問(wèn)題，因?yàn)閮?nèi)容會(huì)比...

mrli2016 2019-07-31 10:19 評(píng)論0 收藏0
Python3網(wǎng)絡(luò)爬蟲(chóng)實(shí)戰(zhàn)---12、部署相關(guān)庫(kù)的安裝：Docker、Scrapyd

摘要：阿里云安裝腳本安裝腳本兩個(gè)腳本可以任選其一，速度都非常不錯(cuò)。推薦的加速器有和阿里云。阿里云不同平臺(tái)的鏡像加速方法配置可以參考的官方文檔。以上便是的安裝方式說(shuō)明。上一篇文章網(wǎng)絡(luò)爬蟲(chóng)實(shí)戰(zhàn)爬蟲(chóng)框架的安裝下一篇文章網(wǎng)絡(luò)爬蟲(chóng)實(shí)戰(zhàn)部署相關(guān)庫(kù) 上一篇文章：Python3網(wǎng)絡(luò)爬蟲(chóng)實(shí)戰(zhàn)---11、爬蟲(chóng)框架的安裝：ScrapySplash、ScrapyRedis下一篇文章：Python3網(wǎng)絡(luò)爬蟲(chóng)實(shí)戰(zhàn)---...

ityouknow 2019-07-31 10:34 評(píng)論0 收藏0
Python面試經(jīng)驗(yàn)總結(jié)，面試一時(shí)爽，一直面試一直爽！

摘要：面試的心得體會(huì)簡(jiǎn)歷制作我做了兩份簡(jiǎn)歷，用兩個(gè)手機(jī)賬號(hào)，兩個(gè)簡(jiǎn)歷名字，分別在各個(gè)招聘網(wǎng)站投了雙份簡(jiǎn)歷，一個(gè)是數(shù)據(jù)分析的簡(jiǎn)歷一個(gè)是全棧開(kāi)發(fā)的簡(jiǎn)歷，我真正接觸快年，不管是學(xué)習(xí)還是工作學(xué)到的東西，這兩年大概掌握了前端爬蟲(chóng)數(shù)據(jù)分析機(jī)器學(xué)習(xí)技術(shù)， showImg(https://upload-images.jianshu.io/upload_images/13090773-b96aac7e974c...

gxyz 2019-07-31 10:28 評(píng)論0 收藏0