色综合图-色综合图片-色综合图片二区150p-色综合图区-玖玖国产精品视频-玖玖香蕉视频

您的位置:首頁技術(shù)文章
文章詳情頁

python基于爬蟲+django,打造個(gè)性化API接口

瀏覽:10日期:2022-06-29 13:45:10
簡述

今天也是同事在做微信小程序的開發(fā),需要音樂接口的測試,可是用網(wǎng)易云的開放接口比較麻煩,也不能進(jìn)行測試,這里也是和我說了一下,所以就用爬蟲寫了個(gè)簡單網(wǎng)易云歌曲URL的爬蟲,把數(shù)據(jù)存入mysql數(shù)據(jù)庫,再利用django封裝裝了一個(gè)簡單的API接口,給同事測試使用。

原理

創(chuàng)建django項(xiàng)目,做好基礎(chǔ)的配置,在views里寫兩個(gè)方法,一個(gè)是從mysql數(shù)據(jù)庫中查數(shù)據(jù)然后封裝成API,一個(gè)是爬蟲方法,數(shù)據(jù)扒下來以后,通過django的ORM把數(shù)據(jù)插入到mysql數(shù)據(jù)庫中。這里的路由也是對應(yīng)兩個(gè),一個(gè)是爬蟲的請求路由(就是運(yùn)行路由),一個(gè)是接口路由,MODEL層里也是為了方便,就設(shè)了兩個(gè)字段,一個(gè)是歌曲名稱,一個(gè)是URL地址。

代碼如下

views文件代碼

from django.shortcuts import render,HttpResponseimport requestsfrom lxml import etreefrom .models import Api# Create your views here.def api_wy(request): api = Api.objects.all() return render(request, 'index.html',locals())def pc(request): url = ’https://music.163.com/discover/toplist?id=3779629’ headers = { ’user-agent’: ’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3861.400 QQBrowser/10.7.4313.400’ } data = requests.get(url=url, headers=headers) html = etree.HTML(data.text) music_list = html.xpath(’//ul[@class='f-hide']/li/a’) music_lis = [] # 存放歌曲信息 for music in music_list: music_name = music.xpath(’./text()’)[0] # 獲取歌曲名稱 music_id_all = music.xpath(’./@href’)[0] # 獲取a標(biāo)簽內(nèi)容 music_id = music_id_all.split(’=’)[-1] # 將a標(biāo)簽內(nèi)容進(jìn)行數(shù)據(jù)清洗,提取歌曲的id download_music = music_name + ’ ’ + f’http://music.163.com/song/media/outer/url?id={music_id}.mp3’ # 將歌曲名稱和url進(jìn)行拼接 music_lis.append(download_music) print(download_music) for url in music_lis: try: url_name = url.split(’ ’)[0] # 獲取名稱 url_music = url.split(’ ’)[1] # 獲取url Api.objects.create(name=url_name,url=url_music) print('正在插入數(shù)據(jù)') except: print('charushibai') return HttpResponse('正在下載')

URL路由文件

from django.contrib import adminfrom django.urls import pathfrom api.views import api_wy,pcurlpatterns = [ path(’admin/’, admin.site.urls), path(’api/’,api_wy), path('pc/',pc),]

Models層面

from django.db import models# Create your models here.class Api(models.Model): name = models.CharField(’歌曲名稱’, max_length=100) url = models.CharField('歌曲地址',max_length=300) class Meta: verbose_name = ’歌曲API’ verbose_name_plural = verbose_name def __str__(self): return self.name

python基于爬蟲+django,打造個(gè)性化API接口

其他的也就沒什么可說的了,也是一個(gè)比較簡單的測試需求,就是為了省點(diǎn)事情才弄得好了,今天就到這了,拜拜

以上就是python基于爬蟲+django,打造個(gè)性化API接口的詳細(xì)內(nèi)容,更多關(guān)于python api接口的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!

標(biāo)簽: Python 編程
主站蜘蛛池模板: 寡妇野外啪啪一区二区 | 欧美日韩永久久一区二区三区 | 欧美一做特黄毛片 | 成人黄色在线视频 | 又黄又爽又刺激的视频 | 日韩免费一级毛片 | 一级片国产 | 成人在线视频免费看 | 久久精品在现线观看免费15 | 亚洲国产欧美自拍 | 免费特黄一级欧美大片在线看 | 欧美精品一区二区三区四区 | 波多野结衣视频在线 | 久久久久国产精品免费网站 | 爱爱爱久久久久久久 | 久久精品国产99精品最新 | 极品精品国产超清自在线观看 | 欧美另类视频videosbest18 | 国内精品影院久久久久 | 亚洲欧美v视色一区二区 | 日本一区二区三区四区五区 | 国产成人看片免费视频观看 | 日韩视频大全 | 久久五| 国产成人欧美视频在线 | 久色成人 | 99视频国产热精品视频 | 国产成人一区二区在线不卡 | 精品亚洲综合久久中文字幕 | 久久96国产精品久久久 | 日本一区二区三区不卡在线视频 | 亚洲精品成人中文网 | 国产亚洲精品资源一区 | 久久免费视频7 | 三级毛片免费看 | 欧美日韩国产58香蕉在线视频 | 欧美视频精品在线 | 精品日韩欧美一区二区三区 | 玖草在线播放 | 久久精品国产99国产精品 | 欧美一级高清片在线 |