如何用 Python 制作 GitHub 消息助手
在互聯(lián)網(wǎng)2.0時(shí)代,工程師解決業(yè)務(wù)問(wèn)題主要依賴(lài)的是自己掌握的各種工具和軟件伴隨著席卷全球的開(kāi)源浪潮,開(kāi)源工具和軟件也迅猛增長(zhǎng)。工程師需要關(guān)注的技術(shù)和軟件也隨之越來(lái)越多,學(xué)習(xí)負(fù)擔(dān)越來(lái)越大,大腦也越來(lái)越不夠用。但工程師們也很無(wú)奈,因?yàn)檎l(shuí)掌握的技術(shù)和軟件越多,誰(shuí)就能更高效的解決問(wèn)題。于是工程師們開(kāi)始借助互聯(lián)網(wǎng)外腦工具:尤其是搜索引擎、書(shū)簽、github、scihub等 而工程師們解決問(wèn)題的能力就體現(xiàn)在了對(duì)外腦工具的利用上。但是,隨著工程師們要解決的問(wèn)題增長(zhǎng)以及自身知識(shí)的積累,外腦工具也逐漸變得臃腫:書(shū)簽越來(lái)越多,github的訂閱越來(lái)越多,多到最后就約等于沒(méi)有書(shū)簽、沒(méi)有訂閱了。為了解決這些問(wèn)題,我們需要更智能靈活的外腦工具,能讓我們從信息的海洋中解放出來(lái),讓我們能更加專(zhuān)注自身業(yè)務(wù)。
GitHub 消息的問(wèn)題有沒(méi)有發(fā)現(xiàn)你的 Github 消息 Inbox 過(guò)幾天不處理,就會(huì)堆積成山呢?相信有的同學(xué) Inbox 里的數(shù)字比這個(gè)還要夸張,甚至有的同學(xué)已經(jīng)絕望的放棄了 Inbox 這個(gè)功能。為什么會(huì)這樣?因?yàn)槊總€(gè)Coder內(nèi)心大多都會(huì)喜歡收藏喜愛(ài)的作品,而github的項(xiàng)目主頁(yè)右上角最醒目的位置總是擺著這三個(gè)按鈕:
相信工程師們看到喜愛(ài)的項(xiàng)目,就會(huì)毫不猶豫的一鍵三連:watch、start、fork。悲劇也就從這里開(kāi)始了。1、工程師喜歡的項(xiàng)目越來(lái)越多;2、項(xiàng)目會(huì)有自己的生命周期,有的變得活躍,有的逐漸消亡;3、工程師越來(lái)越忙,無(wú)暇顧及Inbox。然后,Inbox就變這樣了:
看著滿是堆積的消息,是不是有種崩潰的感覺(jué)。那github的功能到底出了什么問(wèn)題?我認(rèn)為是 watch、star、fork 需要工程師投入的關(guān)注程度搞錯(cuò)了。當(dāng)然現(xiàn)在github也在積極改進(jìn),相比以前,我們可以發(fā)現(xiàn)有了更多的 watch 選項(xiàng):
但是僅僅這些就夠了嗎?看著 Inbox 動(dòng)輒上萬(wàn)條的消息,難道要將自己關(guān)注的項(xiàng)目一個(gè)個(gè)的修改為 Ignore?工程師的內(nèi)心依然是崩潰的!有沒(méi)有辦法拯救工程師的Inbox?有!來(lái)吧,自己動(dòng)手拯救我的收件箱。
解決方案用 python 做一個(gè) GitHub 消息助手,自動(dòng)幫工程師關(guān)閉和刪除不必要的消息。這不也就是真正意義上的Watch嗎?你看它的時(shí)候,會(huì)接收它的信息,你不看了它就消失了。那么仔細(xì)想想,到底哪些消息真正對(duì)工程師有用呢?1、已經(jīng)很久沒(méi)更新的項(xiàng)目,是不是就可以不關(guān)注了?2、已經(jīng)不是工作范圍和興趣點(diǎn)的項(xiàng)目,是不是也可以不關(guān)注了?3、已經(jīng)很久都沒(méi)人反饋問(wèn)題的項(xiàng)目,是不是也可以不關(guān)注了?而python有一個(gè)優(yōu)勢(shì)就是可以很方便的實(shí)現(xiàn)用戶操作的自動(dòng)化 嗯,看起來(lái)這些僵尸項(xiàng)目都可以用python自動(dòng)化的方式清除掉 說(shuō)干就干,讓我們開(kāi)始吧!
代碼實(shí)現(xiàn)我們知道Python有一款很棒的Web自動(dòng)化測(cè)試框架:Selenium,但 Selenium 主要還是用于測(cè)試,調(diào)用還是略顯復(fù)雜。所以筆者在github上搜刮了一番,終于找到一款合適的Python包:PyChrome 項(xiàng)目地址:https://github.com/siversalih/pyChrome-Web-Automation下面我們就用這款非主流的自動(dòng)化工具包,完成我們的小助手 看主頁(yè),這個(gè)作者很懶,幾年前就沒(méi)有更新了,但幸好說(shuō)明幫助還是挺全的:https://pychrome.wordpress.com/usage/所以我們就可以 happy 的按照說(shuō)明書(shū)來(lái)組裝機(jī)器人了。
0.環(huán)境準(zhǔn)備首先需要準(zhǔn)備Python 3.8環(huán)境,然后按照網(wǎng)上說(shuō)明安裝 Selenium,接下來(lái)將PyChrome項(xiàng)目 clone到本地。ok,環(huán)境準(zhǔn)備完成。
1、模擬登錄github使用PyChrome訪問(wèn)github有個(gè)小麻煩,每次都會(huì)啟動(dòng)一個(gè)全新的Chrome瀏覽器實(shí)例。這就導(dǎo)致無(wú)法重復(fù)利用保存在本地的cookie信息,所以每次要模擬登陸下。github有一個(gè)特點(diǎn),如果ip變更,需要輸入驗(yàn)證碼,如果ip不變則不需要,所以第一次我們只能先手工輸入一次。
不過(guò)github的登錄頁(yè)面相對(duì)簡(jiǎn)單,只需要找到Username和password對(duì)應(yīng)的表單組件就可以了。所以登錄的代碼可以非常簡(jiǎn)潔,如下所示:
browser.open('https://github.com/login')# name='login'name_locator = '//*[@name=’login’]'el_name = browser.findElementByXPath(name_locator) browser.sendTextToElement(username, el_name) # name='password'pass_locator = '//*[@name=’password’]'el_pass = browser.findElementByXPath(pass_locator) browser.sendTextToElement(password,el_pass) login_locator = '//*[@name=’commit’]'el_login = browser.findElementByXPath(login_locator) browser.clickElement(el_login)2.模擬進(jìn)入Inbox
登錄完成后,我們需要進(jìn)入收件箱,查看到底有哪些未讀消息。收件箱有點(diǎn)小復(fù)雜,不過(guò)也還能很方便的區(qū)分。
找到了正確的xpath,相信定位也不是難事。這里我又取了個(gè)巧,我們被困擾的其實(shí)是有消息的項(xiàng)目,如果一個(gè)項(xiàng)目不發(fā)消息,我們其實(shí)也不會(huì)被騷擾到。所以直接選取左下角的 Repositories 區(qū)域似乎效率更高一些。代碼如下:
browser.open('https://github.com/notifications')# 獲取有消息的Repositories列表locator = 'js-notification-sidebar-repositories'el_repos = browser.findElementByClass(locator) repos_list = browser.findElementsByTag('li', el_repos)3.檢查僵尸項(xiàng)目
我選用第三條策略,已經(jīng)很久沒(méi)人反饋問(wèn)題的項(xiàng)目作為判斷僵尸項(xiàng)目的標(biāo)準(zhǔn)(純粹只是因?yàn)榉奖銓?shí)現(xiàn)),首先訪問(wèn)issue,然后判斷issue里的更新日期,恰好有一個(gè)詳細(xì)的日期字段。下面代碼目的很簡(jiǎn)單,就是獲取最后一條issue更新了多久。
browser.newTab('https://github.com/' + repos_name + '/pulls?q=') # 判斷最近的 pull request locator = '//div[@aria-label=’Issues’]' el_pulls = browser.findElementByXPath(locator) pull_list = browser.findElementsByTag('relative-time', el_pulls) timedelta = 0 if type(pull_list)==list and len(pull_list)>0:# 2020-11-10T00:55:39Z# last_pull_time_str = pull_list[0].getAttribute('datetime')last_pull_time_str = pull_list[0].get_attribute('datetime')last_time = datetime.strptime(last_pull_time_str, '%Y-%m-%dT%H:%M:%SZ')timedelta = (datetime.now() - last_time).days logger.debug(repos_name + ' timedelta: ' + str(timedelta) + ' days')4.取消關(guān)注僵尸項(xiàng)目
如果issue已經(jīng)超過(guò)了1年,自然就應(yīng)該取消關(guān)注了,畢竟目前信息更新的速度太快了。
# 取消不活躍項(xiàng)目的訂閱(1年以上沒(méi)有pull request)if unsubscribe and timedelta > 366: el_notify_button =browser.findElementsByTag('notifications-list-subscription-form') browser.clickElement(el_notify_button) time.sleep(1) # data-target='notifications-list-subscription-form.menu' locator = '//*[@data-target=’notifications-list-subscription-form.menu’]' el_notify_menus = browser.findElementByXPath(locator) # value='ignore' sub_locator = '//*[@value=’ignore’]' el_ignore_button =browser.findElementByXPath(sub_locator, el_notify_menus) browser.clickElement(el_ignore_button) logger.debug(repos_name + ' cancel subscribed')5.刪除僵尸項(xiàng)目消息
最后,該是解除困擾的時(shí)候了,這種不再更新的項(xiàng)目,工程師自然也不要再被它的消息騷擾。
el_repos_link = browser.findElementByTag('a', repos) browser.clickElement(el_repos_link) # mr-1 js-notifications-mark-all-prompt time.sleep(1) el_sel_all =browser.findElementByClass('js-notifications-mark-all-prompt') browser.clickElement(el_sel_all) time.sleep(1) # title='Done' done_locator = '//*[@title=’Done’]' el_done = browser.findElementByXPath(done_locator) browser.clickElement(el_done) logger.debug(repos_name + ' remove notifiy')
以上代碼就是模擬 Done 按鈕的操作:
到這里就完成了GitHub消息助手的全部邏輯,整個(gè)Inbox終于清靜了,是不是可以喝杯咖啡愜意一下了。
Python自動(dòng)化工具的確是給工程師們帶來(lái)了便捷,使得工程師能應(yīng)對(duì)各種日常不同的挑戰(zhàn)。為方便各位工程師小伙伴們?cè)缛战饷摗⒌脙斔福陨洗a已開(kāi)源,完整的代碼地址:https://gitee.com/knifecms/puppetry/blob/master/github-agent/resp_notify.py另外,該項(xiàng)目下,還有幾個(gè)其他有意思的自動(dòng)化助手和工具喲,大家感興趣的話也可以研究研究。希望得到你的更多好點(diǎn)子!
以上就是如何用 Python 制作 GitHub 消息助手的詳細(xì)內(nèi)容,更多關(guān)于Python 制作 GitHub 消息助手的資料請(qǐng)關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. 詳解瀏覽器的緩存機(jī)制2. Xml簡(jiǎn)介_(kāi)動(dòng)力節(jié)點(diǎn)Java學(xué)院整理3. phpstudy apache開(kāi)啟ssi使用詳解4. ASP.NET MVC使用異步Action的方法5. uniapp解決軟鍵盤(pán)彈出問(wèn)題方法詳解6. jsp實(shí)現(xiàn)登錄驗(yàn)證的過(guò)濾器7. jsp文件下載功能實(shí)現(xiàn)代碼8. ajax實(shí)現(xiàn)頁(yè)面的局部加載9. 爬取今日頭條Ajax請(qǐng)求10. AJAX的跨域問(wèn)題解決方案
