01 眾所周知在2020年,所有做金融的,搞保險的,弄微商的,干互聯網的,這段時間都成了賣口罩的,但問題是,大多數人又買不到口罩。 你可以買,人家可以不發貨。 作為一個真正的硬核男人,技術之光,我覺得我有責任教大家怎麼用爬蟲這種高科技手段“硬核”成功買到口罩:
先看成果,這是昨夜裡還可以搶購的一家旗艦店: 這是10號下午還可以預約購買的渠道: 而我找到的另外這家店,庫存還有2.7萬: 我能找到這麼多貨的秘訣是什麼? 因為我是流落在民間的“網購小王子”,這麼說吧,幾乎所有主流電商平台的運營規則,搜索技巧我都門清,通過一些搜索技術和規則組合,我能很輕鬆的找到任何我想買的東西。 為何我如此卓越? 秘訣就是第一個字: 窮
如果你像我一樣,買條內褲都需要寫個爬蟲,貨比百家,價格監控180天,像獵人一樣耐心又兇狠的等待薅羊毛,你一定也能和我一樣優秀。 還記得我的那篇南極人貼牌么,就是我寫爬蟲的時候發現了一堆南極人,數量和質量超出想象,所以激發了我的興趣。 在我的牛頓頓頓第八定律里,萬事萬物都遵循一個“難度守恆定律”:想要得到大家都想要的東西,總要多付出點啥,可以是錢,也可以是時間。 當然,我主要靠個人魅力就夠了。 如果你沒有我這樣優秀的條件,就請把眼睛睜大,認真看清楚我的操作。
想買到,先得保證有。 行動前,我們必須要先搞清楚一個事實:是否有口罩的供應可以讓我們買呢? 我查過數據,2018年中國口罩行業總產量45.4億隻,2019年口罩每天的最大產能大概是2000多萬隻。 2000多萬隻,刨除出口,非防病毒用途,直接供給定點單位的量,剩下的14億人在搶,確實不容易買到。 但是:難,並不意味着做不到。 這麼多年的失敗經驗告訴我:大家都想要的東西,得到,從來不會太容易。 姑娘和口罩,都適用這個規律。 現在這個時間節點,幾乎所有人都缺口罩,可以很確定的說,常規渠道已經很難買到了。 但是最近有一個機會: 口罩生產後有一個使用環氧乙烷滅菌的過程,滅菌後需要“解析”約7-14天,如果有大型解析車間的話,很快就能出貨,但是大部分廠家並不具備。 換句話說,年初很多口罩企業就已經緊急復工了,但是他們生產的相當一部分口罩其實並沒有馬上進入市場,推一下時間,最近正是大規模出貨的時候。 懂了么,市場上是會持續有口罩流出的,存在買到的可能性。 有了可能性,剩下的就是看誰的操作更騷。 作為一名盡調小王子,我一直反覆強調挖掘信息和甄別信息這種能力的重要性,這個時候,就能派上用場了。
口罩現在是核心物資,非常緊俏,甚至可以說是一種寶貴的資源,實力一般的商家連貨都很難進到。 這個時候,只有供應鏈能力很強,關係很硬的商家才能搞到一些,好不容易搞到的貨源,大部分不會輕易就賣出去,而是當做“平台資源”拿來做活動,撬動更大的價值,所以策略是: 第一:留意大平台 好不容易搞來的貨源,自然是要好好利用,提高一下企業形象,用戶活躍度之類的,如果你留心觀察,淘寶、考拉,天貓,京東,拼多多,小米這些平台,都會不定期的放出一些庫存,讓大家來搶,而且價格都很便宜。 這是拼多多的疫情頁面,價格非常良心,百億補貼專區,可以放心購買: 雖然麻煩一些,但是可行性是有的。這些信息是很關鍵的,那怎麼才能及時獲取,及時行動呢? 文章後面,我會結合爬蟲和工具詳細來給大家講。 第二:換關鍵詞 很多讀者心眼太實誠了,買N95就只知道搜索N95,買酒精,就只知道搜索酒精,但是,你知不知道有種東西叫“醫療急救包”? 這裡面酒精,碘酒,溫度計,醫用口罩,一應俱全,如果實在買不到,是不是也可以救一救急? 做人,心眼不能太實誠。
第三:尋找替代用品 要知道:大眾是愚昧的,大部分人是跟風搶購,其實並不懂得背後的原理。 口罩防病毒的關鍵是“阻擋飛沫傳播”的能力,消毒酒精是75%的乙醇,至於具體產品是什麼,只要能夠滿足功能就可以,不必講究太多。 同樣是“阻擋飛沫傳播”,防毒面具不可以嗎?連護目鏡都省了。 3M和霍尼韋爾賣完了,為什麼不能買國產的呢? 廣東有大量的代工廠呀,他們的產品有的是。 隨便搜一搜,大量的防毒面具,是有庫存,可以發貨的,如果急用,救救急還是可以的。 “上頭效果”非常炫酷,極其上頭: 都是75%的酒精,來點生命之水,沂蒙山伏特加不行嗎? 要知道,這個時間點,消毒酒精並不比飲用酒便宜: 當然,防毒面具的使用方法是有技巧性的和N95不同;不同濃度的酒精,用途、消毒效果也有差異,尋找替代品一定仔細弄清楚原理,嚴格按照操作使用,不要盲目購買。 像是下面這個同學買的鳥嘴醫生面具,除了搞笑的作用,沒有任何其他作用,請勿模仿。 第四、本地貨源和政府供給 太多人只知道網購了,但是線下其實還有很多購買渠道,政府也在積極的配合發放物資,開放預約,大家一定要多留意這方面的信息。 我以杭州舉例,很多人不知道“杭州醫保”微信公眾號,是可以預約領取口罩的: 而杭州市民卡APP可以買到消毒用品: 附近的藥店也會有政府提供,定期限量銷售的防護用品,這些東西其實一直都在,很多地區都有,只是大家不容易獲取到相關信息而已。 畢竟,不是所有人,都能和我一樣優秀 當然,只能獲取信息是不夠的,還要足夠“及時”,“行動夠快”才能搶得到。 拼多多,淘寶,京東,有贊,小米有品,地方網站,公眾號預約。。。。。 很多都是定時搶購,信息非常的混亂,而且不同地區也不一樣,我又不可能整天盯着,這個時候,就需要考驗我的技術水平了。 關鍵點來了,要用技術解決問題! 我要寫個爬蟲。
我也是搞過技術的,雖然天天挨打,但也學了幾招,可以露兩手。 其實滿足搶購口罩的爬蟲非常簡單,一個是監控庫存,一個是自動搶單,當然,我還有一個地區物資線報群,順道能監控一下關鍵詞信息,讓我及時獲取物資信息就更好了。 思路非常簡單: 篩選有用信息鏈接 24小時監控頁面變化 獲取目標參數後及時通知 自動搶購 不就是寫代碼嗎? 誰還不會寫兩行代碼了? 說干就干。
程序員有很多風格,我的風格是search-cv型,通俗點說就是:搜索+複製粘貼。 都是裁縫工程師,論抄,從來沒怕過誰。 第一步,也是最關鍵,最有創造力的一步,我們先起一個吊炸天的名字,這是凸顯自己專業性最重要的一步: 調用Python的requests模塊,然後做頁面抓取和郵件通知就可以,因為不同渠道,不同網頁,頁面結構不同,參數也不一樣,我們就根據頁面結構,分區域監控不同的渠道鏈接,到時候往裡面更新鏈接就好了。 大概抄一抄,差不多之後,就可以搞通知模塊了,最好使用短信,但是短信要錢啊,於是我選擇了不花錢的郵箱: 窮是創造力的第一來源,注意看標題: 郵箱部分配置好之後,剩下的就簡單了,一個循環結構,定期過來巡邏一下網頁的情況,然後抓到參數之後,及時通過郵件彙報給我就好: 像我這樣的商務人士,一般都是用扣扣郵箱,最後配置一下,就基本OK了 跑一下試試,效果非常理想: 所有網站的原理都是這個,但是不同家的讀取方法會有區別,不過區別不大。 京東抓完,可以去抓淘寶。 正當CV藝術家開心的時候,突然一個異常通知過來: 剛跑了2分鐘的爬蟲,崩了,這可能是人類歷史上最脆弱的爬蟲。。。 原因是淘寶已經發現了我的訪問異常。。。。。非常客氣的讓我坐下來喝口水 你別說,阿里的同行們,人文關懷是足夠的。。。。。 於是我折騰了一晚,和拼多多,小米,京東,淘寶的工程師們展開了激烈的對抗。 一個人必須像一支隊伍,為了替大家搶到口罩我要與整個互聯網為敵,鏖戰500回合。 一直肝到夜裡6:00,不對,是上午6:00。 終於,徹底崩潰了,這次是人崩潰。 經過實戰發現這些大平台的反爬蟲機制,一個比一個牛逼,想要繞過去,又要多賬號,又要多IP,又要接碼平台,又要搞VPS。。。 倒不是搞不定,但是問題是,我的專業設備都在公司,現在關在家裡怎麼整。 而且,我只是搶個口罩而已啊??? 原本我吃了晚飯就開始精神飽滿的寫搶購指南,寫到凌晨六點半,本來還想給大家發布一個搶購工具,難道就是這樣一個結果嗎? 失敗是成功之母,今晚,又多了一個媽。 我哭得可傷心了,然後一邊手動刷新,一邊後悔學藝不精,一邊抹眼淚。 我想想算了吧,買個屁口罩,還是逛電商快樂。 於是我打開了最愛的什麼值得買,打算消磨一下時光。 但是打開之後,我更加不快樂。 因為我發現了一個新功能。 什麼值得買,專門搞了一個匯總工具頁面: 這上面有應急物資日曆,現貨搶購和本地貨源三個模塊,張大媽太尼瑪給力了,竟然有人跟我有同樣的想法並且這麼牛逼,還把它給做出來了。 要不是我的專業工具都在公司,應該是我先搞出來才對。 我提到的小藥箱這裡有: 防毒面具這裡都有,可以說是相當全面了: 除了實時抓取,我還發現了一個特別幫的功能:線索提報。 連爆料,諜戰技術都用上了,比我的物資消息群模式更給力。。。。 研究了一下流程:有人買到了貨,然後有獎提報,然後編輯審核,信息上架,這個流程基本上是比較科學了。 我簡單驗證了一下,發現,我找到的靠譜渠道裡面有,我沒想到的渠道裡面也有,而且是實時更新的。 本地貨源也很全,確實牛X:
專業的就是專業的,全網爬蟲+爆料模式+牛逼運營=天下無敵 但我沒有很快樂,因為我現在在懷疑我這一夜到底在幹什麼。 如果這個一夜我是去偷別人晾曬的胸罩的話,可能我已經被抓住打死了,再也用不到口罩了。 我不禁想起了一句名言:當你不知道路在哪裡的時候,方向比努力更重要。 果然,我的人生內核,就是悲劇!