:
#澳洲水龍 - 阿跨麵
以為最難拍的結果最好拍
但手馬上被他抓流血🩸
阿跨麵真的是帥哥一枚😎
.
.
.
.
.
-
#爬虫類 #爬蟲 #爬蟲類 #蜥蜴
#australianwaterdragon #waterdragon
#intellagama #intellagamalesueurii
#橫紋長鬣蜥 #easternwaterdragon #intellagamalesueuriilesueurii #lizard #reptiles #reptilesofaustralia #wildlifeofaustralia #wildlife #wildlifephotography #lizardsofaustralia #lizardofinstagram #physignathuslesueurii
#reptilesofinstagram #lizard #reptile #exoticpets #exoticpet #animallovers #animalsofinstagram #iloveanimals #lizards
同時也有3部Youtube影片,追蹤數超過5萬的網紅Master Jeng小夫,也在其Youtube影片中提到,#鱷魚 #教學 #crocodile ♥️追蹤小夫的IG👉master_jeng66 (我隨時在ig約大家打球🏀) 🏀小夫的花式街球/運球教學班🏀熱情招生中🏀 報名方式:請到小夫的Facebook或Instagram傳私訊洽詢報名 小夫的Facebook: https://www.faceb...
「爬蟲被抓」的推薦目錄:
- 關於爬蟲被抓 在 阿妮的三八動物園 Facebook 的最讚貼文
- 關於爬蟲被抓 在 惇安法律事務所 Lexcel Partners Facebook 的最佳貼文
- 關於爬蟲被抓 在 Irene 與資料職涯大小事 Facebook 的最讚貼文
- 關於爬蟲被抓 在 Master Jeng小夫 Youtube 的最讚貼文
- 關於爬蟲被抓 在 果籽 Youtube 的精選貼文
- 關於爬蟲被抓 在 Smart Travel Youtube 的最佳解答
- 關於爬蟲被抓 在 [問題] 新手爬蟲(被擋的問題) - 看板Python - 批踢踢實業坊 的評價
- 關於爬蟲被抓 在 如何用八爪鱼抓取抖音数据(✔️shuju6·xyz✔️)爬虫抓取的 ... 的評價
- 關於爬蟲被抓 在 leVirve/CrawlerTutorial: 爬蟲極簡教學(fetch, parse ... - GitHub 的評價
- 關於爬蟲被抓 在 [爬蟲實戰] 如何快速蒐集免費IP作為Python 網路爬蟲跳板Proxy? 的評價
- 關於爬蟲被抓 在 爬蟲被鎖定的推薦與評價,FACEBOOK、YOUTUBE、DCARD 的評價
- 關於爬蟲被抓 在 爬蟲被鎖定的推薦與評價,FACEBOOK、YOUTUBE、DCARD 的評價
- 關於爬蟲被抓 在 爬蟲被鎖定的推薦與評價,FACEBOOK、YOUTUBE、DCARD 的評價
爬蟲被抓 在 惇安法律事務所 Lexcel Partners Facebook 的最佳貼文
【鬥陣來關心】Clubhouse恐成炒股監理漏洞
作者:王奕雅律師
日前新興線上語音聊天社交軟體Clubhouse十分受歡迎,立法院法制局於今年4月指出:Clubhouse在美國更已逐漸成為股市散戶聚集的新平台,然而,基於用戶須有邀請碼方可註冊使用Clubhouse,且語音聊天資料不留存紀錄,恐有可能成為號召或煽動炒股的新管道,成為監理漏洞。
金管會證期局人員表示:現行金管會使用「爬蟲」系統,至社群網站自動化抓取網頁資料,以進行監理。該系統分成兩種形式:第一為納入Facebook用戶個人資訊,使證交所得以掌握資訊。第二則為「逆查訪」,即特定股票如有大量人突然買進,涉及內線不法操作時,證交所將會將其圈示並進行逆向查詢。惟該等邏輯恐難以運用至以聲音溝通、不留下痕跡的Clubhouse上,以進行事後追蹤及分析。
今年年初發生的美國GameStop事件,即是社群媒體生態牽動股市的例子。當時美國傳統的遊戲零售連鎖店GameStop連年虧損,而被避險基金盯上大舉放空,社群媒體Reddit上的網友則號召散戶與避險基金對決,大量購買GameStop股票,導致放空機構慘賠。相同的事件是否有可能發生在Clubhouse上,則視主管機關可否根據該運作模式發展出相應的科技監理方式,目前金管會已將此議題納入專案研究。若網友涉及違法炒股,則可能違反證券交易法第155條第1項之反操縱條款。
(本文之內容不代表本所之立場或法律意見)
爬蟲被抓 在 Irene 與資料職涯大小事 Facebook 的最讚貼文
[分享完成數據分析的 5 個關鍵步驟]
近期大致有發現滿多是因數據 or 行銷相關領域來關注我貼文的朋友們 (真心感謝🥰),所以決定來跟大家先簡單分享完成 #數據分析 的關鍵流程,好的數據分析無關使用困難或是簡單的數據分析方法,#只要能解決問題就是好的方法。通常我在做數據分析報告都會走以下的脈絡,分享給大家(如果大家真的喜歡,我之後再整理更細緻的圖文版☺️):
1. #定義商業問題 (Define Business Problem)
這步驟絕對是做任何題目最關鍵的,必須要確認你現在在做的題目是「真的有需求、真的有 #商業痛點」,並要能聯想,如果你完成這個這題,「能帶來多少貢獻?」
-
2. #資料準備 (Data Preparation)
針對已定義好的商業題目,開始搜集數據,你需要確認數據的時間、商業範圍。例如:你要分析近半年哪些產品的成長是特別有潛力的,那你就必須去找出商品的銷量數據,而且必須要有時間的顆粒度。如果沒有數據,那就去外面找,可以透過 #爬蟲技術 去抓外部的數據、也可以另外去下載公開的數據源。
-
3. #資料探索 (Data Discovery)
拿到數據以後,必須花一些時間了解你手上的數據,這時需要有一些批判式的思維在洞察的過程上,例如:數據有沒有比較歧異的值不應該被納入後續的分析?哪些數據應該可以被整理在一起,才能讓後續的分析更容易判讀?
-
4. #資料分析 (Data Analysis)
到此步驟,就會延伸各種分析方法了,如果你是資料技術人員,你可能會想用各種 #資料科學演算法 執行數據分析; 如果你是行銷人員,你可能會想用一些 #視覺化工具 輔助,幫你透過不同的維度,執行數據分析。
-
5. #結果呈現 (Result Summary)
最後,切記做完的所有努力都要好好的整理「#商業價值」在哪裡,必須要能回扣到第 1 個步驟 - 定義商業問題。通常我就會做一個簡報把上面的所有過程都帶過一次,最後強調商業效益並分享給 Stakeholder 。
-
希望以上的分享,對大家日常工作有幫助,如果喜歡我會另外再整理更多實用的視角給大家🙌
-
這張照片是真實在開箱戰利品的我😆,最近終於有出門購物,常買的品牌太強,除了我確實補貨了一堆之外,品牌也有紀錄我兩個月前生日,記得補生日禮給我😌
#資料科學 #行銷數據分析
爬蟲被抓 在 Master Jeng小夫 Youtube 的最讚貼文
#鱷魚 #教學 #crocodile
♥️追蹤小夫的IG👉master_jeng66
(我隨時在ig約大家打球🏀)
🏀小夫的花式街球/運球教學班🏀熱情招生中🏀
報名方式:請到小夫的Facebook或Instagram傳私訊洽詢報名
小夫的Facebook: https://www.facebook.com/MASTERstreetball/
🏀還沒訂閱的朋友趕快訂閱【小夫】的頻道《按訂閱後記得按鈴鐺》:https://www.youtube.com/user/MBAstreetball
👉未來將有更多好看的影片😎Thank you🙏
👉分享小夫的任何一部影片到facebook並且截圖傳私訊到小夫的facebook給小夫看,小夫每隔一段時間會隨機抽一位網友約打球唷😎
❤歡迎追蹤【小夫】的以下更多活動資訊和個人動態❤
🏀小夫的facebook粉絲專頁網址:https://www.facebook.com/MASTERstreetball/
🏀追蹤小夫Instagram➡搜尋master_jeng66
🏀訂閱小夫&MBA花式街頭籃球隊Youtube頻道➡www.youtube.com/user/MBAstreetball
🏀報名小夫的花式街頭籃球教學班 或加入球隊跟小夫一起玩籃球➡請到MBA花式街頭籃球隊的facebook傳私訊報名,網址:www.facebook.com/streetballMBA
🏀報名跟小夫單挑籃球&訂購小夫指定籃球➡請到小夫FB粉絲團傳私訊洽詢
🏀訂購全地表最好吃的美食伴手禮【大汗肉乾】➡請到小夫的facebook或Instagram傳私訊跟小夫洽詢
![post-title](https://i.ytimg.com/vi/K-Ykq0dshgA/hqdefault.jpg)
爬蟲被抓 在 果籽 Youtube 的精選貼文
|巨型蜥蜴—1.5米長鬣蜥坐BB車外出散步 主人混身抓傷:就算被牠虐待都開心
Bella於三年前開始飼養紅鬣蜥BB及綠鬣蜥檸檬,「喜歡牠的樣子威猛、有型、好像哥斯拉,特別是公的臉有兩塊肉更加有型。有些人看見會覺得很害怕,但帶牠外出時大多數人都覺得很趣緻,原來也有很多人喜歡牠們。」Bella每逢放假日子遇上好太陽,就會帶不怕陌生人的BB外出散步、曬太陽。BB現時已屬成體,由頭至尾總長1.5米,體重13磅,因此要用嬰兒車載着BB外出。另外,為怕BB會突然受驚奔走,故必須為牠戴上爬蟲用牽繩。Bella自BB小時候開始抱牠,讓牠習慣主人的氣味和相處,現時BB不單溫馴,每晚更要跟Bella一起睡覺。
https://hk.appledaily.com/lifestyle/20201219/XYKBUNMS2NFATEB3RAF3HB3UL4/
影片:
【我是南丫島人】23歲仔獲cafe免費借位擺一人咖啡檔 $6,000租住350呎村屋:愛這裏互助關係 (果籽 Apple Daily) (https://youtu.be/XSugNPyaXFQ)
【香港蠔 足本版】流浮山白蠔收成要等三年半 天然生曬肥美金蠔日產僅50斤 即撈即食中環名人坊蜜餞金蠔 西貢六福酥炸生蠔 (果籽 Apple Daily) (https://youtu.be/Fw653R1aQ6s)
【這夜給惡人基一封信】大佬茅躉華日夜思念 回憶從8歲開始:兄弟有今生沒來世 (壹週刊 Next) (https://youtu.be/t06qjQbRIpY)
【太子餃子店】新移民唔怕蝕底自薦包餃子 粗重功夫一腳踢 老闆刮目相看邀開店:呢個女人唔係女人(飲食男女 Apple Daily) https://youtu.be/7CUTg7LXQ4M)
【娛樂人物】情願市民留家唔好出街聚餐 鄧一君兩麵舖執笠蝕200萬 (蘋果日報 Apple Daily) (https://youtu.be/e3agbTOdfoY)
果籽 :http://as.appledaily.com
籽想旅行:http://travelseed.hk
健康蘋台: http://applehealth.com.hk
動物蘋台: http://applepetform.com
#蜥蜴 #鬣蜥 #BB車 #爬蟲 #寵物
#果籽 #StayHome #WithMe #跟我一樣 #宅在家
![post-title](https://i.ytimg.com/vi/9BTDhHQIhUY/hqdefault.jpg?sqp=-oaymwEbCKgBEF5IVfKriqkDDggBFQAAiEIYAXABwAEG&rs=AOn4CLAKgCMTvux4jdBQpr-_stQFyyH_NA)
爬蟲被抓 在 Smart Travel Youtube 的最佳解答
#屯門 #友愛街市 #屯門友愛街市 #屯門之友 #屯門美食 #屯門公園 #屯門公園爬蟲館 #香港街市 #8424西瓜 #港版築地
#電影幻愛
位於屯門愛定商場的友愛街市,基滙資本早前花數月時間裝修,昨日(22日)終於開幕,並以新形象以人,成為全港首個「童話風」的特式街市。
基滙資本公共事務及市場總監黃梓謙坦言,整個翻新工程投資過千萬元,希望能吸引更多外來客,帶動街市生意。他又指,現時街市的衛生已大大改善,不但有更多店舖,更應用更多科技,承認有必要作租金調整,又指在疫情下,仍然有100%出租率,更有19間老店留下繼續經營。
Hello大家好我叫阿Tsar
由於現時大家都不可以出外去旅行
所以我就為大家介紹本地週末的好去處
現時大家可能都不會特別多出街,但是我仍都想拍回來給大家看
等疫情過後, 大家又多一個好去處啦
最近屯門友愛街市經過翻新之後
煥然一新, 裝修設計內外以童話為主題
門外呈不規則的「扭曲」形狀,設計仿照波蘭的「哈哈屋」
街市管理及購買方式十分專業, 有別於過往一般街市的傳統
貨品種類之多,直逼百貨超市, 但價錢亦相當大眾化,
最厲害是他們經常會有現場生劏大龍躉表演
直情置身於東京的築地巿場, 氣氛好, 環境光猛、衛生
場內亦有十多間小食店, 開放至凌晨12點
這個絕非廣告, 我只想介紹給大家週末多個好去處
除了行街市之外, 亦可以安排當日行程去屯門公園裏面有一個爬蟲館
我夜晚臨走的時候, 還去了龍門居小食街掃街
行程相當精彩, 所以除了該區的街坊之外
我特別誠意推薦給大家, 我由上環西隧口搭巴士過去, 不用45分鐘就到友愛街市
大家快點來跟我一齊行街市啦, Are u ready?
我平日去外國旅行, 都喜歡去到當地的街市參觀
就好像我曾經拍過曼谷的Or Tar Kor 新鮮蔬果市場
日本東京築地、英國倫敦Borough market
西班牙La Boqueria Market, 墨爾本victoria market、
以上那幾個市場, 都是CNN的國際排名之內,
除了西班牙的La Boqueria Market我未剪輯上載之外
其餘都全部上載並且得到網友的喜愛
今日我就來到屯門友愛街市,一樣精彩
當中我最欣賞的就是這個生劏大龍躉的表演
大家去過東京築地見過山劏三文魚表演
都知道是當地一個好受歡迎的活動
現在來到香港友愛街市都有得睇, 你看看
師傅手起刀落、刀工簡潔、俐落、手快
如果我不告訴你, 你都不知道是香港,屯門友愛街市
你還以為我在播放東京築地的旅遊片
現場有氣氛之餘、工作人員亦維持好好的秩序
因為在大龍躉未生劏之前、在場人員已經派籌給各位顧客
大家可以排隊購買, 你看師傅身上穿著的T-恤
是日本浮世繪圖案,好有東瀛風格, 視覺上「贏晒」
大龍躉的肉質細嫩,味道鮮美,營養豐富,是為高檔宴席必備之佳餚。
龍躉越大條越好吃,過50斤的味最佳。
龍躉要選魚身、嘴和尾完好無損傷的;
還要看魚鱗,要整齊不充血。盡量選購魚腩,或魚腩附近部位。
大龍躉身上有五部分是最好食的:一是頸骨,二是扣,三是腸,四是翅,五是皮。
要論口感豐富,那肯定是龍躉翅。龍躉本身就是肉質厚實的魚,
所以魚翅吃起來是連皮帶肉,嫩滑可口。
龍躉頸骨,骨髓香滑,還有滋補的妙用,是很多香港大富豪都會指定的滋補品,
有養精益氣的功效。龍躉腸爽脆過人,爆炒或做湯都別有一番風味,
龍躉扣,其實是指龍躉的胃部,它是龍躉最爽口的部位,爆炒後最適宜佐酒。
龍躉皮並不是以嫩滑就叫做好,最重要是以爽韌取勝,
故此在烹製時要講究火候,過火會有粗糙之感,
烹調恰當則成美味佳餚。最好選用濃湯飛水,
在吊出鮮香味的同時,又不會因過分烹煮而讓魚肉過柴。
另一種造法,還可以將它曬乾之後再重新浸發,
口感彈牙,會有股甘香味。
市面上所售的龍躉肉,大多數是冰鮮的。
對於鍾意食好西的人來說,龍躉還是要現場生劏,味道才不失真。
這裏當然不止買龍躉那麼簡單啦,還有好多好東西,跟我來吧
這個菜檔, 除了種類多和新鮮之外,價錢亦相當大眾化
還給我發現到有龜板賣喎、這些真不是每個街市都有得買㗎
大家知否龜板有什麼功效呀,龜板含豐富骨膠質、
水解物含多種氨基酸、蛋白質、脂肪及鈣鹽等。
龜板滋腎潛陽,益腎健骨,養血補心。
用來煲湯, 能夠增強免疫力、 抑制腫瘤、 滋陰壯陽
你可以買回去煲個龜板杜仲豬尾湯,
材料:龜板25克,炒杜仲30克,豬尾600克, 鹽1小匙,
將材料好像你平日煲湯一樣就ok㗎喇,
菜檔還有賣土茯苓、 牛大力、鑽地老鼠等等的中藥
這三件寶貝再加赤小豆扁豆, 功效是強力去濕、皮膚濕疹、周身骨痛、通便排毒
如果不太熟識的朋友, 最好先請教中醫師, 家庭主婦應該知我在説什麼
連菜檔阿姐都非常專業, 價錢牌寫了煲湯的餐牌
顧客不需要左想右諗, 諗下今晚煮什麼
這裹有好多藥膳食材料, 顧客可以一年四季都買來保健
醫生都少了生意呀, 珠豆手指茄,
10HKD3扎, 菜非常之新鮮
來自世界各地的海鮮,價錢一點都不貴,
有皇帝蟹啦、法國藍龍蝦、仲有麵包蟹、鮑魚、桶蠔
睇下養殖海鮮那些水,幾乎是我見過那麼多個街市最乾淨清潔的水
場內小販,非常專業,我聽到他們好耐心地教客人,
怎樣煮法會令到食物最好味的Timing和方法
你看有些海鮮, 有些真的堅平呀
由於現時實施限制令,市民又多了在家煮食呀
不要以為只是媽咪才會入廚房煮返兩味呀
現在好多年青男女,在家煮完好東西後
都鍾意上載自己的成果,跟網友分享一下
所以不只家庭主婦才會去街市㗎
男人入廚就更加加分喇,你看韓劇,見到些暖男那麼受歡迎就知道喇
你看這裏的經典中式甜品,砵仔糕、白糖糕、 鬆糕、糯米糍
拜神的糕點, 日本蛋大菜糕買二送一(優惠期內 ),
在那麼衛年的環境買甜品糕點,買得特別放心
他們還有一些煮糖水的材料,買些海帶返家煮綠豆沙吧
可以清肝排毒,大熱天時,就最適合的
講到肉類就更加精彩啦, 鱷魚尾肉47.9HKD
可以紅燒、燉湯,清蒸也非常鮮美,
鱷魚肉是一種低脂肪、低膽固醇的肉類,
還有滋心潤肺、補血壯骨、補腎固精和驅邪除濕的功效,
經常食用可補氣養血、平喘止咳。
鱷魚皮含有豐富的膠質,能有效的防治骨質疏鬆,並有潤膚養顏的功效。
這裏的肉類簡直是抵食夾大件, 看看塊牛魔王美國安格斯牛扒
在餐廳食最少要200HKD, 這裏有好多不同且受歡迎的醬汁
煮食不精的人,都可變成大廚呀
塊扒還大過我塊面呀, 好大包蒸餃, 裏面有20隻, 45HKD兩大包
20HKD三大個來自台灣的水仙芒, 50hkd兩磅美國爽甜車厘子
這裏除了有好多已經整好的湯包,你見到藍色盒包裝
其實是他們的自家工場製作,有好多是適合氣炸鍋煮食的
譬如好似這個花膠蝦丸, 當然如果你不用氣炸鍋也可以
我聽店舖的職員講, 裏面的花膠有你三分一隻手指那麼大架
已經調味, 所以烹煮過程簡單,還有法式牛角包,
放入氣炸鍋或焗爐幾分鐘就ok啦
加杯咖啡就一個早餐呀, 還有多款蔥抓餅、奶黃包 、銀絲卷
鮑汁花生雞腳, 食物好精緻、不是常見 有得賣的
場內有十幾間餐廳,有條小食街,營業至凌晨12點
門口就見到餐單, 每日有不同優惠,學生更加平
友愛街市每日推出多款食材優惠,街坊買餸著數多
早午晚餐的時間來 到都不會餓親, 那麼大包泰式豬頸肉都是48HKD
不鍾意堂食當然就可以打包啦,
街市裏面的裝飾,每個檔位上都有一朵朵「蘑茹」,
牆上階磚以粉色及白色點綴,再配以黑白色的地磚,
把街市打造成童話世界。 雖然這裏的小販並非童話故事裏面的公主,王子
但我好喜歡這裹的氣氛, 正正體驗到久違了的獅子山下精神
小販好勤力、好有人情味,更加添加咗新科技的元素
好像場內這間店舖啦, 售賣好多來自不同地方的雞蛋
無添加無激素的,清遠雞,清遠雞營養豐富,
富含硒、維生素E及風味物質肌苷酸等,
清遠雞所含的OMEGA-3不飽和脂肪酸和磷脂更高一些,
這兩種物質可以促進膽固醇的代謝,對保護心腦血管非常有好處。
與普通肉雞相比,清遠雞微量元素硒含量是普通肉雞的1.8倍以上
他們懂得叫客人like店舖的facebook
即使友愛街市本身都有自己的facebook
大家未去到街市之前, 可以預先來看他們的街市最近,推廣優惠和活動
亦有會員積分制, 積分可以用來換取禮品或購物優惠
雖然我知道這段時間可能大家都少了出街,
不過每日都要買餸㗎啦, 街市出面就有一個西鐵站
相當方便,我行完街市之後,就搭一個站去到屯門市中心
車站左手邊就已經是屯門公園, 公園裏面有一個爬蟲館
免費參觀, 爬蟲館內展出了不同品種的爬蟲類動物,
有龜、有蟒、有蜥等合共52隻的活展品,
當中有不少甚至是被列為第一、二級的瀕危物種。
同時爬蟲館亦圖文介紹有關資料,
不論男女老幼,都算是屯門好去處呀!
行完昆蟲館,我臨搭車回香港之前去了龍門居小食街
三串都是$32hkd咋,希望你們喜歡我今日的介紹
記得幫我分享訂閱和like,按通知制
下一集繼續介紹筍嘢給大家, 88
成為這個頻道的會員並獲得獎勵:
https://www.youtube.com/channel/UCIuNPxqDGG08p3EqCwY0XIg/join
請用片右下角調4K睇片。
こんにちは、私の名前はああツァーです
今は誰も外に出られないので
地元の週末の素晴らしい場所をご紹介します
現時点では、特に通りを出て行くことはないかもしれませんが、私はそれを持ち帰ってみんなに見せたいと思っています。
流行後、誰もが別の良い場所を持っています
Tuen Mun Youai Marketは最近改装されました
装飾デザインの内側と外側のおとぎ話をテーマにした新しい外観
ドアの形状は不規則な「ねじれた」形状で、ポーランドの「母家」に似せて設計されています
市場管理と購入方法は非常に専門的で、過去の伝統的な市場とは異なります
百貨店に近い商品もたくさんありますが、価格もかなり人気があります。
最も強力なのは、彼らがビッグドラゴンのライブパフォーマンスを頻繁に行うことです。
東京の築地市場に直結し、雰囲気が良く、環境が明るく衛生的
会場には、午前12時までオープンしているスナックショップが10以上あります。
これは広告ではなく、週末にたくさんの良い場所を紹介したいだけです
市場に加えて、爬虫類ホールのあるトゥンムン公園への日帰り旅行も手配できます
私が夜に出かけたとき、私は通りを掃除するために龍門居Xiaoshijieに行きました
旅程はとてもエキサイティングなので、地域の近所を除いて
皆さんに心よりお勧めします上環西交差点からバスに乗り45分で友愛市場に向かいます
さあ、私と一緒に市場に行きましょう、準備はいいですか?
![post-title](https://i.ytimg.com/vi/ZT0lCx5JbcQ/hqdefault.jpg)
爬蟲被抓 在 如何用八爪鱼抓取抖音数据(✔️shuju6·xyz✔️)爬虫抓取的 ... 的推薦與評價
查看名為如何用八爪鱼抓取抖音数据(shuju6·xyz)爬虫抓取的数据是定性数据wifi被抓取数据在表格中抓取需要的的数据(shuju6·xyz)如何抓取广电源码数据信息XX 的用戶個人 ... ... <看更多>
爬蟲被抓 在 leVirve/CrawlerTutorial: 爬蟲極簡教學(fetch, parse ... - GitHub 的推薦與評價
簡單來說,網頁爬蟲就是可以模仿人類瀏覽器行為,自動抓取網頁資訊的程式。利用這種程式的自動化能力,我們可以輕鬆地從網站上「爬取」我們感興趣的資料,再把這些資料儲存 ... ... <看更多>
爬蟲被抓 在 [問題] 新手爬蟲(被擋的問題) - 看板Python - 批踢踢實業坊 的推薦與評價
板上的大大們好,小弟又來請教問題了,最近在爬群眾募資平台的資料,但很常會中間好
幾頁爬不到東西,過一陣子又有了,想請問大家是什麼問題...不確定是不是跟下圖這個
檢查網路連線的有關,有時候我換頁點很快也會遇到QQ 如果有關的話,想請問是否有解
決的辦法,謝謝!
附上我的程式碼:
(當初邏輯上是先去外面的頁面抓完每頁的id名稱再套進去網址去找每個項目的資訊,之
後再轉成Excel)
import requests
import bs4
import time
import random
import pandas as pd
collect_title=[]
collect_category=[]
collect_goal=[]
collect_final=[]
collect_people=[] #空列表之後存資料
def get_page_info(URL):
headers = {'cookie':'age_checked_for=12925;','user-agent': 'Mozilla/5.0 (W
indows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/104.
0.0.0 Safari/537.36'}
#含第九頁一項18禁的cookie
response = requests.get(URL,headers=headers)
soup = bs4.BeautifulSoup(response.text,"html.parser")
data=soup.find_all('div','text-black project text-neutral-600 mx-4 mb-4 pb
-12 relative h-full')
for t in data:
href = t.find("a","block").attrs["href"] #取a標籤下href後面的網址
link ="https://www.zeczec.com"+href
response_2 = requests.get(link,headers=headers)
soup_2 = bs4.BeautifulSoup(response_2.text,"html.parser") #解析取下的
網址中的網頁內容
main_info = soup_2.find_all('div','container lg:my-8')
for i in main_info:
#category = i.find('a','underline text-neutral-600 font-bold inlin
e-block').text.strip()
category = i.find_all('a','underline text-neutral-600 font-bold in
line-block')[1].text.strip()
title = i.find('h2', 'text-xl mt-2 mb-1 leading-relaxed').text.str
ip()
final_cash = i.find('div','text-2xl font-bold js-sum-raised whites
pace-nowrap leading-relaxed').text.strip()
goal_cash = i.find('div','text-xs leading-relaxed').text.strip()
people = i.find('span','js-backers-count').text.strip()
final='類別:{} 標題:{} 目標:{} 實際:{} 贊助人數:{}'.format(categor
y,title,goal_cash[6:],final_cash[3:],people)
print(final)
collect_category.append(category)
collect_title.append(title)
collect_goal.append(goal_cash[6:])
collect_final.append(final_cash[3:])
collect_people.append(people) #丟入collect列表
time.sleep(2)
for i in range(1,13,1):
print("第"+str(i)+"頁")
URL="https://www.zeczec.com/categories?category=1&page="+str(i)+"&type=0"
get_page_info(URL)
delay_time=[3,7,8,5]
delay=random.choice(delay_time)
time.sleep(delay)
print(len(collect_goal)) #計算抓了幾筆
#print(collect_final)
#print(collect_people)
col1 = "類別"
col2 = "標題"
col3 = "目標金額"
col4 = "實際金額"
col5 = "贊助人數"
data = pd.DataFrame({col1:collect_category,col2:collect_title,col3:collect_goa
l,col4:collect_final,col5:collect_people}) #三欄放list
data.to_excel('音樂.xlsx', sheet_name='sheet1', index=False)
遇到問題的畫面:
突然好幾頁不能抓到這樣,不知道是requests 還是太頻繁嗎?
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 42.72.132.142 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1665326491.A.116.html
※ 編輯: etudiant (42.72.132.142 臺灣), 10/10/2022 02:55:27
... <看更多>