Search
網頁爬蟲合法嗎？
這是一個資料驅動的世界。採購和消費外部資料是許多企業的需要。不僅如此，利用公開可用的資料是許多企業生存和削弱競爭的唯一途徑。
雖然網頁爬蟲是解鎖網路資料的關鍵，但在 Web 爬蟲的合法性和道德性方面存在很多困惑和迷思。這篇文章旨在解決這些問題，並使這一主題更加清晰。它還介紹了你應該遵循的最佳做法，以及你應該尊重的法律和道德底線，以便在保持安全和合法的情況下，從網頁爬蟲中獲得最佳效果。
網頁爬蟲相關線上課程可參考 https://softnshare.com/tag/python-webscrap/
https://www.crawlnow.com/blog/is-web-scraping-legal
Well...
星期四晚發生了點小意外。。。
Y先生在家餵我地條Royal Python Nagini時，被咬到了 😬
不過Y先生有驚人的復原力，
只係過左都未夠2日，
傷口已埋得7788。
事發時已快10pm, 我和同事們吃完晚飯閒聊後在回家的途上，
還有10分鐘的路程，突然接到媽咪的電話，說Y先生被蛇咬到血流不止，問我還有多久才回到家。
(⊙＿⊙)
開車前才和Y先生通過電話，
明明說在看Netflix,
怎麼突然去了餵蛇ga?
養左咁多年，
只試過一次被輕咬到，
除了多了幾個小洞，
並沒有流血，
今次咁嚴重?
回到家，
地墊上很多血，
Y先生的手仍在流血，
整隻手不斷的震，
說自己"in shock"
面色蒼白、軟弱無力、成個人運作唔到咁。
原來因為我不在家，媽咪又和Y BB在樓上，
他被蛇蛇咬到後呼救了接近10分鐘媽咪才聽到下樓，
他曾嘗試用左手整開蛇蛇的口，
用手拍打蛇蛇，
點知反而令蛇蛇愈咬愈實，
仲開始非常用力地纏住他的手。。。
完全移動唔到。
最終媽咪聽到他的呼救聲，帶住BB落樓，
用筷子插蛇蛇的口才放開。。。
蛇蛇無毒，所以唔會有生命危險，
所以我都唔sure有無需要去醫院。
問Y先生要點，他都未回魂答我唔到，
叫我決定，但因為擔心蛇蛇的牙留在傷口入面，所以可以的話還是去醫院檢查下，
睇下有無得照x ray。
最後我車了他去A&E,
仲去錯左門口，
但職員係對講機見到Y先生行都無力咁，
話可以比我地入去經Building內部去A&E,
仲可以用門口的輪椅。
等入去比護士Triage都等左半個鐘。。。
檢查完說可以安排照x ray,
比左4粒止痛藥頂住檔先。
但在A&E等到3am幾還未可以照XRay,
醫生都見唔到。
Y先生覺傷口已止左血，
摸落唔似有異物，
所以決定自行離開回家了。
5個鐘在A&E最後是運吉的。
傷口都是自己返屋企用粉紅藥水洗。。。
總結經驗：
1) 真係要mentally prepare如果有突發意外時要點做，有生命危險打999。無生命危險打111。 111線路都好繁忙，在A&E門口等緊時有試過打111, 但聽左幾分鐘都未入正題，一係就留電話咁，所以就收左線。 如果肯等無收線應該會比係A&E呆等有用。
2) 了解定醫院主要部門的位置，泊車位置等。
3) 即刻買返set長的牛皮手套和長鉗 😬
圖：
長鉗仲未到，舊鉗咁短，平時係唔戴手套ge-.-
加上Y先生個日檢查完一隻Pet Rat, 成隻手對於蛇蛇來講絕對吸引過解凍左的凍鮮老鼠la 🙈
傷口已經埋哂咁濟了。
被咬當日成身都係血。。。
🌳線上課程介紹：使用 Python 進行統計分析學習課程
本課程目的在透過深入統計學和資料科學的真實世界，為你的成功定位。
✅ 透過真實世界的範例來學習: 我們將完全專注於應用統計學，而不是坐在那裡閱讀數小時的理論內容，並努力將其與真實世界的問題關聯起來。 學習理論，並立即透過 Python 將其應用到常見問題上，從而獲得超越所需的知識和技能。
✅ 專注於展示的結果: 處理數字很容易，並且很快成為使用電腦而不是人工的領域。 人們的技能是解釋和視覺化的結果，所以我們重點關注這一點，整合視覺輸出和圖形探索在我們的工作流程。 此外，額外的紅利內容，以很棒的方式以調整視覺效果的報告，文章和介紹，這樣你可以從人群中脫穎而出。
✅ 最新的工具和工作流程: 這裡不是學校，我們不想花幾個小時用手工方式打磨解決問題來做做強化學習。 不，我們將使用最先進的技術和程式庫來解決我們的問題，利用最新軟體版本的功能來使我們儘可能高效和高效。 當這個產業已經如火箭般發展時，不要重新發明輪子。
🔥對此課程有興趣，請參考底下留言區，目前此課程特價中
經常面試是學習及瞭解自己價值的捷徑，然而這些面試的所累積的經驗，直到我換了一個視角
成為了軟體工程師的面試官時，才發現面試大概十分鐘左右，基本上就會決定這個求職者有沒有下一步了
這支影片和你分享我成為面試官之後，一路找人的心得以及如何讓自己成為更好的面試官
因為每個人想法不同，每間公司的團隊文化和做法也不同，有些我在乎的點不一定是其他面試官也在乎的，但主要的關鍵核心不會偏離一個好的面試者應該如何表現
影片章節:
00:00 成為面試官後
01:23 什麼樣的求職者會被拒絕
02:01 履歷或對話沒有線頭
05:22 對徵才方的公司一無所知
06:45 只在乎自己能拿到什麼
07:21 總是沒有問題
11:08 成為好的面試官
12:31 先看履歷
13:00 先看專案
13:19 針對專案可以討論的點
13:29 設計面試題
13:49 討論人格特質
14:00 三明治鼓勵法
15:03 總結
影片中提到:
履歷撰寫文章: https://blog.niclin.tw/categories/%e5%b1%a5%e6%ad%b7%e6%92%b0%e5%af%ab/
從被問到問人，那些我常問的面試問題
https://blog.niclin.tw/2020/01/07/interview-tips/
喜歡影片的話！可以幫忙點個喜歡以及分享、訂閱唷！😘
━━━━━━━━━━━━━━━━
🎬 觀看我的生活廢片頻道: https://bit.ly/2Ldfp1B
⭐ instagram (生活日常): https://www.instagram.com/niclin_tw/
⭐ Facebook (資訊分享): https://www.facebook.com/niclin.dev
⭐ Blog (技術筆記): https://blog.niclin.tw
⭐ Linkedin (個人履歷): https://www.linkedin.com/in/nic-lin
⭐ 蝦皮賣場: https://shopee.tw/bboyceo
⭐ Github: https://github.com/niclin
⭐ Podcast: https://anchor.fm/niclin
━━━━━━━━━━━━━━━━
✉️ 合作邀約信箱: niclin0226@gmail.com
#面試 #工程師 #前端 #後端
## 影片觀看說明
由於問題較多，大家的問題也可能是你的問題，建議可以先閱讀下方的「問題總匯」區，找到時間碼 Time code 之後跳轉到自己想聽的部分，會比較有效率哦
本影片 Q&A 留言是抓取
【2020 年度回顧! 成為 Team leader? 業外收入增加? 技術能力成長? (第一次蒐集 Q&A)】https://youtu.be/BGaDN9wxbKE
## 影片中提到的專案
簡單用 React 撰寫的留言爬取篩選功能，可以自己抓去玩
https://github.com/niclin/youtube-comment-filter
## 問題總匯
00:00 開場
01:26 QA-1 - 林天寸
一直很喜歡妳的頻道，不單單是因為工程師，當然也有部分原因是自己也是走工程師這條路的。
前一年2020年開始，其實是我剛轉職工程師的第一年，在滿多地方都遇到不小的問題，在troubleshooting上面也是有許多瓶頸的。
後來除了白天上班，下班看書跟休息，偶然間看到你的影片[工程師如何自我進修]，才開始慢慢用計畫的方式取代橫衝猛幹。
不得不說，規劃時間真的是比起技術性的功力還更有成效。因為它讓你適時的放鬆跟加強，然後在工作上面才更有長進，雖然很幹話，但我2020的下半年是這樣做的。
目前在準備考取網路管理的證照CCNA，計畫是走network這一塊，還有很多要磨練的。希望也能多看你產出跟network的影片，這是私心話啦，哈哈。
02:57 QA-2 - 仔仔
1.學程式會建議從前端或是後端哪個開始學會比較好?
2.一開始投履歷如何判斷一家公司是可以成長的，而不是進去3，5年後還是那個跟剛進去程度相差不遠的自己差不多
3.跟程式相關的產業有很多(像是製造業到博弈)，可以請Nic分析一下各產業的狀況嗎?以及進去各產業前須要具備哪些程式語言或能力?
4.投履歷時看到一些公司列出所需程式語言和工具一大堆，是不是代表你沒完全具備就不要投履歷了，還是可以請Nic給個意見哪些部分還是可以投看看
5.都說工程師又宅又不會說話，為什麼Nic可以交到女朋友?
10:40 QA-3 - ANDREW NG KAR EARN
如果当写编程语言遇到瓶颈，有什么方法可以有效地避免自己陷入钻牛角尖的情况？
11:46 QA-4 - JS Lin
如果NIC現在選擇能馬上精通一項語言會是哪個？會想用來做什麼PJ？
13:13 QA-5 - Rick0
成為 team leader 後無法直接在技術上有更深入的研究和突破，這樣的變化是否值得?
是否會擔心這樣在技術上跟不上其他人，甚至被下屬看輕呢?
14:39 QA-6 - Henry蔡
因為最近是寒假期間，
我開始考慮下學期的修課，
想請教nic大大，
應該在有什麼樣的基礎上，
開始學design patterns？
我目前是碩士生，
大學非資工本科，
學過Python，
也跟過一些網路影片實作過Flask+PostgreSQL，
大學學過資料結構演算法，
但不到得心應手的程度...
16:07 QA-7 - 黃柏瑋
如何同時Handle好好幾件事
我怎麼覺得上班，然後下班假日寫寫side project後就沒啥時間了🤔🤔🤔
17:24 QA-8 - 乾太
我想問一下這年頭轉行斜槓 VTuber 還有沒有搞頭A？
18:10 QA-9 - uuu06222
之前開始關注你有知道你有面試過人的經驗, 想問一下站在面試官的角度...
面試官會不會比較注重作品需要呈現那些東西, 或是有沒有什麼禁忌是不能碰的嗎?
20:07 QA-10 - Joery Lin
想請教您對於對於給你很多成長和照顧的公司，倘若您有一個更好的機會，無論薪水或未知挑戰都大於現在公司。
您將如何做選擇，或許現在公司會給你加薪留下你。
因為自己曾放棄了許多機會
21:37 QA-11 - YangTing Zheng
Q1: 想問通常一個產品開發的週期都多長呢？負責維運和開發的工作內容是否會差很多？
Q2: 想請您簡單介紹一下資工系學生的出路/工作內容？(如PM.SA.DBA.PG.RD.MIS…或是還有其他的？）
24:16 QA-12 - RTB
Hello World
24:18 QA-13 - Barry
目前是公司MIS 很想轉職成後端工程師，但在面試上面都都時常失敗
常常在問技術關卡時就被問倒了，總覺得 要準備的東西非常的龐大
毫無準備的頭緒，總覺得一直寫side project也不是辦法
26:49 QA-14 - 因地制夷
想請教Nic 有在做投資嗎? ex 股票 想聽一些投資心得
27:13 QA-15 - 比歐
想請教 Nic 大，
在之後的工程師生涯中之後有甚麼規劃或想法嗎?
例如:開發產品創業，或是開班授課、轉做顧問之類的。
28:14 QA-16 - yongming jia
请问新手如何学编程，学完去做什么？怎么自己创业？谢谢🙏
29:33 QA-17 - Minghao Chang
是否能請您推薦用來開發的筆電？（正好最近要汰換電腦），想從今年開始養成寫side project的習慣，謝謝。
30:31 QA-18 - Guan Jun Chen
想知道像Nic這麼厲害的工程師，年薪大概落在哪裡
30:46 QA-19 - Sheng Jiang
想請問Nic，如果非資工背景但是對寫程式有熱情，想轉職當軟體工程師，會建議如何起步?
補充：像是什麼樣的人適合自學，什麼樣的人適合去補習，或者補習跟自學的情況各有哪些優劣?
謝謝Nic
## 結尾
31:49 感想
喜歡影片的話！可以幫忙點個喜歡以及分享、訂閱唷！😘
━━━━━━━━━━━━━━━━
🎬 觀看我的生活廢片頻道: https://bit.ly/2Ldfp1B
⭐ instagram (生活日常): https://www.instagram.com/niclin_tw/
⭐ Facebook (資訊分享): https://www.facebook.com/niclin.dev
⭐ Blog (技術筆記): https://blog.niclin.tw
⭐ Linkedin (個人履歷): https://www.linkedin.com/in/nic-lin
⭐ 蝦皮賣場: https://shopee.tw/bboyceo
⭐ Github: https://github.com/niclin
⭐ Podcast: https://anchor.fm/niclin
━━━━━━━━━━━━━━━━
✉️ 合作邀約信箱: niclin0226@gmail.com
#QA #工程師 #在地上滾的工程師 #前端 #後端 #轉職
2020 年回顧，雖然是個疫情擾亂的一年，但仔細回顧還是做了滿多事情的，第一次拍影片和大家分享，剛好那天有夠冷的，打噴嚏打了很久，看起來有點眼睛腫加疲倦，還請多包涵 XD
然後我會在這支影片下方的留言處蒐集 Q&A，如果你有任何問題想問，請依照影片最後的參加方式填寫，將會優先於下期影片做回覆啦
喜歡影片的話！可以幫忙點個喜歡以及分享、訂閱唷！😘
━━━━━━━━━━━━━━━━
🎬 觀看我的生活廢片頻道: https://bit.ly/2Ldfp1B
⭐ instagram (生活日常): https://www.instagram.com/niclin_tw/
⭐ Facebook (資訊分享): https://www.facebook.com/niclin.dev
⭐ Blog (技術筆記): https://blog.niclin.tw
⭐ Linkedin (個人履歷): https://www.linkedin.com/in/nic-lin
⭐ 蝦皮賣場: https://shopee.tw/bboyceo
⭐ Github: https://github.com/niclin
⭐ Podcast: https://anchor.fm/niclin
━━━━━━━━━━━━━━━━
✉️ 合作邀約信箱: niclin0226@gmail.com
#工程師 #前端 #後端 #成長
