Search
『認真回，學Python，然後
1. 把Excel資料丟到google spreadsheet上當關聯式資料庫用，
2. 用python pandas整理資料
3. 用datastudio做視覺化分析或定期觀察儀表板
這是我最推薦新手入門數據分析的工具組合。
你要做數據整理跟分析，重點只有三個：
資料存放的地方、整理資料工具語言、視覺化套件
一般來說，正規的方式是資料放sql、整理資料用sql code，
然後視覺化再用ggplot、shiny(R)， Matplotlib、plotly(Python)，
但初學者沒辦法一次搞懂這麼多東西，直接用現成的東西就好，
唯一需要學習的是python pandas跟如何用python串接google spreadsheet，
但這我覺得根本比VBA好學兩萬倍，code也比較好管理...』
Re: [問卦] EXCEL VBA值得花時間去學嗎 https://disp.cc/b/163-e8Nl ｜問卦原文 https://disp.cc/b/163-e8Gh
⚡อยากทำโปรเจกต์สาย Data แต่ไม่รู้จะเลือกใช้ Libs ไหนดี ?? วันนี้เรารวบรวมมาให้แล้วจ้าา !!
.
กับ 5 Library เจ๋ง ๆ ที่สาย Data Science ต้องเลิฟ ! 😍
.
มีอะไรบ้างง ไปดูกันเลยจ้า
.
❤️ 1) NumPy
เป็น Library ที่พร้อมสำหรับการทำ Data Science ซึ่งจะมีการรวบรวมฟังก์ชันทางคณิตศาสตร์ต่าง ๆ เช่น Fourier, สมการเชิงเส้น, และตัวเลขสุ่ม เป็นต้น ใช้สำหรับงานด้านการประมวลผลภาพและเสียง
.
💥 Link : https://numpy.org/?ref=hackernoon.com
🧡 2) Theano
Library ที่ช่วยสร้างชุด Arrays หลายมิติเพื่อการคำนวณโมเดลต่าง ๆ มีความเสถียรและรวดเร็วมาก ๆ ออกแบบมาเพื่อการทำ Deep Learning
.
💥 Link : https://pypi.org/project/Theano/?ref=hackernoon.com
💛 3) Keras
Library สำหรับการทำ Deep Learning เช่นกัน มันจะช่วยให้เราสามารถเทรนโมเดลและสร้างต้นแบบของโมเดลได้ง่ายและรวดเร็ว
.
💥 Link : https://keras.io/?ref=hackernoon.com
💚 4) PyTorch
เป็น Deep Learning Library รองรับการสร้างกราฟที่สามารถคำนวณแบบไดนามิก ทำงานแบบ Asynchronous ได้ ใช้งานไม่ยาก และมีประสิทธิภาพมาก ๆ
.
💥 Link : https://pytorch.org/
💙 5) Pandas
เป็น Library แบบ Open-Source ใช้สำหรับวิเคราะห์ข้อมูลที่มีประสิทธิภาพสูงมาก โครงสร้างหลักเป็น DataFrame ซึ่งสามารถเก็บข้อมูลในรูปแบบตาราง แถว และคอลัมน์ได้ รองรับข้อมูลได้หลายรูปแบบ เช่น SQL, CSV, Excel หรือ HDFS เป็นต้น
.
💥Link : https://pandas.pydata.org/
.
เพื่อน ๆ ล่ะ เคยใช้อันไหนกันบ้าง ?? หรือมีอะไรเจ๋ง ๆ อยากแนะนำเพิ่มเติมคอมเมนต์มาได้เลยน้า 😘
.
borntoDev - 🦖 สร้างการเรียนรู้ที่ดีสำหรับสายไอทีในทุกวัน
🔥 รวม Library เด็ด ๆ กว่า 12 ตัวของ Python มาให้ทุกคนแล้ววววววววววววววววววววววววว !!
.
"บอกเลยว่าใครอยากทำงานแนวไหน .. โปรเจคแนวไหน ต้องได้ทำ !!"
.
เพราะสิ่งที่แอดรวมมาให้วันนี้มันมีประโยชน์มากกกก ไม่ว่าจะทำเว็บ ทำแอป สาย Image Processing จนถึง Data Science ก็สบาย ๆ <3
.
ถ้าใครมีเพื่อนเขียน หรือ กำลังใช้ Python อยู่ ก็แชร์เก็บไว้กันด่วน ๆ ได้เลยยย เอ้า รอช้าทำไป ไปดูทีละตัวกันได้เลยย ^___^
.
📌TensorFlow
ทำโปรเจค Machine Learning / Data ก็ง่ายนิดเดียว !
https://pypi.org/project/tensorflow/
.
📌Scikit-Learn
ประมวลผลข้อมูลซับซ้อน / ทำเหมืองข้อมูลก็ได้ !
https://pypi.org/project/scikit-learn/
.
📌Numpy
จัดการข้อมูลหลากหลายมิติ จัดการ Array ได้สบายขึ้นเยอะ !!
https://pypi.org/project/numpy/
.
📌Keras
อยากเขียนโปรแกรมทำ neural network มานี่เลย
https://pypi.org/project/Keras/
.
📌SciPy
ต้องการคำนวณด้านวิศวกรรม ประยุกต์กับ Calculus ก็ใช้ได้เลย
https://pypi.org/project/scipy/
.
📌Matplotlib
ทำกราฟ ทำ Data Visualization ให้สวยด้วยตัวนี้
https://pypi.org/project/matplotlib/
.
📌Pandas
จัดการโครงสร้างข้อมูล ทำโมเดลข้อมูลในตัวเดียว
https://pypi.org/project/pandas/
.
📌Django
Framework สำหรับเว็บแอปที่ให้เราสร้างเว็บแอปได้ รวดเร็ว และ ปลอดภัย
https://pypi.org/project/Django/
.
📌OpenCV Python
อยากมาสาย Computer Vision ประมวลผลรูปภาพก็ชิล ๆ
https://pypi.org/project/opencv-python/
.
📌SQLAlchemy
จัดการกับฐานข้อมูลที่ใช้ง่ายจัด ๆ ผู้เริ่มต้นก็เข้าใจได้
https://pypi.org/project/SQLAlchemy/
.
📌xlsxwriter
ให้ Python ลุยงาน Excel อ่าน แก้ เขียนไฟล์ได้ง่ายมาก
https://pypi.org/project/XlsxWriter/
.
📌AutoPy
จัดการงานทุกอย่างในคอมพิวเตอร์ ให้อัตโนมัติ
https://pypi.org/project/autopy/
.
📌flask
เครื่องมือสร้างเว็บแอปได้ง่าย ๆ ใน 3 นาที- TensorFlow
https://pypi.org/project/Flask/
.
ปล.ทั้งหมดนี้แค่ส่วนหนึ่งเท่านั้น เพราะ Python ยังมีอะไรให้เราเล่นอีกเพียบบบ ถ้าใครมี Library อะไรเด็ด ๆ อยากมาแนะนำ พิมพ์ไว้ได้เลยคร้าบบ <3
.
#borntoDev - 🦖 สร้างการเรียนรู้ที่ดีสำหรับสายไอทีในทุกวัน
ดาวน์โหลด Jupyter Notebook ที่ใช้ในคลิปได้ที่: https://github.com/prasertcbs/pandas/blob/main/pandas_clean_multilevel_table.ipynb
เชิญสมัครเป็นสมาชิกของช่องนี้ได้ที่ ► https://www.youtube.com/subscription_center?add_user=prasertcbs
playlist สอน Jupyter Notebook ► https://www.youtube.com/playlist?list=PLoTScYm9O0GErrygsfQtDtBT4CloRkiDx
playlist สอน Python สำหรับ data science ► https://www.youtube.com/playlist?list=PLoTScYm9O0GFVfRk_MmZt0vQXNIi36LUz
playlist สอน seaborn ► https://www.youtube.com/playlist?list=PLoTScYm9O0GGC9QvLlrQGvMYatTjnOUwR
playlist สอน matplotlib ► https://www.youtube.com/playlist?list=PLoTScYm9O0GGRvUsTmO8MQUkIuM1thTCf
playlist สอนภาษาไพธอน Python เบื้องต้น ► https://www.youtube.com/playlist?list=PLoTScYm9O0GH4YQs9t4tf2RIYolHt_YwW
playlist สอนภาษาไพธอน Python OOP ► https://www.youtube.com/playlist?list=PLoTScYm9O0GEIZzlTKPUiOqkewkWmwadW
playlist สอน Python 3 GUI ► https://www.youtube.com/playlist?list=PLoTScYm9O0GFB1Y3cCmb9aPD5xRB1T11y
playlist สอนการใช้งานโปรแกรม R: https://www.youtube.com/playlist?list=PLoTScYm9O0GGSiUGzdWbjxIkZqEO-O6qZ
playlist สอนภาษา R เบื้องต้น ► https://www.youtube.com/playlist?list=PLoTScYm9O0GF6qjrRuZFSHdnBXD2KVIC
#prasertcbs #pandas #googlesheets
ดาวน์โหลด Jupyter Notebook ที่ใช้ในคลิปได้ที่: https://github.com/prasertcbs/pandas/blob/main/pandas_dataframe_to_html_markdown.ipynb
เชิญสมัครเป็นสมาชิกของช่องนี้ได้ที่ ► https://www.youtube.com/subscription_center?add_user=prasertcbs
playlist สอน Jupyter Notebook ► https://www.youtube.com/playlist?list=PLoTScYm9O0GErrygsfQtDtBT4CloRkiDx
playlist สอน Python สำหรับ data science ► https://www.youtube.com/playlist?list=PLoTScYm9O0GFVfRk_MmZt0vQXNIi36LUz
playlist สอน seaborn ► https://www.youtube.com/playlist?list=PLoTScYm9O0GGC9QvLlrQGvMYatTjnOUwR
playlist สอน matplotlib ► https://www.youtube.com/playlist?list=PLoTScYm9O0GGRvUsTmO8MQUkIuM1thTCf
playlist สอนภาษาไพธอน Python เบื้องต้น ► https://www.youtube.com/playlist?list=PLoTScYm9O0GH4YQs9t4tf2RIYolHt_YwW
playlist สอนภาษาไพธอน Python OOP ► https://www.youtube.com/playlist?list=PLoTScYm9O0GEIZzlTKPUiOqkewkWmwadW
playlist สอน Python 3 GUI ► https://www.youtube.com/playlist?list=PLoTScYm9O0GFB1Y3cCmb9aPD5xRB1T11y
playlist สอนการใช้งานโปรแกรม R: https://www.youtube.com/playlist?list=PLoTScYm9O0GGSiUGzdWbjxIkZqEO-O6qZ
playlist สอนภาษา R เบื้องต้น ► https://www.youtube.com/playlist?list=PLoTScYm9O0GF6qjrRuZFSHdnBXD2KVIC
#prasertcbs #pandas #googlesheets
[進階]網頁資料擷取、分析與資料視覺化能力7(正規表示法&證照201搜尋字詞用re的findall方法算詞頻&抓取email與圖片網址與電話號碼&202美元收盤匯率&203台灣彩券程式差異與204題&301學生成績&如何用Pandas讀與寫CSV與EXCEL&301&303果菜批發市場拍賣行情)
01_重點回顧與正規表示法
02_證照201搜尋字詞用re的findall方法算詞頻
03_正規表示法抓取email與圖片網址與電話號碼
04_證照201問題說明與證照202美元收盤匯率
05_203台灣彩券爬取大樂透開獎資料
06_203台灣彩券程式差異與204題
07_204 新北市大專院校名單
08_格式化與證照301學生成績
09_如何用Pandas讀與寫CSV與EXCEL
10_用Pandas讀取CSV說明
11_用Pandas讀取EXCEL與Dataframe說明
12_ 證照301學生成績排序與修改資料
13_證照303果菜批發市場拍賣行情
完整影音
http://goo.gl/aQTMFS
教學論壇(之後課程會放論壇上課學員請自行加入)：
https://groups.google.com/forum/#!forum/tcfst_python_2020_3
懶人包：
EXCEL函數與VBA http://terry28853669.pixnet.net/blog/category/list/1384521
EXCEL VBA自動化教學 http://terry28853669.pixnet.net/blog/category/list/1384524
[初階]從VBA的自動化到PYTHON網路爬蟲應用
01 建置Python開發環境 3
02 基本語法與結構控制 3
03 迴圈敘述演示與資料結構及函式 3
04 檔案處理與SQLite資料庫處理 6
05 TQC+Python證照第1、2、3類：
基本程式設計與選擇敘述與迴圈敘述 12
06 TQC+Python證照第4、5類：
進階控制流程與函式(Function) 9
[進階]網頁資料擷取、分析與資料視覺化能力
07 網頁資料擷取與分析 3
09 實戰：處理 CSV 檔和 JSON 資料 3
10 實戰：PM2.5即時監測顯示器轉存資料庫 3
11 實戰：下載台銀外匯、下載YAHOO股市類股 3
12 實戰：下載威力彩開獎結果 3
13 TQC+Python 3網頁資料擷取與分析第1類：資料處理能力 3
14 TQC+Python 3第2類：網頁資料擷取與轉換 6
15 TQC+Python 3第3類：資料分析能力 6
16 TQC+Python 3第4類：資料視覺化能力 6
上課用書：
參考書目
Python初學特訓班(附250分鐘影音教學/範例程式)
作者： 鄧文淵/總監製, 文淵閣工作室/編著
出版社：碁峰 出版日期：2016/11/29
吳老師 109/8/23
EXCEL,VBA,Python,自強工業基金會,EXCEL,VBA,函數,程式設計,線上教學,PYTHON安裝
Using pandas read_excel on about 100 excel files - some are large - I want to read the first few lines of each (header and first few rows of ... ... <看更多>
pandas excel 在 11 用Pandas讀取EXCEL與Dataframe說明 - YouTube 的推薦與評價
... <看更多>