目標

昨天在power介紹完連結方式後
今天稍微複習一下power bi的資料檢視跟關聯功能

自動化power bi的方法
並且會帶入寫好的python丟到windows自動排程功能介紹
讓我們寫的Python可以自動依照時間執行

還有幾招好用的自動化輔助功能(螢幕截圖、自動登入網頁等)

目標大綱:

1. 複習PowerBI 以及 PowerBI可排程的方法
2. Python Script自動化的設定

1. 複習PowerBI 以及 PowerBI可排程的方法

複習PowerBI資料表跟關聯模型的功能

tips - 安裝matplotlib

今天換一個新環境發現
如果沒有安裝這個套件可能會導致Python Script無法匯入進去
如果有遇到相關錯誤的麻煩先執行這行喔

pip install matplotlib

1. 資料檢視功能

資料檢視頁面可以看到有幾個常見功能

常用功能可以參考這邊

轉換資料功能

大家可以在資料檢視這邊看到轉換資料功能
從新彈出來的視窗我們可以觀察到
可以透過內建功能或是透過Power Query Editor來去編輯資料的格式(Power Query就很像是PowerBI 的程式語言)

我們可以透過這個介面看到資料怎麼Input跟Output
也可以透過右邊的步驟區域來選擇是否返回上一動作，或是修改編輯(超強的流程控制功能)

如果確認無誤之後可以點選右邊的儲存並關閉

關聯Model 補充說明

tips - 資料模型檢視

從這邊可以看到關聯模型畫面
我們可以看到customers的userid 跟 sheet1的userid 自動連結

可以點選進階管理器

在這邊可以自動調整powerbi的關聯對應
也可以建立關係模組

tips - 關聯類型

符號說明

|| 表示「一」
o{ 和 }o 表示「多」
連接線之間的關係文字描述了具體的關係，例如 "has", "belongs to", "manages", "enrolls in"。

也因為這個關係
我們才可以透過userid的綁訂把最後圖表做出來喔

PowerBI可排程的方法

在執行自動排成更新資料前，先給大家看一下限制

PowerBI Desktop手動更新

如果是本機的powerbi我們透過手動點選重新整理資料 來更新資料
或是有透過案件模擬的方式來開啟報表操作重新整理

PowerBI Server

微軟官方操作文件

如果你的公司或是有自己上傳到server上的話
就可以透過排成設定來更新資料來源
如微軟官方得這張圖

排程所需注意事項

3.Python自動化

透過windwos 內建排程管理員執行

步驟大概是這樣

Step 1. 輸入執行排程管理

按下Win +R執行這個

taskschd.msc

Step 2. 點選建立基本工作

Step 3. 觸發條件

可以選每天比較簡單

為了好Demo我選21:20分來測試

Step 4. Python 選擇啟動程式跟檔案

程式執行碼

C:\Users\User\AppData\Local\Programs\Python\Python312\python.exe

如果不知道python可以打where python

新增引述這邊需要點選執行的python script

C:\Users\User\Desktop\crawl\yahoo.py

如果是我使用我們之前爬蟲學到的程式自動存檔要多加一個斜線\喔

# 將數據保存到Excel文件
df.to_excel('C:\\Users\\User\\Desktop\\crawl\\stock_data.xlsx', index=False)
print("數據已成功保存到2330_stock_data.xlsx文件中。")

第一個斜線是跳脫字元
跳脫字元（escape characters）是用來表示一些特殊字符或控制符的字元序列，通常以反斜線（\）開頭。這些跳脫字元在字符串中有特定的含義，用來插入那些難以直接輸入的字符或具有特殊含義的字符。

常見跳脫字元列表

PyAutoGUI 模擬鍵盤滑鼠的功能

pip install pyautogui

import pyautogui

# 截取整個螢幕的畫面
screenshot = pyautogui.screenshot()

# 保存截圖到指定路徑
screenshot.save('screenshot.png')

selenium 網頁自動登入

如果你想要自動登入喜歡的網頁做點事情

本文以學習目的非營利或販售等事項

可以透過前面學到的Selenuum執行

大概的步驟就是

1. 拆解登入的觸發button
2. 查看相關的html tag以及class定位目標
3. 查看帳號跟密碼的class
4. 通常輸入完帳號密碼可以執行enter的按鍵事件觸發送出
5. 把script按造步驟處理

我們可以看到登入button的html tag

<div role="button" class="xxxx">登入/註冊</div>

接者就是要告訴python點集登入後輸入帳號跟密碼
自於位置也要去查看帳號跟密碼位置

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
import time

# 設定帳號和密碼
username = 'your_account'  # 替換為你的 網頁帳號
password = 'passowrd'    # 替換為你的 網頁密碼

# 設置 Chrome 的無痕模式
options = webdriver.ChromeOptions()
options.add_argument('--incognito')
driver = webdriver.Chrome(options=options)

# 打開 xxx首頁
driver.get('https://www.example.com')

# 等待頁面加載
time.sleep(5)

# 定位登入/註冊按鈕並點擊
login_register_button = driver.find_element(By.XPATH, "//div[@role='button' and contains(text(), '登入/註冊')]")
login_register_button.click()

# 等待登入畫面彈出
time.sleep(5)  # 調整等待時間確保登入框加載完成

# 定位帳號輸入框並輸入帳號
username_input = driver.find_element(By.CLASS_NAME, 'accounut class')  # 使用適當的 class 名稱
username_input.send_keys(username)

# 定位密碼輸入框並輸入密碼
password_input = driver.find_elements(By.CLASS_NAME, 'password class')[1]  # 使用索引獲取第二個元素
password_input.send_keys(password)

# 發送回車鍵 (Enter) 提交登入
password_input.send_keys(Keys.RETURN)

# 等待幾秒以確認是否登錄成功
time.sleep(5)

# 關閉瀏覽器
driver.quit()

建議自己在爬蟲前可詳細閱讀該網站的規範
或是真的不確定可以詢問網站管理員喔~!! 以免觸法

自動化跟爬蟲的道德說明

總結

好啦~爬蟲跟自動化就進入到尾聲拉。
Python 是一個功能強大且靈活的語言，特別是在處理自動化任務方面表現卓越。學習自動化和網頁自動登入，可以幫助開發者解決日常重複性工作，提高生產力，減少手動操作的錯誤。然而，在使用這些工具時，我們也需要平衡效率與道德、法律的約束。