スクレイピングの実装

[Atotti]

都立大の学外向けシラバスページをスクレイピングする。

メインのページより、iframe内の各曜日のページに対してスクレイピングするのが良いと思う。
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_1.html
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_2.html
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_3.html
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_4.html
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_5.html
http://www.kyouikujouhou.eas.tmu.ac.jp/syllabus/2023/YobiIchiran_0_9.html

[Atotti]

pythonで書いて、Actionsのcronで定期実行が丸そう。

[kisu-yuyu]

@Atotti
これは単純に手動でExcelにコピペしたやつをデータベースに流しこむっていうのはオプションから外れましたか？
その一連の流れを自動化するてこと？
こんなん→just_copied_pasted.xlsx

[Atotti]

Goでもseleniumが使えるっぽく、gormとの連携考えた時にGoの方が良さそうなのでGoで書く方針に変更。
ただし、dbへの書き込みは別スコープで。