#author("2022-09-12T11:20:44+09:00;2022-09-04T19:59:09+09:00","default:takataka","takataka") #author("2022-09-12T11:25:54+09:00;2022-09-04T19:59:09+09:00","default:takataka","takataka") * データ分析 2021年度 [#o0c872cf] //&color(red){''工事中''}; - 対象: 龍谷大学 先端理工学部 数理・情報科学課程(1年後期) - 担当: [[高橋隆史>takataka]] - リンクいろいろ -- この科目の履修要項等は [[Webシラバス>Syllabus:?i=Y001008010&n=2021]] を参照して下さい. //-- 龍大Teams上のこの科目のチームへの参加法がこのページの下の「大事なお知らせ」に書いてあります. -- [[龍大Teams上のこの科目のチーム>https://teams.microsoft.com/l/team/19%3ae8A6LCRZNcpLZahvb__UiGQ3iA03FhQc7vor26PB2jc1%40thread.tacv2/conversations?groupId=475739fd-db47-4c69-9808-096a47650ace&tenantId=23b65fdf-a4e3-4a19-b03d-12b1d57ad76e]] 参加法はこのページの下の「大事なお知らせ」に書いてあります. -- [[Google Classroom のこの科目のクラス>https://classroom.google.com/c/Mzg5MzI5MjQyOTkw]] 第1回の授業で参加法を説明します.詳しくは [[こちら>./ex01#classroom]]. -- [[この科目のMoodleコース>https://www-tlab.math.ryukoku.ac.jp/moodle/course/view.php?id=6]] 第2回の授業で参加法を説明します.詳しくは [[こちら>./ex02#moodle]]. -- https://callta.math.ryukoku.ac.jp/ Web質問予約システム callTA (by 樋口先生) ** 大事なお知らせ [#g5e00b3b] - &new{2021-12-03}; 1217金の授業時間中に小テストを実施します.詳細は Teams でお知らせしています - &new{2021-11-12}; https://www.ryukoku.ac.jp/nc/news/entry-9410.html でもアナウンスされている通り,1113土以降の「授業制限レベル」は「レベル1」になります. 1119金から&color(red){''この科目は対面受講が原則となります.詳しくは 1112金の授業で説明します.''}; - &new{2021-10-08}; https://www.ryukoku.ac.jp/nc/news/entry-9259.html でもアナウンスされている通り,1009土以降の「授業制限レベル」は「レベル2」になります. 1015金から,&color(red){''この科目はオンライン/対面どちらでも受講できるようにします.詳しくは 1008金の授業で説明します.''}; - &new{2021-09-03}; https://www.ryukoku.ac.jp/nc/news/entry-9164.html でもアナウンスされている通り,龍谷大学の2021年度後期の授業は,当面「授業制限レベル」を「レベル3」として実施することとなりました. ''この科目は,当面オンライン授業として実施する予定'' の科目に分類とされています. 受講を予定しているひとは,次の準備を行っておいてください. :準備その1| ノートPCを利用しますので用意しておいてください. ネットワーク接続できる環境も必要です. :準備その2| &color(red){''初回の授業までに,この授業の Teams チームへ参加しておいてください.''}; Teams アプリで「チームに参加」をクリック,「チームコード」を求められたら→を入力: &size(20){y5zugcw}; **News [#z4e70154] ***Data/2021のNews [#v260eae4] - &new{2021-03-02}; 成績集計の結果です: [[Data/result/2021]] - &new{2021-09-03}; このページを作成.まだないようがないよう.昨年度の様子を知りたい方は [[Data/2020]] へどうぞ. #include(news,notitle) **進行 [#progress] //&color(red){''工事中''}; //|回 |月日|テーマ|h //|RIGHT:01| [[0924金>#ex01]] | オリエンテーションと準備 | //|RIGHT:02| [[1001金>#ex02]] | 準備のつづき | //|RIGHT:03| [[1008金>#ex03]] | 度数分布とヒストグラム | #contentsx *** 注意 [#h50daab9] - 動画は,Microsoft Stream で配信してます. -- この授業の Teams チーム参加者のみが閲覧できます. ユーザ名とパスワードが求められたら全学統合認証ので. -- [[授業動画一覧>https://web.microsoftstream.com/group/475739fd-db47-4c69-9808-096a47650ace?view=videos]] - 拡張子 .ipynb のファイルは,Google Colab の notebook です. -- notebook の扱い方については,第2回のページの [[Google Colab を使えるようになる>./ex02#colab]] を参照してください -- 自分がコピーした Colab Notebook ファイルは,Google Drive の 「マイドライブ」 https://drive.google.com/drive/my-drive の中の「Colab Notebooks」に保存されてます. *** ex01 0924(Fri) オリエンテーションと準備 [#ex01] - 授業のページ [[ex01>./ex01]] - Notebookと授業動画 :オリエンテーション What編| [[ex01notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex01notebookA.ipynb]](※) | [[Data2021-01-movie1>https://web.microsoftstream.com/video/11987907-5085-4508-8e39-323ef53208b8]] (24m) ~※ このファイルの扱い方は第2回の授業で説明します. :クラウドって?| Notebookなし | [[Data2021-01-movie2>https://web.microsoftstream.com/video/02200ee7-b621-487b-b64b-2d6445b04339]] (10m) *** ex02 1001(Fri) 準備のつづき [#ex02] - 授業のページ [[ex02>./ex02]] - Notebookと授業動画 :CSV の話| Notebookなし | [[Data2021-02-movie1>https://web.microsoftstream.com/video/c3dcb1c9-bd29-45bd-86a4-328e79001919]] (10m) :はじめての Google Colab| [[colab_intro.ipynb>https://github.com/takatakamanbou/Data/blob/2021/colab_intro.ipynb]] | [[はじめての Google Colab>https://web.microsoftstream.com/video/3a186d48-0fa1-4be1-b320-171114facaad]] (5m) *** ex03 1008(Fri) 度数分布とヒストグラム [#ex03] - 授業のページ [[ex03>./ex03]] - Notebookと授業動画 > ''度数分布とヒストグラム'' >> [[ex03notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex03notebookA.ipynb]] | [[Data2021-03-movie1>https://web.microsoftstream.com/video/729079dd-7f1d-444e-bdcd-00af1d8d59fd]] (21m) << ''データの代表値(1)'' >> [[ex03notebookB.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex03notebookB.ipynb]] | 動画なし << < *** ex04 1015(Fri) データの代表値 [#ex04] - 授業のページ [[ex04>./ex04]] - Notebookと授業動画 > ''データの代表値(2)'' 平均,分散,標準偏差 >> [[ex04notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex04notebookA.ipynb]] | [[Data2021-04-movie1>https://web.microsoftstream.com/video/376497d5-bca4-428e-9b34-a50a3b0206e4]] (35m) << ~''データの代表値(3)'' 中央値,四分位数,パーセンタイル,箱ひげ図 >> [[ex04notebookB.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex04notebookB.ipynb]] | (対応する動画なし) << ~''散布図と相関(0)'' Google Sheets で散布図を描こう >> (Notebookなし) | [[Data2021-04-movie2>https://web.microsoftstream.com/video/8a56ab57-9b9f-4c4c-9bf1-08090fbf2bd9]] (7m) < *** ex05 1022(Fri) 散布図と相関 [#ex05] - 授業のページ [[ex05>./ex05]] - Notebookと授業動画 > ''散布図と相関(1)'' 散布図とは,相関関係とは >> [[ex05notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex05notebookA.ipynb]] | [[Data2021-05-movie1>https://web.microsoftstream.com/video/30b356f7-4e43-40ff-b1a0-3ba7afa6d8ef]] (31m) << ''散布図と相関(2)'' 疑似相関,相関関係があるからといって因果関係もあるとは限らない,代表値の落とし穴 >> [[ex05notebookB.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex05notebookB.ipynb]] | [[Data2021-05-movie2>https://web.microsoftstream.com/video/cf588319-8d46-47cc-a500-e826dac2471e]] (13m) << < *** ex06 1029(Fri) データの正規化(標準化) [#ex06] - 授業のページ [[ex06>./ex06]] - Notebookと授業動画 > << ''データの正規化(標準化) (1)'' データを正規化したくなる気持ち,正規化,正規化と相関係数 >> [[ex06notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex06notebookA.ipynb]] | [[Data2021-06-movie1>https://web.microsoftstream.com/video/85c98dad-4b0f-4407-83e7-5331c1cfd3ad]] (17m) << ''データの正規化(標準化) (2)'' 復習,偏差値,解釈に関する注意 >> [[ex06notebookB.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex06notebookB.ipynb]] | [[Data2021-06-movie2>https://web.microsoftstream.com/video/3854fda0-41b3-4f4e-ba1e-3b9ae7c1f217]] (18m) << ''実習'' スプレッドシートで実際にデータを正規化してみる >> [[ex06課題A>./ex06#kadaiA]] | [[Data2021-06-movie3>https://web.microsoftstream.com/video/a4533a9a-0dbb-423a-978a-4dcfcd3fbd98]] (13m) << < *** 1105(Fri) は深草龍谷祭に伴い休講です...たぶん [#d1105] *** ex07 1112(Fri) 誤差と有効数字/回帰分析入門(1) [#ex07] - 授業のページ [[ex07>./ex07]] - Notebookと授業動画 > ''誤差と有効数字'' >> [[ex07notebookA.ipynb>https://github.com/takatakamanbou/Data/blob/2021/ex07notebookA.ipynb]] | [[Data2021-07-movie1>https://web.microsoftstream.com/video/de8459e7-7096-4797-a9a2-dc05a7ee4f0d]] (31m) << << ''実習 回帰分析入門(1)'' 表計算ソフトに頼ってやってみよう >> [[ex07課題A>./ex07#kadaiA]] | [[Data2021-07-movie2>https://web.microsoftstream.com/video/82dce212-2eb5-4e87-9490-30ae1f47fa94]] (18m) << < *** ex08 1119(Fri) 回帰分析入門(2) [#ex08] - 授業のページ [[ex08>./ex08]] - Notebookと授業動画 > ''回帰分析とは/最小二乗法'' >> [[ex08notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex08notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex08notebookA.ipynb]]) | [[Data2021-08-movie1>https://web.microsoftstream.com/video/5d7e6b2d-44aa-4678-bd10-51b2dc2920c6]] (32m) << < *** ex09 1126(Fri) 回帰分析入門(3) [#ex09] - 授業のページ [[ex09>./ex09]] - Notebookと授業動画 > ''最小二乗法による直線あてはめの解の導出/練習問題'' >> [[ex09notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex09notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex09notebookA.ipynb]]) | [[Data2021-09-movie1>https://web.microsoftstream.com/video/88f12db1-213e-4cda-9b67-6d0542b28ec5]] (20m) [[ex09notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex09notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex09notebookA.ipynb]]) | [[Data2021-09-movie1>https://web.microsoftstream.com/video/88f12db1-213e-4cda-9b67-6d0542b28ec5]] (20m) << ''回帰分析の性質と注意点'' >> [[ex09notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex09notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex09notebookB.ipynb]]) | [[Data2021-09-movie2>https://web.microsoftstream.com/video/494a0878-298e-4aa3-ba72-fd98b148fc15]] (29m) [[ex09notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex09notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex09notebookB.ipynb]]) | [[Data2021-09-movie2>https://web.microsoftstream.com/video/494a0878-298e-4aa3-ba72-fd98b148fc15]] (29m) << < *** ex10 1203(Fri) 回帰分析入門(4)/復習と練習 [#ex10] //&color(red){''工事中''}; - 授業のページ [[ex10>./ex10]] - Notebookと授業動画 > ''決定係数/データ分析における注意点'' >> [[ex10notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex10notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex10notebookA.ipynb]]) | [[Data2021-10-movie1>https://web.microsoftstream.com/video/8bec3316-a80a-4d43-b991-4c8c1137d4cb]] (24m) [[ex10notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex10notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex10notebookA.ipynb]]) | [[Data2021-10-movie1>https://web.microsoftstream.com/video/8bec3316-a80a-4d43-b991-4c8c1137d4cb]] (24m) << < > ''実習 スプレッドシートで作ったグラフをドキュメントに挿入してみよう'' >> [[実習課題B>./ex10#kadaiB]] | [[Data2021-10-movie2>https://web.microsoftstream.com/video/239d98f5-7444-4d09-9ec7-2f94fccbc04d]] (7m) << < *** ex11 1210(Fri) 質的データとその分析 [#ex11] //&color(red){''工事中''}; - 授業のページ [[ex11>./ex11]] - Notebookと授業動画 > ''量的データと質的データ/ダミー変数'' >> [[ex11notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex11notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex11notebookA.ipynb]]) | [[Data2021-11-movie1>https://web.microsoftstream.com/video/9510d4b1-bc68-46eb-ae5b-333b02967fcb]] (12m) [[ex11notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex11notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex11notebookA.ipynb]]) | [[Data2021-11-movie1>https://web.microsoftstream.com/video/9510d4b1-bc68-46eb-ae5b-333b02967fcb]] (12m) << < > ''度数分布,クロス集計表/分割表'' >> [[ex11notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex11notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex11notebookB.ipynb]]) | [[Data2021-11-movie2>https://web.microsoftstream.com/video/bf89ac70-11ca-4412-b41e-e121ba564597]] (17m) [[ex11notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex11notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex11notebookB.ipynb]]) | [[Data2021-11-movie2>https://web.microsoftstream.com/video/bf89ac70-11ca-4412-b41e-e121ba564597]] (17m) << ''実習'' 表計算ソフトを用いた質的データの分析 >> [[ex11課題A>./ex11#kadaiA]] | [[Data2021-11-movie3>https://web.microsoftstream.com/video/7fdccf85-8ebb-45cf-9a45-7ed8ae4a054c]] (14m) << < < *** ex12 1217(Fri) 小テスト [#ex12] //&color(red){''工事中''}; 小テストの実施要領は Teams でお知らせしています *** ex13 1224(Fri) レポート作成に向けた準備 [#ex13] //&color(red){''工事中''}; - 授業のページ [[ex13>./ex13]] - Notebookと授業動画はありません *** ex14 0107(Fri) この先にあるもの(1)/レポート課題 [#ex14] //&color(red){''工事中''}; - 授業のページ [[ex14>./ex14]] - Notebookと授業動画 > ''データサイエンスプログラムについて ー 全体像および「多変量解析」'' 多変量解析,ロジスティック回帰など >> [[ex14notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex14notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex14notebookA.ipynb]]) | [[Data2021-14-movie1>https://web.microsoftstream.com/video/23d077ef-d58a-4dbf-9305-c930c0a9e54f]] (47m) [[ex14notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex14notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex14notebookA.ipynb]]) | [[Data2021-14-movie1>https://web.microsoftstream.com/video/23d077ef-d58a-4dbf-9305-c930c0a9e54f]] (47m) << < *** ex15 0114(Fri) この先にあるもの(2) [#ex15] //&color(red){''工事中''}; - 授業のページ [[ex15>./ex15]] - Notebookと授業動画 > ''多変量解析や機械学習に関するデモと実験'' 顔検出, 物体検出, 猫顔画像のクラスタリング,手書き数字の識別,1000種類の画像の識別 >> この動画とnotebookはそれぞれ別の内容です.動画 → notebook の順に閲覧するのがよいでしょう. - [[Data2021-15-movie1>https://web.microsoftstream.com/video/3d893100-2901-4720-958d-b51c9c5ac798]] (13m) - [[ex15notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex15notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex15notebookA.ipynb]]) - [[ex15notebookA.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex15notebookA.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex15notebookA.ipynb]]) << ''データサイエンスプログラムについて(2) ー 確率統計へつながる話'' >> [[ex15notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex15notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/main/ex15notebookB.ipynb]]) | [[Data2021-15-movie2>https://web.microsoftstream.com/video/da87c4c0-67dc-4131-9308-babdd2c152b1]] (18m) [[ex15notebookB.ipynb>https://colab.research.google.com/github/takatakamanbou/Data/blob/2021/ex15notebookB.ipynb]] ([[GitHub>https://github.com/takatakamanbou/Data/blob/2021/ex15notebookB.ipynb]]) | [[Data2021-15-movie2>https://web.microsoftstream.com/video/da87c4c0-67dc-4131-9308-babdd2c152b1]] (18m) << < *** レポート課題 [#report] [[report>./report]] レポート課題 *** おまけ [#omake] [[omake>./omake]] おまけ課題 #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br #br