http://10.8.1.3/class/ 2026-05-10T00:31:18+00:00 http://10.8.1.3/class/ http://10.8.1.3/class/lib/exe/fetch.php?media=wiki:dokuwiki.svg text/html 2023-08-10T01:38:32+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:dataset&rev=1691631512&do=diff 【データリテラシー】データセット データセット1 * ダウンロード：dataset1.csv * 文字コード：Shift_JIS コンピュータの乱数で生成した架空のデータセットで、ある架空の母集団から500人の標本抽出を仮定している（標本サイズ $n=500$$p=0.5$$N(171,5.5^{2})$$N(157,5.0^{2})$$\Lambda(4.10,0.14)$$\Lambda(3.95,0.13)$$n=500$$N(98,30^{2})$ text/html 2023-08-10T01:38:32+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture1&rev=1691631512&do=diff 【データリテラシー】第1回 社会におけるデータ・AI 利活用 今後のデジタル社会において、数理・データサイエンス・AI はすべての大学生が身につけておくべき素養だといわれている。 これらの基礎的素養を身につけ、大学の授業だけでなく、日常の生活、卒業後の仕事の場で使いこなすことができるようになるのが本講義の目的である。 text/html 2023-08-10T01:38:32+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture1extra&rev=1691631512&do=diff 【データリテラシー】第1回 確認テスト 1. 社会で起きている変化 Q1-1. スマートフォンが普及するきっかけとなったiPhoneはどこが開発したか？ * Google * Apple * Facebook * Amazon.com Q1-2. ビッグデータとは一般的にどのようなデータを指すか？ text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture2&rev=1691631513&do=diff 【データリテラシー】第2回 表計算ソフトの基本操作 表計算ソフトとは 表形式でデータを扱い様々な計算を行うアプリケーション（ソフトウェア）を表計算ソフト（Spreadsheet）という。 計算だけでなく、グラフを描いたり、マクロで作業を自動化することもできる。 表計算ソフトの代表的なものとしては Microsoft Excel や LibreOffice Calc などがある。$0,5,10,15,\cdots$ text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture3&rev=1691631513&do=diff 【データリテラシー】第3回 セルの参照と集計 セルの参照 セルの参照とはセルの場所を列番号と行番号で指定してそのセルの値を参照することである。 セルの参照には相対的参照と絶対参照$1+2$$5+4\times 3=5+12$$2^{10}\div 5=\frac{2^{10}}{5}=\frac{1024}{5}$$(5+4)\times 3=9\times 3$$2^{(10\div 5)}=2^2$$\le$$\ge$$\mathrm{A1\times B1+A2\times B2+A3\times B3}$$\mathrm{(A1-5)^{2}\times B1+(A2-5)^{2}\times B2+(A3-5)^{2}\times B3}$\[ \mathrm{GPA}=\frac{(各科目の\mathrm{GP}\times 単位数)の合計}{単位数の合計} \]\begin{eqnarray*} \mathrm{GPA}&=&\frac{2\times 2+1\times 2+4\times 2+4\times 2+3\times 2+2\times 2}{2+2+… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture4&rev=1691631513&do=diff 【データリテラシー】第4回 度数分布表とヒストグラム データとは データとは何らかの実験・観測・調査を行って得られる観測値の集合である。 実験を行って記録したデータやアンケート調査で得られたデータで、集計などの加工を行う前のデータを$x,y,z$$x_{1},x_{2},x_{3},\cdots$$i$$x$$y$$z$$x_{1}$$y_{1}$$z_{1}$$x_{2}$$y_{2}$$z_{2}$$x_{3}$$y_{3}$$z_{3}$$i$$l$$u$$v$$f$$i$$l$$u$$v$$f$$n$\[ k\simeq 1+\log_{2}n \]$k$$\log_{2} n$$n$$i$$v_{i}$$v_{i}$$l_{i}$$u_{i}$\[ v_{i}=\frac{l_{i}+u_{i}}{2} \]$i$$f_{i}$\[ (下限値)\le (観測値) < (上限値) \]$f_{i}$$n$\[ n=f_{1}+f_{2}+\cdots+f_{k}=\sum_{i=1}^{k}f_{i} \]$\frac{190-140}{10}=5$\[ (下限値)\le… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture5&rev=1691631513&do=diff 【データリテラシー】第5回 代表値と散らばりの尺度 ここではデータの分布の特徴を表すための代表値と散らばりの尺度について説明する。 変数について データは様々な値に変化するため、変数として扱うことにする。$x, y, z$$x_{1}, x_{2}, x_{3}, \cdots $$n$$x$$n$$x_{1}, x_{2}, x_{3}, \cdots, x_{n}$$x_{i}$$(i=1,2,\cdots,n)$$\bar{x}$\[ \bar{x}=\frac{x_{1}+x_{2}+\cdots+x_{n}}{n}=\frac{1}{n}\sum_{i=1}^{n}x_{i} \]$v_{i}$$f_{i}$$(i=1,2,\cdots,k)$\[ \bar{x}=\frac{v_{1}f_{1}+v_{2}f_{2}+\cdots+v_{k}f_{k}}{n}=\frac{1}{n}\sum_{i=1}^{k}v_{i}f_{i} \]\[ n=f_{1}+f_{2}+\cdots+f_{k}=\sum_{i=1}^{k}f_{i} \]$v_{1}$$f_{1}$$… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture6&rev=1691631513&do=diff 【データリテラシー】第6回 データのグラフによる表現 ここではデータを可視化するために便利なグラフについて説明する。 グラフの種類 グラフにはその用途に応じて様々な種類があるが、一般的によく使われるグラフは以下のグラフである。$Q_{2}$$Q_{1}$$Q_{3}$$Q_{0}$$Q_{4}$$Q_{2}$$Q_{0}$$Q_{1}$$Q_{2}$$Q_{3}$$Q_{4}$$1.5(Q_{3}-Q_{1})$ text/html 2023-08-15T03:02:13+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture7&rev=1692068533&do=diff 【データリテラシー】第7回 データの分布と推定 ある集団について調べたいとき、その集団全体を調べることが難しい場合がある。 そのような場合、その集団から一部分だけを選び出して調べることで集団について推測を行うことができる。 これを$X$$x$\[ P(X=x) \]$a$$b$\[ P(a\le X\le b) \]$X$$X$$X$$1,2,3,4,5,6$$X$\begin{eqnarray*} 1の目が出る確率\ P(X=1)&=&\frac{1}{6}\\ 2の目が出る確率\ P(X=2)&=&\frac{1}{6}\\ 3の目が出る確率\ P(X=3)&=&\frac{1}{6}\\ 4の目が出る確率\ P(X=4)&=&\frac{1}{6}\\ 5の目が出る確率\ P(X=5)&=&\frac{1}{6}\\ 6の目が出る確率\ P(X=6)&=&\frac{1}{6} \end{eqnarray*}$2, 3, 4$\[ P(2\le X\le 4)=P(X=2)+P(X=3)+P(X=4)=\frac{1}{6}+\frac{1}{6}+\frac{1}{6}=\f… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture8&rev=1691631513&do=diff 【データリテラシー】第8回 分割表とクロス集計 ある集団に対して2種類以上の観測を行って得られた多変数のデータを多変量データ（多次元データ）という。 ここでは特に 2変数のデータである$s$$t$$s\times t$$x_{1}$$y_{1}$$z_{1}$$x_{2}$$y_{2}$$z_{2}$$x_{3}$$y_{3}$$z_{3}$ text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture9&rev=1691631513&do=diff 【データリテラシー】第9回 2変量データと相関 相関関係 2変量 $X$, $Y$ のデータがあるとする。 $X$ と $Y$ の間の関係のことを相関関係という。 特に統計学では $X$ と $Y$ の間に比例関係（直線関係）に近い傾向が見られることを「相関関係がある」という。$X$$Y$$X$$Y$$X$$Y$$X$$Y$$X$$Y$$X$$Y$$-1$$1$$\pm 1$$0$$\pm 1$$0$$r$$(X_{i},Y_{i})$$(i=1,2,\cdots,n)$$r$\[ r=\frac{C_{XY}}{S_{X}S_{Y}} \]$S_{X}, S_{Y}$$X$$Y$$C_{XY}$\[ S_{X}=\sqrt{\frac{1}{n}\sum_{i=1}^{n}(X_{i}-\bar{X})^{2}} \]\[ S_{Y}=\sqrt{\frac{1}{n}\sum_{i=1}^{n}(Y_{i}-\bar{Y})^{2}} \]\[ C_{XY}=\frac{1}{n}\sum_{i=1}^{n}(X_{i}-\bar{X})(Y_{i}-\bar{Y}) \]$X… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture10&rev=1691631513&do=diff 【データリテラシー】第10回 データの比較 層別の分析が必要なデータ 性別のような異なる属性が混ざっているようなデータは、属性ごとに分けて層別のデータにして分析する必要がある。 text/html 2023-09-25T20:20:58+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture11&rev=1695673258&do=diff 【データリテラシー】第11回 時系列データ 時系列データ 身の回りの現象は時間的に変動するものが多い。 その現象の時間的変動を継続観測して得られるデータを時系列データという。 時系列データは観測される時間と順序に意味がある。$y_{1},y_{2},\cdots,y_{n}$$i$$y_{i}$$j$$y_{j}$$i<j$$y_{j}$$y_{i}$$i<j$$y_{j}$$y_{i}$$y_{i}$$y_{j}$$y_{i}$$y_{i-1}$$\Delta y_{i}$$\Delta$\[ \Delta y_{i}=y_{i}-y_{i-1} \]$y_{i}$$2k+1$$k$$k$\begin{eqnarray*} z_{i}&=&\frac{y_{i-k}+y_{i-k+1}+\cdots+y_{i-1}+y_{i}+y_{i+1}+\cdots+y_{i+k-1}+y_{i+k}}{2k+1}\\ &=&\frac{1}{2k+1}\sum_{j=-k}^{k}y_{i+j} \end{eqnarray*}$k$$k=3$$h$$r_{h}$\[ r_{h}=\fra… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture12&rev=1691631513&do=diff 【データリテラシー】第12回 仮説検定 仮説検定 仮説検定とは、母集団について仮定された命題（仮説）を標本に基づき統計的に検証することである。 例えば、ある母集団について "$\mu$$\mu>3$$\mu$$\bar{X}$$\bar{X}>3$$\mu>3$$\mu>3$$\bar{X}$$\bar{X}$$\alpha$$R$$\alpha$$\alpha$$\alpha$$\alpha$$\alpha$$\alpha$$n$$\mu$$\mu$$\bar{X}$\[ \bar{X}=\frac{X_{1}+X_{2}+\cdots+X_{n}}{n}=\frac{1}{n}\sum_{i=1}^{n}X_{i} \]$H_{0}$$H_{1}$$H_{1}$$H_{0}:\mu=\mu_{0}$$H_{1}:\mu>\mu_{0}$$H_{0}:\mu=\mu_{0}$$H_{1}:\mu<\mu_{0}$$H_{0}:\mu=\mu_{0}$$H_{1}:\mu\neq\mu_{0}$$\mu_{0}$$H_{1}$$H_{0}$$H_{1}$$\bar{X}$$\… text/html 2023-08-10T01:38:33+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:lecture13&rev=1691631513&do=diff 【データリテラシー】第13回 回帰分析 単回帰分析 2変量 $Y, X$ のデータがあるとき、$Y$ を $X$ で説明する方程式を推測することを単回帰分析という。 このとき、$X$ を説明変数（独立変数）、$Y$ を被説明変数（従属変数）$Y$$X$$X$$Y$$Y$$X$$X$$f(X)$\[ Y=f(X) \]$f(X)$$X$$X$$Y$$X$\[ Y=\beta_{1}+\beta_{2}X \]\(Y=aX+b\)$Y$$X$$Y$$X$$Y$$X$$X$$Y$$X$$Y$$Y$$X$$Y$$X$\[ Y=\beta_{1}+\beta_{2}X \]$\beta_{1}$$\beta_{2}$$X, Y$$\beta_{1}$$\beta_{2}$$X, Y$$n$$(X_{i},Y_{i})$$(i=1,2,\cdots,n)$$\beta_{1}$$\beta_{2}$$Y$$X$$X$$Y$$\beta_{1}$$\beta_{2}$$Y$$Y$$\beta_{1}, \beta_{2}$$\hat{\beta}_{1}, \hat{\beta}_{2}$\be… text/html 2023-08-10T01:38:32+00:00 Anonymous (anonymous@undisclosed.example.com) http://10.8.1.3/class/doku.php?id=data_literacy_past:2021:top&rev=1691631512&do=diff データリテラシー 2021年度 * 【データリテラシー】第1回 社会におけるデータ・AI 利活用 * 【データリテラシー】第2回 表計算ソフトの基本操作 * 【データリテラシー】第3回 セルの参照と集計 * 【データリテラシー】第4回 度数分布表とヒストグラム * 【データリテラシー】第5回 代表値と散らばりの尺度 * 【データリテラシー】第6回 データのグラフによる表現 * 【データリテラシー】第7回 データの分布と推定 * 【データリテラシー】第8回 分割表とクロス集計 * 【データリテラシー】第9回 2変量データと相関 * 【データリテラシー】第10回 データの比較 * 【データリテラシー】第11回 時系列データ * 【データリテラシー】第12回 仮説検定 * 【データリテラシー】第13回 回帰分析 * 【データリテラシー】データセット * Android版 Microsoft Excel ---------- 以下はデータリテラシー①（山本）のみ * Moodle Server（非公式） 分からない…