優技録 | public string[] 優技録 = { "Data Science", "Linux", "MS", "DB", "AWS", "Infrastructure", "C#", "PHP", "Python", "JavaScript"};

【Munin】 MySQL InnoDB free tablespace UNKNOWNs: Bytes free is unknown.

投稿日: 2017年9月1日2017年10月10日投稿者: 優

Munin-notification for net::example.net net :: example.net :: MySQL InnoDB free tablespace UNKNOWNs: Bytes free is unknown.

1
2
3
4

Munin-notification for net::example.net

net :: example.net :: MySQL InnoDB free tablespace
UNKNOWNs: Bytes free is unknown.

# /etc/my.cnf

自動拡張のサイズ
innodb_autoextend_increment     = 64      ##InnoDBテーブルスペースファイル 自動拡大テーブルスペースがいっぱいになった時の 自動増分サイズ

# /etc/my.cnf

自動拡張のサイズ

innodb_autoextend_increment = 64 ##InnoDBテーブルスペースファイル自動拡大テーブルスペースがいっぱいになった時の自動増分サイズ

mysql> show global variables like '%innodb_autoextend_increment%';

+-----------------------------+-------+
| Variable_name               | Value |
+-----------------------------+-------+
| innodb_autoextend_increment | 64    |
+-----------------------------+-------+
1 row in set (0.00 sec)

mysql> show global variables like '%innodb_autoextend_increment%';

+-----------------------------+-------+

| Variable_name | Value |

+-----------------------------+-------+

| innodb_autoextend_increment | 64 |

+-----------------------------+-------+

1 row in set (0.00 sec)

64になっている。

また、1000は最大値

※Valueの数字の後にMをつけてしまうと、1000になります；

mysql> use db_example;

1	mysql> use db_example;

mysql> SHOW TABLE STATUS;

+--------------------------------------------+--------+---------+------------+-------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-----------------+----------+----------------+---------+
| Name                                       | Engine | Version | Row_format | Rows  | Avg_row_length | Data_length | Max_data_length | Index_length | Data_free | Auto_increment | Create_time         | Update_time | Check_time | Collation       | Checksum | Create_options | Comment |
+--------------------------------------------+--------+---------+------------+-------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-----------------+----------+----------------+---------+
| tmp_table_1                                | InnoDB |      10 | Compact    |     0 |              0 |       16384 |               0 |            0 |         0 |           NULL | 2016-10-28 23:11:31 | NULL        | NULL       | utf8_general_ci |     NULL |                |         |
| tmp_hoge                                   | InnoDB |      10 | Compact    |    22 |            744 |       16384 |               0 |            0 |         0 |           NULL | 2017-08-29 13:25:18 | NULL        | NULL       | utf8_general_ci |     NULL |                |         |

(略)

| user                                       | InnoDB |      10 | Compact    |    88 |            558 |       49152 |               0 |            0 |         0 |             92 | 2017-04-03 15:54:09 | NULL        | NULL       | utf8_general_ci |     NULL |                |         |
+--------------------------------------------+--------+---------+------------+-------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-----------------+----------+----------------+---------+
82 rows in set (0.01 sec)

mysql> SHOW TABLE STATUS;

+--------------------------------------------+--------+---------+------------+-------+----------------+-------------+-----------------+--------------+-----------+----------------+---------------------+-------------+------------+-----------------+----------+----------------+---------+

| tmp_table_1 | InnoDB | 10 | Compact | 0 | 0 | 16384 | 0 | 0 | 0 | NULL | 2016-10-28 23:11:31 | NULL | NULL | utf8_general_ci | NULL | | |

| tmp_hoge | InnoDB | 10 | Compact | 22 | 744 | 16384 | 0 | 0 | 0 | NULL | 2017-08-29 13:25:18 | NULL | NULL | utf8_general_ci | NULL | | |

(略)

| user | InnoDB | 10 | Compact | 88 | 558 | 49152 | 0 | 0 | 0 | 92 | 2017-04-03 15:54:09 | NULL | NULL | utf8_general_ci | NULL | | |

82 rows in set (0.01 sec)

自動拡張設定になっているか確認

mysql> show global variables like '%innodb_data_file_path%';

+-----------------------+------------------------+
| Variable_name         | Value                  |
+-----------------------+------------------------+
| innodb_data_file_path | ibdata1:12M:autoextend |
+-----------------------+------------------------+
1 row in set (0.00 sec)

mysql> show global variables like '%innodb_data_file_path%';

+-----------------------+------------------------+

| Variable_name | Value |

+-----------------------+------------------------+

| innodb_data_file_path | ibdata1:12M:autoextend |

+-----------------------+------------------------+

1 row in set (0.00 sec)

テーブルスペースのファイル名は：ibdata1
初回は、12M
必要に応じて、自動的にサイズは増加する

ファイルサイズ管理が有効になっているか確認

mysql> show global variables like '%innodb_file_per_table%';

+-----------------------+-------+
| Variable_name         | Value |
+-----------------------+-------+
| innodb_file_per_table | ON    |
+-----------------------+-------+
1 row in set (0.00 sec)

mysql> show global variables like '%innodb_file_per_table%';

+-----------------------+-------+

| Variable_name | Value |

+-----------------------+-------+

| innodb_file_per_table | ON |

+-----------------------+-------+

1 row in set (0.00 sec)

innodb_file_per_table
共通テーブルスペースを利用しているか。
テーブルを削除すると容量も削除される。

Database changed
mysql> SELECT TABLE_SCHEMA,TABLE_NAME,DATA_FREE
    -> FROM INFORMATION_SCHEMA.TABLES
    -> WHERE ENGINE='innodb';
    
    
+--------------+--------------------------------------------+-----------+
| TABLE_SCHEMA | TABLE_NAME                                 | DATA_FREE |
+--------------+--------------------------------------------+-----------+
| db_example   | t_xxxxxxxxx                                |   4194304 |
| db_example   | t_bbbbbbbbbbbbb                            |         0 |

(略)

| db_example   | tmp_bbb                                    |         0 |
| db_example   | tp_aaaaaaa                                 |   4194304 |
| db_example   | user                                       |         0 |
| mysql        | innodb_index_stats                         |         0 |
| mysql        | innodb_table_stats                         |         0 |
| mysql        | slave_master_info                          |         0 |
| mysql        | slave_relay_log_info                       |         0 |
| mysql        | slave_worker_info                          |         0 |
+--------------+--------------------------------------------+-----------+
129 rows in set (0.02 sec)

Database changed

mysql> SELECT TABLE_SCHEMA,TABLE_NAME,DATA_FREE

-> FROM INFORMATION_SCHEMA.TABLES

-> WHERE ENGINE='innodb';

+--------------+--------------------------------------------+-----------+

| TABLE_SCHEMA | TABLE_NAME | DATA_FREE |

+--------------+--------------------------------------------+-----------+

| db_example | t_xxxxxxxxx | 4194304 |

| db_example | t_bbbbbbbbbbbbb | 0 |

(略)

| db_example | tmp_bbb | 0 |

| db_example | tp_aaaaaaa | 4194304 |

| db_example | user | 0 |

| mysql | innodb_index_stats | 0 |

| mysql | innodb_table_stats | 0 |

| mysql | slave_master_info | 0 |

| mysql | slave_relay_log_info | 0 |

| mysql | slave_worker_info | 0 |

+--------------+--------------------------------------------+-----------+

129 rows in set (0.02 sec)

mysql> SELECT TABLE_SCHEMA,SUM(DATA_FREE)
    -> FROM INFORMATION_SCHEMA.TABLES
    -> WHERE ENGINE='innodb'
    -> GROUP BY TABLE_SCHEMA WITH ROLLUP;


+--------------+----------------+
| TABLE_SCHEMA | SUM(DATA_FREE) |
+--------------+----------------+
| db_example   |       41943040 |
| db_example2  |       66060288 |
| mysql        |              0 |
| NULL         |      108003328 |
+--------------+----------------+
4 rows in set (0.01 sec)

mysql> SELECT TABLE_SCHEMA,SUM(DATA_FREE)

-> FROM INFORMATION_SCHEMA.TABLES

-> WHERE ENGINE='innodb'

-> GROUP BY TABLE_SCHEMA WITH ROLLUP;

+--------------+----------------+

| TABLE_SCHEMA | SUM(DATA_FREE) |

+--------------+----------------+

| db_example | 41943040 |

| db_example2 | 66060288 |

| mysql | 0 |

| NULL | 108003328 |

+--------------+----------------+

4 rows in set (0.01 sec)

Muninに関しては今回は監視しないようにする

# rm -f /etc/munin/plugins/mysql_innodb

1	# rm -f /etc/munin/plugins/mysql_innodb

# systemctl restart munin-node

1	# systemctl restart munin-node

MySQLダンプスクリプト

投稿日: 2017年9月1日2018年5月16日投稿者: 優

ログイン用ファイル作成 ※rootパスワード設定時

# vi /root/.my.cnf

[mysqladmin]
host = localhost
user = root
password = DBpassword

[client]
user = root
password = DBpassword
host = localhost

# vi /root/.my.cnf

[mysqladmin]

host = localhost

user = root

password = DBpassword

[client]

user = root

password = DBpassword

host = localhost

# chmod 400 /root/.my.cnf

# mysql --defaults-extra-file=/root/.my.cnf

# chmod 400 /root/.my.cnf

# mysql --defaults-extra-file=/root/.my.cnf

全データまとめてdump

mysqlalldump.sh

#!/bin/bash

#########################################
# 認証情報
DBUSER="root";
#DBPASSWD="パスワード";

# バックアップ先ディレクトリ //backup/database/20120327 みたいな感じになります。
BAKDIR="/database/backup/";
TODAYS_BAKDIR="$BAKDIR`date +%Y%m%d`";

#世代管理(何日分残すか)
DAYAGO="7"
########################################

# バックアップ先がなければ作成
[ ! -d $TODAYS_BAKDIR ] && mkdir -p $TODAYS_BAKDIR;

#mysqldump -u$DBUSER -p$DBPASSWD --opt --all-databases  --single-transaction --master-data=2 | gzip > $TODAYS_BAKDIR/alldump.sql.gz;
mysqldump --defaults-extra-file=/root/.my.cnf --opt --all-databases  --single-transaction --master-data=2 --flush-logs | gzip > $TODAYS_BAKDIR/alldump.sql.gz;

# 7 日より古いバックアップは削除
find $BAKDIR -type d -mtime +${DAYAGO} -print0 | xargs -0 rm -rf;

#!/bin/bash

#########################################

# 認証情報

DBUSER="root";

#DBPASSWD="パスワード";

# バックアップ先ディレクトリ //backup/database/20120327 みたいな感じになります。

BAKDIR="/database/backup/";

TODAYS_BAKDIR="$BAKDIR`date +%Y%m%d`";

#世代管理(何日分残すか)

DAYAGO="7"

########################################

# バックアップ先がなければ作成

[ ! -d $TODAYS_BAKDIR ] && mkdir -p $TODAYS_BAKDIR;

#mysqldump -u$DBUSER -p$DBPASSWD --opt --all-databases --single-transaction --master-data=2 | gzip > $TODAYS_BAKDIR/alldump.sql.gz;

mysqldump --defaults-extra-file=/root/.my.cnf --opt --all-databases --single-transaction --master-data=2 --flush-logs | gzip > $TODAYS_BAKDIR/alldump.sql.gz;

# 7 日より古いバックアップは削除

find $BAKDIR -type d -mtime +${DAYAGO} -print0 | xargs -0 rm -rf;

DB毎にそれぞれdump

# mkdir -p /backup/database/
# mkdir -p /backup/tmp/

1 2	# mkdir -p /backup/database/ # mkdir -p /backup/tmp/

mysqlalldump.sh

#!/bin/sh


######################################
#アーカイブ前の一時ディレクトリ
BACKDIRTMP=/backup/tmp/

# バックアップ先ディレクトリ
BKDIR=/backup/database/
MYPATH=$(cd $(dirname $0);pwd)

#世代管理(何日分残すか)
DAYAGO="8"

# MySQLrootパスワード
#ROOTPASS="パスワード"
######################################





#日付・時刻取得し変数に代入
TIMESET=`date +%Y%m%d-%H%I%M`
#バックアップ先ファイル名を設定　設定ファイルにあるファイル名＋日付.tar.gzする
BKFILE=${BKDIR}/mysql.$TIMESET.tar.gz

# データベース名取得
DBLIST=`ls -p /var/lib/mysql | grep / | tr -d /`

#一時退避先掃除
rm -rf ${BACKDIRTMP}/*

# データベースごとに一時退避先にバックアップ
for DBNAME in $DBLIST
do

   #mysqldumpによるバックアップ
   #mysqldump --single-transaction --master-data=2  -u root -p${ROOTPASS} $DBNAME --opt  > ${BACKDIRTMP}/${DBNAME}_dump.sql | logger -t mysqldump
   mysqldump --single-transaction --master-data=2 --flush-logs --defaults-extra-file=/root/.my.cnf $DBNAME --opt  > ${BACKDIRTMP}/${DBNAME}_dump.sql | logger -t mysqldump
   
   if [ $? = 0 ]; then
      logger -t mysqldump "Backup OK mysqldump:${DBNAME}"
      echo "Backup OK mysqldump:${DBNAME}"
   else
   #失敗したらその旨を表示かつ、ログに保存、メール送信
      logger -t mysqldump "Backup NG mysqldump:${DBNAME}"
      echo "Backup NG mysqldump:${DBNAME}"
      ${MYPATH}/mailsend.sh "バックアップ失敗通知" "実行バックアップスクリプト: ${0}
バックアップ対象: mysqldump mysqlDB名:${DBNAME}
バックアップに失敗しました。"
   fi
done

# 退避先のバックアップを処理日名をつけてアーカイブ圧縮(失敗時はメール送信)
cd $(dirname ${BACKDIRTMP})
tar vzcf $BKFILE  $(basename ${BACKDIRTMP}) ||
${MYPATH}/mailsend.sh "バックアップ失敗通知" "実行バックアップスクリプト: ${0}
バックアップ対象: mysql一時ファイルのアーカイブ処理に失敗しました。"


#-------yyyymmdd形式のファイルから古い物を削除-------
# 削除しきい日付(yyyymmdd)を設定。(DAYAGO日前の日付求める)
tday=`date -d "${DAYAGO} day ago" +%Y%m%d`

# 対象Dir配下のファイル名をwhileに渡し「$list」となる
ls $BKDIR|while read list
do
   #ファイル名に「数字x8」が含まれている場合、
   if [[ $list =~ [0-9]{8} ]] ; then
      # $listから、「yyyymmdd」を取り出しepoch時間($fday)にする
      fday=`expr $list : "mysql\.\([0-9]\{8\}\).*.tar.gz"`
      #ファイル名から取得した「yyyymmdd」が本日の「yyyymmdd」よりも小さい場合
      if [ -n "$fday" ] && [ $fday -lt $tday ]; then
         # echo する
         #echo $list
         #削除する
         rm -f ${BKDIR}/${list}
      fi
   fi
done

#!/bin/sh

######################################

#アーカイブ前の一時ディレクトリ

BACKDIRTMP=/backup/tmp/

# バックアップ先ディレクトリ

BKDIR=/backup/database/

MYPATH=$(cd $(dirname $0);pwd)

#世代管理(何日分残すか)

DAYAGO="8"

# MySQLrootパスワード

#ROOTPASS="パスワード"

######################################

#日付・時刻取得し変数に代入

TIMESET=`date +%Y%m%d-%H%I%M`

#バックアップ先ファイル名を設定　設定ファイルにあるファイル名＋日付.tar.gzする

BKFILE=${BKDIR}/mysql.$TIMESET.tar.gz

# データベース名取得

DBLIST=`ls -p /var/lib/mysql | grep / | tr -d /`

#一時退避先掃除

rm -rf ${BACKDIRTMP}/*

# データベースごとに一時退避先にバックアップ

for DBNAME in $DBLIST

#mysqldumpによるバックアップ

#mysqldump --single-transaction --master-data=2 -u root -p${ROOTPASS} $DBNAME --opt > ${BACKDIRTMP}/${DBNAME}_dump.sql | logger -t mysqldump

mysqldump --single-transaction --master-data=2 --flush-logs --defaults-extra-file=/root/.my.cnf $DBNAME --opt > ${BACKDIRTMP}/${DBNAME}_dump.sql | logger -t mysqldump

if [ $? = 0 ]; then

logger -t mysqldump "Backup OK mysqldump:${DBNAME}"

echo "Backup OK mysqldump:${DBNAME}"

else

#失敗したらその旨を表示かつ、ログに保存、メール送信

logger -t mysqldump "Backup NG mysqldump:${DBNAME}"

echo "Backup NG mysqldump:${DBNAME}"

${MYPATH}/mailsend.sh "バックアップ失敗通知" "実行バックアップスクリプト: ${0}

バックアップ対象: mysqldump mysqlDB名:${DBNAME}

バックアップに失敗しました。"

done

# 退避先のバックアップを処理日名をつけてアーカイブ圧縮(失敗時はメール送信)

cd $(dirname ${BACKDIRTMP})

tar vzcf $BKFILE $(basename ${BACKDIRTMP}) ||

${MYPATH}/mailsend.sh "バックアップ失敗通知" "実行バックアップスクリプト: ${0}

バックアップ対象: mysql一時ファイルのアーカイブ処理に失敗しました。"

#-------yyyymmdd形式のファイルから古い物を削除-------

# 削除しきい日付(yyyymmdd)を設定。(DAYAGO日前の日付求める)

tday=`date -d "${DAYAGO} day ago" +%Y%m%d`

# 対象Dir配下のファイル名をwhileに渡し「$list」となる

ls $BKDIR|while read list

#ファイル名に「数字x8」が含まれている場合、

if [[ $list =~ [0-9]{8} ]] ; then

# $listから、「yyyymmdd」を取り出しepoch時間($fday)にする

fday=`expr $list : "mysql\.$[0-9]\{8\}$.*.tar.gz"`

#ファイル名から取得した「yyyymmdd」が本日の「yyyymmdd」よりも小さい場合

if [ -n "$fday" ] && [ $fday -lt $tday ]; then

# echo する

#echo $list

#削除する

rm -f ${BKDIR}/${list}

done

ベイズの定理

投稿日: 2017年8月31日2018年9月1日投稿者: 優

条件付き確率

確率P(A)が起こるとした時の、確率P(B)が起こる確率を表します。

ex)

サイコロを振った時に奇数だった時に、5以上である確率

ベイズの定理

条件付き確率を変形させるとベイズの定理を導出出来ます。

ベイズの定理導出

①

②

③

①を変形して③になる

③を②に代入します。

ベイズの定理になります。

ex)

サイコロを振った時に5以上であった時に、奇数である確率

ベイズの定理でやってみましょう

Windows Server パブリック環境危険なデフォルトポートを止める

投稿日: 2017年8月31日2017年8月31日投稿者: 優

パブリックで必要のないポート

445
microsoft-ds
137
netbios-ns
138
netbios-dgm
139
netbios-ssn

ファイルやプリンターを共有するSMB関連のポートです。

ポートを止める

【Windows ファイアウォール】 >> 【詳細設定】>> 【セキュリティが強化されたWindows ファイアウォール】で該当ポートを止めましょう。

ポート確認

Linuxの場合

# nmap 対象ホスト -p 1-65535

1	# nmap 対象ホスト -p 1-65535

外部サービスを使う場合

Portチェックテスト【外部からのPort開放確認】

https://www.cman.jp/network/support/port.html

CSS スマホ時の画面端に余白が発生する

投稿日: 2017年8月31日2018年8月31日投稿者: 優

レスポンシブのハンバーガーメニューなどで、スマホ時に余白が発生したり、メニューが余白にはみ出てしまっている場合にすぐに対応可能な力技

HTML

<!doctype html>
<html>
<head>
<meta charset="utf-8">
<title>無題ドキュメント</title>
</head>
<div class="wrapper"> ←追加
<body>

(略)

</body>
</div><!-- /.wrapper --> ←追加

</html>

<!doctype html>

<html>

<head>

<title>無題ドキュメント</title>

</head>

<div class="wrapper"> ←追加

<body>

(略)

</body>

</div> ←追加

</html>

CSS

.wrapper {
	overflow: hidden;
}

.wrapper {

overflow: hidden;

}

標本誤差

投稿日: 2017年8月29日2018年9月5日投稿者: 優

比率の標本誤差

推計統計学で、とある標本のデータから母集団の値を推計します。

視聴率というものがありますが、日本の全世帯を調査するのは大変ですよね。わずかなサンプル数、今回だと600世帯のサンプルの視聴率から標本誤差を利用すると、全世帯の視聴率(母集団)を確立的に推計することが出来ます。

90%信頼度の比率の標本誤差

95%信頼度の比率の標本誤差

99%信頼度の比率の標本誤差

1.65, 1.96, 2.58は標準偏差の個数を表しています。

視聴率を求めよう

600世帯に対して、ある番組の視聴率の統計を取ったところ30%(0.3)でした。母集団との標本誤差95%を求める。

公式にあてはめるだけです。

この場合の全世帯(母集団)の視聴率が95%の確率で26% ～ 34％の範囲に含まれるということがわかります。

サンプル数は600で良いの？

サンプル数を多くすれば誤差の範囲は狭まりますが、60000世帯にしても600世帯との標本誤差の制度は10分の1程度です。

今回の結果を60000世帯とすると、

全世帯(母集団)の視聴率が95%の確率で29.6% ～ 30.4％の範囲に含まれるということがわかります。サンプルを増やすと確かに精度が高くなっていますね！

ただし、労力と誤差とのパフォーマンスから600サンプルがよく利用されています。

tmpwatch 定期アーカイブ削除システム

投稿日: 2017年8月29日2017年8月29日投稿者: 優

容量の足りないバックアップストレージのアーカイブを自動削除するのに使えます。

気をつけないといけないのは、

バックアップが定期的に取れていないと、いつのまにか空になってそうですね…。

# yum install tmpwatch

1	# yum install tmpwatch

# vi /etc/cron.daily/tmpwatch

#! /bin/sh
flags=-umc
/usr/sbin/tmpwatch "$flags" -x /tmp/.X11-unix -x /tmp/.XIM-unix \
        -x /tmp/.font-unix -x /tmp/.ICE-unix -x /tmp/.Test-unix \
        -X '/tmp/hsperfdata_*' -X '/tmp/.hdb*lock' -X '/tmp/.sapstartsrv*.log' \
        -X '/tmp/pymp-*' 10d /tmp
/usr/sbin/tmpwatch "$flags" 30d /var/tmp
for d in /var/{cache/man,catman}/{cat?,X11R6/cat?,local/cat?}; do
    if [ -d "$d" ]; then
        /usr/sbin/tmpwatch "$flags" -f 30d "$d"
    fi
done


↓変更


#! /bin/sh
/usr/sbin/tmpwatch 240 /tmp


#flags=-umc
#/usr/sbin/tmpwatch "$flags" -x /tmp/.X11-unix -x /tmp/.XIM-unix \
#       -x /tmp/.font-unix -x /tmp/.ICE-unix -x /tmp/.Test-unix \
#       -X '/tmp/hsperfdata_*' -X '/tmp/.hdb*lock' -X '/tmp/.sapstartsrv*.log' \
#       -X '/tmp/pymp-*' 10d /tmp
#/usr/sbin/tmpwatch "$flags" 30d /var/tmp
#for d in /var/{cache/man,catman}/{cat?,X11R6/cat?,local/cat?}; do
#    if [ -d "$d" ]; then
#       /usr/sbin/tmpwatch "$flags" -f 30d "$d"
#    fi
#done

# vi /etc/cron.daily/tmpwatch

#! /bin/sh

flags=-umc

/usr/sbin/tmpwatch "$flags" -x /tmp/.X11-unix -x /tmp/.XIM-unix \

-x /tmp/.font-unix -x /tmp/.ICE-unix -x /tmp/.Test-unix \

-X '/tmp/hsperfdata_*' -X '/tmp/.hdb*lock' -X '/tmp/.sapstartsrv*.log' \

-X '/tmp/pymp-*' 10d /tmp

/usr/sbin/tmpwatch "$flags" 30d /var/tmp

for d in /var/{cache/man,catman}/{cat?,X11R6/cat?,local/cat?}; do

if [ -d "$d" ]; then

/usr/sbin/tmpwatch "$flags" -f 30d "$d"

done

↓変更

#! /bin/sh

/usr/sbin/tmpwatch 240 /tmp

#flags=-umc

#/usr/sbin/tmpwatch "$flags" -x /tmp/.X11-unix -x /tmp/.XIM-unix \

# -x /tmp/.font-unix -x /tmp/.ICE-unix -x /tmp/.Test-unix \

# -X '/tmp/hsperfdata_*' -X '/tmp/.hdb*lock' -X '/tmp/.sapstartsrv*.log' \

# -X '/tmp/pymp-*' 10d /tmp

#/usr/sbin/tmpwatch "$flags" 30d /var/tmp

#for d in /var/{cache/man,catman}/{cat?,X11R6/cat?,local/cat?}; do

# if [ -d "$d" ]; then

# /usr/sbin/tmpwatch "$flags" -f 30d "$d"

# fi

#done

tmpwatchコマンドは実行する前に
-tオプションをつけてデバッグしよう。
消える予定のファイルを確認してからシステムに実装しよう。

テスト

# /usr/sbin/tmpwatch 240 -t /tmp

removing file /tmp/yum_save_tx-2015-12-28-23-548kAptQ.yumtx
removing file /tmp/yum_save_tx-2015-12-28-23-45BIrdfP.yumtx
removing file /tmp/yum_save_tx-2015-12-08-10-285gh45T.yumtx
removing file /tmp/yum_save_tx-2015-12-08-10-27G4cftc.yumtx
removing file /tmp/yum_save_tx-2016-06-23-17-19h9KiHm.yumtx

# /usr/sbin/tmpwatch 240 -t /tmp

removing file /tmp/yum_save_tx-2015-12-28-23-548kAptQ.yumtx

removing file /tmp/yum_save_tx-2015-12-28-23-45BIrdfP.yumtx

removing file /tmp/yum_save_tx-2015-12-08-10-285gh45T.yumtx

removing file /tmp/yum_save_tx-2015-12-08-10-27G4cftc.yumtx

removing file /tmp/yum_save_tx-2016-06-23-17-19h9KiHm.yumtx

不必要なものだけが削除されるリストに出ているか確認します。

確認が終わったら、これをCronなどに登録しておくと良い。

Bitbucket Git

投稿日: 2017年8月28日2017年8月28日投稿者: 優

Bitbucket Gitでチーム開発 Git for Windows

寄稿しました。詳細は上記記事で。

環境

git for windows(Windows Client tool)
Bitbucket(SaaS)

cd 開発場所パス

cd 開発場所パス

git clone https://チーム名@bitbucket.org/チーム名/リポジトリ名.git

1	git clone https://チーム名@bitbucket.org/チーム名/リポジトリ名.git

README.mdを作成

echo "This is README " >> README.md

git add README.md

git commit -m "First commit. Adding a README."

echo "This is README " >> README.md

git add README.md

git commit -m "First commit. Adding a README."

基本的なファイル更新の流れ

ファイルを追加･･･コミット前の準備としてインデックスに一時的に保存
git add ファイル名
ファイルをコミット･･･追加や変更をリポジトリに記録
git commit ファイル名
ファイルを更新･･･リモートリポジトリに反映
git push origin master

git add ファイル名

1	git add ファイル名

git commit ファイル名

1	git commit ファイル名

git push origin master

1	git push origin master

YAMAHA大規模構成まとめ

投稿日: 2017年8月28日2018年8月28日投稿者: 優

設定

大規模ネットワーク構成(スタックとリンクアグリゲーションによる冗長化) : SWX3200 コマンド設定

必要なもの

回線 × 2

NURO

ルータ × 2台

RTX1210 78,000円 or RTX3500 340,000円

利用技術

リンクアグリゲーション
VRRP

コアスイッチ × 2台

SWX3200-28GT 230,000円 + スタックケーブルYDAC-10G-1M 20,000円
https://network.yamaha.com/products/switches/swx3200-28gt/index

利用技術

スタック
リンクアグリゲーション
VLAN
トランク

エッジスイッチ

SWX2300-24G 140,000円

利用技術

リンクアグリゲーション
VLAN
トランク

※スイッチでSFP+ポートを利用するには、別途、以下の機材が必要です。
・SFP+ポートとして利用する場合：
・SFP+モジュール (YSFP-G-SXA、YSFP-G-LXA、YSFP-10G-SR、YSFP-10G-LR のいずれか)
・スタックポートとして利用する場合：
・ダイレクトアタッチケーブル (YDAC-10G-1M、YDAC-10G-3M のいずれか)
または
・SFP+モジュール (YSFP-G-SXA、YSFP-G-LXA、YSFP-10G-SR、YSFP-10G-LR のいずれか)

ネットワーク障害 L2スイッチのハングアップ参考情報まとめ

投稿日: 2017年8月28日2018年8月28日投稿者: 優

●ネットワーク機器内のパケット消失（ロスト）

対処方法

ネットワーク機器におけるパケットの消失（ロスト）には、以下のような原因が考えられます。

ネットワーク機器がエラーフレームと判断して破棄
ネットワーク機器の性能不足による破棄
パケットをエラーフレームと判断して破棄する動作は、
スイッチなどのネットワーク機器が持つ基本動作なので、
破棄されたパケットが実際にエラーフレームである以上は、
問題はエラーフレームを発生させている別のネットワーク機器にあることになります。

実際にはエラーフレームでないのにもかかわらず、スイッチがエラーと判断して破棄しているような場合には、
なぜそのような判断となってしまうのか、スイッチを中心にさらに調べる必要があります。

スイッチやルータなどのネットワーク機器は、
受信ポートで受信したパケットを送信ポートへコピーして送信し直す過程で、
フィルタリングチェックやルーティング計算などの各種処理を行っています。
このような処理を、機器を通過するパケットごとに行うためそれなりの時間がかかり、
一定の時間内に処理（通過）できるパケット数には限りがあります。仮に、
トラフィックの集中などで、処理できるパケット数の上限を超えるような状態になれば、
処理しきれないパケットが破棄される事態になります。

性能不足によるパケットロストは、
ロストを引き起こしているスイッチやルータなどのネットワーク機器だけの問題とも限りません。
それらの機器に接続されているネットワーク回線が、そもそも域幅不足であってもロストが発生します。

また、スイッチではその内部に、
スイッチに接続している各ネットワーク機器のMACアドレスを記憶しておくためのテーブルバッファを持ちますが、
ここに保存できる数以上のネットワーク機器が存在した場合、テーブルバッファに収まりきらずバッファオーバーフローとなり、
結果的にパケットロストを引き起こすこともあります。

●ブロードキャスト・ストームの発生

【ケース5】
ある日停電が発生し、電力復旧後にネットワークが使用できない状態になった。
調べてみると、ネットワークを構成しているスイッチのパイロットランプ（データ送受信時に点滅）が点灯したままの状態であった。

対処方法

また停電でなくても、単純にスイッチの電源を頻繁にON／OFFする
（それによってスパニングツリーが機能し、ネットワークのトポロジ変更が行われる）ことでも、
不安定な状態となってしまいます。

スパニングツリーがうまく働かずストームが発生したような場合は、
スイッチのポートからケーブルを抜き差しすることによって問題が解消することがあります。

@see

―分かっているようでホントは知らない―実践！ネットワーク・トラブルシューティング

(5) LANケーブル
ケーブル内や先端部分の断線によりインターネット接続が不安定になってしまう場合があります。
事象としては少ないのですが、LANケーブルの抜き差し、もしくは交換をお試し下さい。

@see

しばらく時間が経つとインターネットが切断されてしまう。

Cisco トラブルシューティング

投稿日: 2017年8月27日2017年8月28日投稿者: 優

Ping

ICMPを利用するプロトコルです。

エラーレポート機能
ネットワークの診断機能

Pingを利用して疎通確認が出来ます。

Router# ping 192.168.11.2

Type escape sequence to abort.
Sending 5, 100-byte ICMP Echos to 192.168.11.2, timeout is 2 seconds:

!!!!! ←ICMPエコー応答を受信した
Success rate is 100 percent (5/5), round-trip min/avg/max = 1/3/4ms

Router# ping 192.168.11.2

Type escape sequence to abort.

Sending 5, 100-byte ICMP Echos to 192.168.11.2, timeout is 2 seconds:

!!!!! ←ICMPエコー応答を受信した

Success rate is 100 percent (5/5), round-trip min/avg/max = 1/3/4ms

!
エコー応答を受信した
.
タイムアウトした
U
宛先に到達できない
Q
送信元制御メッセージを受信した
M
フラグメントできない
?
不明なパケットタイプ
&
パケットのTTL超過

ICMPはIPヘッダでカプセル化されてIPパケットとなります。WindowsのtracertはICMPパケットを利用します。

traceroute

目的地までの経路確認が出来ます。疎通できない場合はどの経路のどのルータでパケットが止まっているかを知ることで障害箇所を限定することが出来ます。

スイッチにケーブルを接続したところ、ポートのLINKランプが点灯しない。

ケーブルの両端が正しく接続されていない
ケーブルが断線している
ポートが故障している
スイッチの電源が入っていない

点灯しているかどうかで物理層レベルでの確認ができる。

ランプがついていて通信できない場合は、データリンク層, ネットワーク層レベルの障害になります。

ランプの色

SYS

グリーン･･･正常
オレンジ･･･システム障害

ポートランプ

グリーン･･･正常
グリーン点灯･･･正常。データ転送中
グリーン、オレンジ交互に点灯・・・リンク障害発生中
オレンジ点灯・・・STP計算中
消灯･･･物理障害

ルータでPPPの認証に失敗している。

データリンク層での問題。

ルータでPPPの認証に失敗しているということは、認証の設定が対応側のルータと一致していないことが原因。

PPP(Point to Point Protocol)は専用線などのWANのポイントツーポイントリンクで利用するデータリンク層プロトコルです。PPPにはオプションとして認証機能があります。

ルータのインターフェイスは正常にupしているが、CDPネイバーが検出できない。

データリンク層での障害。

CDPが正しく動作していないことが原因。

ネットワーク基本の仕組み OSI, TCP/IP

投稿日: 2017年8月27日2017年8月28日投稿者: 優

物理層

ビット
情報を0と1で表現する。物理層で扱うデータの単位

データリンク層

データリンク層で定義されているもの

ハードウェアアドレス
MACアドレス, 物理アドレスともいう。
フレームのフォーマット・作成方法
フロー制御
エラー制御
同期

隣接ノード間での通信をにかかわる機能が定義されています。

データリンク層で扱うデータのことをフレームと呼ぶ。隣接ノードとは１つのは回線に接続されたノード。

受信フレームのエラーチェックを行います。

受信フレームのFCSに含まれる値をもとにフレーム全体のエラーチェックを行います。その結果エラーが検出されるとそのフレームを破棄します。

フレーム
データリンク層で扱うデータの単位

MACアドレス
LANにおいて、データリンク層で通信相手を識別するアドレス

スイッチング
スイッチがデータリンク層レベルで受信フレームを転送処理すること

ネットワーク層

ネットワーク層は複数の異なるネットワークを介したノード間の通信(エンドツーエンドの通信)を実現するための機能が定義されています。

ソフトウェアアドレス
ハードウェアに依存しない論理アドレス。ネットワーク番号とノード番号から構成されます。IPアドレス。
ルーティング
データの中継

ネットワーク層で扱うデータをパケットまたはデータグラムと呼びます。ソフトウェアアドレスはパケットまたはデータグラムのヘッダに含まれます。

IP(Internet Protocol)
IPによってあるホストから別のホストへデータを送り届けることができます。これをエンドツーエンドの通信と呼びます。IPによって運ばれるデータをIPパケットと呼びます。
パケット
ネットワーク層で扱うデータの単位
IPアドレス
TCP/IPで通信相手を識別するアドレス
ルーティング
パケットの中継先経路を選択し、転送すること

IPv4ヘッダフォーマット

IPv4 フォーマット

@see http://www.infraexpert.com/study/tcpip1.html

TTL(Time To Live)
パケットの生存時間。正確にはパケットが何台のルータを経由することができるかを表す。TTLはルーティングテーブルに不整合があったとき、IPパケットがネットワーク内を延々とループしてしまうことを防ぐためのものです。

トランスポート層

エンドツーエンドの通信の信頼性を提供するための機能がサポートされています。

エンドツーエンドのエラー制御
エラーがあったデータの再送要求
エンドツーエンドの順序制御
データが正しい順序で届くようにあるいは順序が異なって届いても元の順序に再構成できるようにします。
エンドツーエンドでのフロー制御
ネットワークの混雑の度合いに応じてデータの送信量を変化させる

シーケンシング
シーケンス番号を使用して、送信データが正しい順序で届くように、あるいは順序が異なって届いても元の順序で再構成できるようにする制御機能。
フロー制御
ネットワークの混雑の度合いや受信側ノードの処理能力に応じて送信側ノードがデータの送信量を調整する制御機能。
エラー制御
受信したデータが届いているか、またはエラーが発生していないかどうかを受信側ノードが送信側ノードに通知し、送信側が必要に応じてデータの再送を行う制御機能。
確認応答
データが届いたかどうかをACKを使用して確認する制御機能。

UDP(User Datagram Protocol)
コネクションレス型のトランスポート層のプロトコル

TCP(Transmission Control Protocol)
コネクション型のトランスポート層のプロトコル。

セグメント
TCPが扱うデータの単位

Windowing
TCPがデータ転送時に行うフロー制御

TCP, UDPに共通するフィールド

送信元ポート番号
宛先ポート番号
チェックサム

TCP, UDPともにポート番号によって上位のアプリケーションを識別します。

TCPとUDPの違い

TCPは信頼性のある通信を保証し、UDPは信頼性のある通信を保証しない。

TCP
信頼性のある通信を保証する。
3ウェイハンドシェイクによるTCPコネクションを確立します。TCPでデータ転送を行うと、ACKによってデータの受信を確認します。お互いにデータの受信を確認しながらやり取りするような通信のことを同期通信と呼びます。また、データの順序制御をシーケンス番号により行います。TCPコネクションを確立する際にデータの転送で利用するシーケンス番号も決めています。ｌ
UDP
効率の良いデータ転送を行う。

セッション層

エンドツーエンドのアプリケーションプロセス間の通信を実現するための機能が定義されています。

アプリケーションプロセスの識別と管理
セッションパラメータの定義など

受信したデータのアプリケーションプロセスを識別して、それぞれ対応したアプリケーションに振り分けます。

プレゼンテーション層

エンコードなど。

アプリケーション層

HTTP, SMTPなどのアプリケーションプロトコルを定義

各層の機器

物理層
ハブ、リピータ
データリンク層
レイヤー２スイッチ, ブリッジ
ネットワーク層
レイヤー3スイッチ, ルータ

カプセル化と逆カプセル化

カプセル化

データにヘッダやフッタを付加することをカプセル化

非カプセル化
データからヘッダやフッタを取り外すことを逆カプセル化(非カプセル化)といいます。

送信側デバイスでカプセル化を行い、受信側デバイスで逆カプセル化を行います。

TCP/IPを利用している場合、各階層に含まれるプロトコルが連携してデータを送信します。

送信元ホスト

階層の上位に位置するプロトコルが転送するデータにヘッダを付加しカプセル化を行い、下位層プロトコルに引渡します。
受け取った下位層のプロトコルは自身のヘッダを付与(カプセル化)

データを送信する際に階層構造の上位層から下位層に順番にカプセル化を行います。

カプセル化されたデータを受け取った宛て先ホスト

ヘッダを解釈します。ヘッダを解釈することで、送信元の対応するプロトコルとの間での制御を行います。
また、ヘッダを解釈することで引き渡すべき上位層プロトコルを把握し、ヘッダを除去し上位層プロトコルに引き渡します。

データの宛先ホストでは、階層構造を下位層から上位層に順番にたどって逆カプセルかを行います。フッタがついている場合は、フッタによってエラーチェックを行い問題がなければフッタを除去します。

OSIとTCP/IP

OSI参照モデル	プロトコル	TCP/IP
アプリケーション層	HTTP, DNS, DHCP, SNMP, SMTP, RIPなど	アプリケーション層
プレゼンテーション層
セッション層
トランスポート層	TCP, UDP	トランスポート層
ネットワーク層	IPv4, IPv6, ARP, ICMP, OSPF, EIGRP, IGRP	インターネット層
データリンク層	イーサネット、無線LAN、ATM, PPPなど	ネットワークインタフェース層
物理層	イーサネット、無線LAN、ATM, PPPなど	ネットワークインタフェース層

WEBサーバからクライアントコンピュータへHTMLデータ転送している時のデータを構成するプロトコルとその並び

N.I

TCP

HTTP

データ

また、TCP/IPにおいて、トランスポート層からアプリケーションプロトコルにデータを渡すときにポート番号を利用します。

ARP(Address Resolution Protocol)

ARPの役割

イーサネットなどのLAN上でTCP/IP通信を行う際に必要なプロトコル。IPアドレスからMACアドレスを求めます。

TCP/IPではIPアドレス、LANではMACアドレスを利用して通信を行います。しかしこの２つのアドレスはお互いに関連していません。関連していないIPアドレスとMACアドレスを対応付ける役割を持つプロトコルがARPです。

アドレス解決
ARPを利用することで、通信したいホストのIPアドレスからMACアドレスを求めます。これを【アドレス解決】といいます。

ARPで利用するメッセージ

ARPリクエスト
ARPリプライ

ARPリクエストの宛先MACアドレス
FF-FF-FF-FF-FF-FF

@see CCNA/CCENT問題集

重複組み合わせ

投稿日: 2017年8月27日2018年8月28日投稿者: 優

r種類のものからn個選ぶ時の考え方

0個の種類があって良い時

n個+2個の箱にr-1個の棒を入れる組み合わせ

0個の種類がダメな時

n – 1個の箱にr-1個棒を入れる組み合わせ

例) 「りんご」,「でこぽん」,「ぶどう」の3種類のフルーツから７つ選ぶ組み合わせ

上記について考えます。

ex) 選ばない果物があっても良い場合

3種類選ばれるパターン

りんごは選ばれないパターン

仕切り棒を使って考えます。

３つに分けるには仕切り棒が2本必要です。

選ばれない場合は、
仕切り棒が端にあるか、隣に合う時ですね！

3種類の果物を７つ選ぶ選び方＝ 9つの箱に棒を２つ入れるパターンの数

だから、

36通りになります。

ex) ３種類の果物を必ず選ぶパターン

今度は、3種類が１つは選ばれないといけないパターンの場合です。

全種類必ず選ぶ選び方 = バスケットの間に仕切り棒を2本入れてあげる選び方

６つの箱に仕切り棒を2本入れるパターンを考えます。

※仕切り棒がバスケットの端や隣合うと、選ばれるフルーツが2種類になるので条件を満たさなくなる為です。

１５通りになります。

Cisco セキュリティ

投稿日: 2017年8月27日投稿者: 優

【ポートセキュリティ設定例：MACアドレス「1111.1111.1111」を持つデバイスの接続を許可】

(config)#interface FastEthernet0/12
(config-if)#switchport mode access
(config-if)#switchport port-security
(config-if)#switchport port-security mac-address 1111.1111.1111

(config)#interface FastEthernet0/12

(config-if)#switchport mode access

(config-if)#switchport port-security

(config-if)#switchport port-security mac-address 1111.1111.1111

Cisco ルーティング

投稿日: 2017年8月27日2017年8月27日投稿者: 優

【スタティックルート設定】

RouterA
RouterA(config)#interface fastEthernet 0/0
RouterA(config-if)#ip address 192.168.1.1 255.255.255.0
RouterA(config-if)#no shutdown
RouterA(config)#interface fastEthernet 0/1
RouterA(config-if)#ip address 192.168.2.1 255.255.255.0
RouterA(config-if)#no shutdown

RouterB
RouterB(config)#interface fastEthernet 0/0
RouterB(config-if)#ip address 192.168.2.2 255.255.255.0
RouterB(config-if)#no shutdown
RouterB(config)#interface fastEthernet 0/1
RouterB(config-if)#ip address 192.168.3.1 255.255.255.0
Routerb(config-if)#no shutdown

RouterA(config)#ip route 192.168.3.0 255.255.255.0 192.168.2.2
RouterB(config)#ip route 192.168.1.0 255.255.255.0 192.168.2.1

RouterA

RouterA(config)#interface fastEthernet 0/0

RouterA(config-if)#ip address 192.168.1.1 255.255.255.0

RouterA(config-if)#no shutdown

RouterA(config)#interface fastEthernet 0/1

RouterA(config-if)#ip address 192.168.2.1 255.255.255.0

RouterA(config-if)#no shutdown

RouterB

RouterB(config)#interface fastEthernet 0/0

RouterB(config-if)#ip address 192.168.2.2 255.255.255.0

RouterB(config-if)#no shutdown

RouterB(config)#interface fastEthernet 0/1

RouterB(config-if)#ip address 192.168.3.1 255.255.255.0

Routerb(config-if)#no shutdown

RouterA(config)#ip route 192.168.3.0 255.255.255.0 192.168.2.2

RouterB(config)#ip route 192.168.1.0 255.255.255.0 192.168.2.1

インターネット世界での管理上の縄張り

ダイナミックルーティングプロトコル

RIP, OSPF(Open Shortest Path First), IS-IS, IGRP, EIGRP(Enhanced IGRP)はルータ同士が動的にルート情報を交換するために利用するダイナミックルーティングプロトコルです。

IGP(Interior Gateway Protocol)

同一の縄張り(AS)通しでルーティング
プロトコル例
RIP, OSPF, IS-IS, IGRP, EIGRP

EGP(Exterior Gateway Protocol)

別組織の縄張り(AS)とルーティングするためのプロトコル
プロトコル例
EGP(EGPs), BGP

全データまとめてdump

DB毎にそれぞれdump

条件付き確率

ベイズの定理

ベイズの定理導出

①

②

③

ベイズの定理でやってみましょう

パブリックで必要のないポート

ポートを止める

ポート確認

HTML

CSS

比率の標本誤差

90%信頼度の比率の標本誤差

95%信頼度の比率の標本誤差

99%信頼度の比率の標本誤差

視聴率を求めよう

サンプル数は600で良いの？

今回の結果を60000世帯とすると、

環境

基本的なファイル更新の流れ

設定

必要なもの

回線 × 2

ルータ × 2台

コアスイッチ × 2台

エッジスイッチ

Ping

traceroute

スイッチにケーブルを接続したところ、ポートのLINKランプが点灯しない。

ランプの色

ルータでPPPの認証に失敗している。

ルータのインターフェイスは正常にupしているが、CDPネイバーが検出できない。

物理層

データリンク層

ネットワーク層

トランスポート層

セッション層

プレゼンテーション層

アプリケーション層

各層の機器

カプセル化と逆カプセル化

OSIとTCP/IP

ARP(Address Resolution Protocol)

ARPの役割

r種類のものからn個選ぶ時の考え方

0個の種類があって良い時

0個の種類がダメな時

例) 「りんご」,「でこぽん」,「ぶどう」の3種類のフルーツから７つ選ぶ組み合わせ

ex) 選ばない果物があっても良い場合

仕切り棒を使って考えます。

3種類の果物を７つ選ぶ選び方 ＝ 9つの箱に棒を２つ入れるパターンの数

ex) ３種類の果物を必ず選ぶパターン

全種類必ず選ぶ選び方 = バスケットの間に仕切り棒を2本入れてあげる選び方

ダイナミックルーティングプロトコル

3種類の果物を７つ選ぶ選び方＝ 9つの箱に棒を２つ入れるパターンの数