最適化・線形計画法の問題
実数 についての次の連立一次方程式を考える。
この連立方程式は解をもたない。そこで、各式の左辺と右辺の差の二乗和
を最小にする実数の組 (最小二乗解)を考える。 を最小にする を求めよ。
この問題で使うもの
- 偏微分と全微分(説明と入口の問題)
- 2 変数関数の極値(説明と入口の問題)
- 行列の和・積と 2 次の逆行列(説明と入口の問題)
- 行列の階数と解の存在(説明と入口の問題)
- 掃き出し法と連立 1 次方程式(説明と入口の問題)
この問題を解けるようになるまで(47 技能)
読み込み中…
右端(太枠)がこの問題で使う技能です。左へドラッグすると、さらに前の前提をさかのぼれます。技能を押すと、そこまでの道筋が光ります。
一覧で見る(前提が先)
- 分数のたし算・ひき算
- 小数の四則計算
- 正負の数の加法・減法
- 分数のかけ算・わり算
- 四則の混じった計算の順序
- 正負の数の乗除・累乗と四則混合
- 分配法則を使った計算のくふう
- 文字式の計算(同類項・分配法則)
- 乗法公式による展開
- 因数分解
- 3 次式までの展開と因数分解
- 微分係数と導関数の定義
- 多項式の微分
- 等間隔にならんだ数の和
- 等差・等比数列の和と Σ
- 数列の極限
- 関数の極限
- 積と商の微分
- 合成関数の微分
- 偏微分と全微分
- 小数と分数のまじった計算
- 逆算(□ を求める)
- 1 次方程式の解き方
- 比例・反比例の式とグラフ
- 約数の見つけ方
- 素因数分解と約数の個数
- 平方根の意味と根号の簡単化
- 関数 の式と変域
- 平方完成と 2 次関数のグラフ
- 2 次不等式
- 剰余の定理・因数定理と高次方程式
- 増減表と極値
- 第 2 次導関数とグラフの凹凸
- 2 変数関数の極値
- 三角形の角の大きさ
- 対頂角と平行線の同位角・錯角
- 三角形の外角と角の組み合わせ
- 二等辺三角形の角
- 平行四辺形と特別な四角形の性質
- 三角形・四角形の面積
- 三平方の定理
- 折り返した図形の角と長さ
- 三平方の定理と平面図形
- ベクトルの演算と成分
- 行列の和・積と 2 次の逆行列
- 掃き出し法と連立 1 次方程式
- 行列の階数と解の存在
ヒント
行き詰まったら、上から順に 1 つずつ開いてください。
ヒント 1
係数行列 と右辺 を使って と書き、これを最小にする を考えましょう。
ヒント 2
最小二乗解は正規方程式 を満たします( と同じ式です)。
ヒント 3
、 となるので、連立方程式 を解きます。
答えと解説
答えを見る
どこでつまずきましたか?(選ぶと、戻る場所を案内します)
解説を読む
係数行列と右辺のベクトルを
とおくと、 である。 の 2 つの列ベクトル と は平行でないので の階数は であり、 は正則である。このとき を最小にする はただ 1 つで、正規方程式
の解である( を で偏微分して とおいた式と同じ)。
まず計算すると
よって正規方程式は
である。 より 、すなわち なので 。 に代入して より 。
検算: 、 で正しい。
したがって を最小にする組は である。
別解
は の 2 次式で下に有界な凸関数なので、偏微分が 0 になる点が最小点。
より 。
より 。
これを解く。第 1 式 − 第 2 式 : より 、。第 2 式に代入: 、。
検算: 残差は 、、。 の第 1 成分は 、第 2 成分は で直交条件を満たす。ヘッセ行列 は正定値(行列式 )。答えは 。