カメラの座標→各頂点のベクトルと、カメラの視線のx方向ですね。
画像で言うと、このカメラの視線のベクトルは、赤と緑の矢印です。
青がカメラの座標→頂点のベクトルです。
移動したとき、もちろんカメラの座標は変化します。
視界を回転させたとき、カメラの視線ベクトルは回転します。
描画時、頂点の座標からカメラの座標を引いて、位置ベクトルを求めます。
その後、その位置ベクトルとカメラの視線ベクトルxを内積をカメラ座標のx,視線ベクトルのyとの内積をカメラ座標のy,z方向の視線ベクトルと(略)
そして、カメラ座標を画面の描画座標に変換して、描画します。