Universitaire wiskunde — Bachelor jaar 2 · Bachelor Year 2
15Differentiaalrekening
De calculus in twee variabelen van het volume Jaar 1 rijpt hier tot de differentiaalrekening van afbeeldingen tussen genormeerde ruimten: de differentiaal als beste lineaire benadering, de kettingregel in volle algemeenheid, de symmetriestelling van Schwarz bewezen, Taylorformules, en de volledige tweede-orde analyse van extrema. De stelling van de inverse functie, kroon van de theorie, wordt geformuleerd met haar bewijsstrategie — een Banach-vastpunt — expliciet gemaakt.
Overal is U een open deelverzameling van Rn (of van een genormeerde ruimte; het eindigdimensionale geval draagt alle ideeën), f:U→Rm.
15.1 De differentiaal
Definitie 15.1
f is differentieerbaar in a wanneer er een (continue) lineaire afbeelding dfa:Rn→Rm bestaat met
f(a+h)=f(a)+dfa(h)+o(∥h∥)(h→0).
De afbeelding dfa, de differentiaal van f in a, is uniek; haar matrix in de canonieke basissen is de JacobimatrixJf(a)=(∂xj∂fi(a)). Differentieerbaarheid impliceert continuïteit en het bestaan van alle richtingsafgeleiden dfa(v)=limt→0tf(a+tv)−f(a); het omgekeerde faalt (Oefening 15.2). Voor m=1 is dfa(h)=⟨∇f(a),h⟩: de gradiënt van Jaar 1, nu begrepen als de vector die de differentiaal voorstelt.
Stelling 15.2(C1-criterium)
Als alle partiële afgeleiden van f op U bestaan en continu zijn in a, dan is fdifferentieerbaar in a. “C1 op U” — continue partiële afgeleiden — impliceert dus differentieerbaarheid overal, met continue differentiaal.
Bewijs. Componentgewijs (m=1 volstaat). Het bewijs van Jaar 1 voor twee variabelen — één coördinaat tegelijk verplaatsen, de éénvariabele middelwaardestelling op elk been toepassen, en de continuïteit van de partiële afgeleiden in a gebruiken — generaliseert woordelijk naar n benen:
waar h(j) de eerste j coördinaten van h bevriest en ξj op het j-de been ligt; continuïteit maakt elke ∂xj∂f(ξj) tot ∂xj∂f(a)+o(1), en de fout is o(∥h∥). ∎
en beide fouttermen zijn o(∥h∥): de eerste omdat dgb continu is en ε1→0; de tweede omdat ∥k∥≤C∥h∥ (begrensde lineaire afbeelding plus kleine term) en ε2(k)→0 als h→0. ∎
Voorbeeld 15.4(Radiale functies, eens en voor altijd)
Zij r(x)=∥x∥2 op Rn∖{0} en f=g∘r met g een C1-functie van één variabele. Ten eerste is rdifferentieerbaar buiten 0: uit r2=∑xi2 volgt
∂xi∂r=rxi,d.w.z.∇r(x)=∥x∥x,
de eenheidsradiale vector (differentieer r2 en deel — of pas de kettingregel toe op ⋅). De kettingregel geeft dan, voor elke radiale functie,
∇f(x)=g′(∥x∥)∥x∥x.
Uitgewerkt voorbeeld: g(r)=r1 levert ∇∥x∥1=−∥x∥3x, het omgekeerd-kwadratische veld van gravitatie en elektrostatica — richting radiaal, grootte ∥x∥21. Slotinzicht: gradiënten van radiale functies zijn radiaal omdat de niveauverzamelingen bollen zijn en de gradiënt orthogonaal is op niveauverzamelingen; in x=0 is r daarentegen nietdifferentieerbaar (geen kandidaat lineaire afbeelding past bij ∥h∥ vanuit alle richtingen) — gladde radiale profielen hebben g′(0)=0 nodig om de oorsprong netjes te kruisen.
Stelling 15.5(Middelwaardeongelijkheid)
Zij fdifferentieerbaar op U en het segment [a,b]={a+t(b−a)} bevat in U. Dan is
∥f(b)−f(a)∥≤∥b−a∥x∈[a,b]sup∣∣∣dfx∣∣∣.
In het bijzonder is een differentieerbare afbeelding met nuldifferentiaal op een samenhangende open verzameling constant.
Bewijs. De functie φ(t)=f(a+t(b−a)) is differentieerbaar op [0,1] met φ′(t)=dfa+t(b−a)(b−a) (kettingregel), van norm≤M∥b−a∥ met M de weergegeven sup. Voor R-waardige f besluit de éénvariabele middelwaardeongelijkheid; voor vectorwaarden pas haar toe op t↦⟨u,φ(t)⟩ met u de eenheidsvector langs f(b)−f(a). Constantheid: lokaal constant (segmenten in ballen) plus samenhang (de verzameling waar f een gegeven waarde aanneemt is open en gesloten: Hoofdstuk 4). ∎
Voorbeeld 15.6(Een Lipschitzconstante uit de MVI)
Is f(x,y)=sinxsinyLipschitz op R2, en met welke constante? Haar gradiënt is ∇f=(cosxsiny,sinxcosy), van gekwadrateerde norm
cos2xsin2y+sin2xcos2y≤sin2y+cos2y⋅1=1
(bind cos2x en sin2x afzonderlijk door 1), dus df(x,y)=∥∇f∥≤1 overal, en Stelling 15.5 op het segment tussen twee willekeurige punten geeft
∣f(b)−f(a)∣≤∥b−a∥2:
f is 1-Lipschitz, en de constante is scherp (nabij de oorsprong heeft f(x,2π)=sinx helling 1). Slotinzicht: de middelwaardeongelijkheid zet een puntsgewijze grens op de differentiaal om in een globale continuïteitsmodulus — de standaardroute naar Lipschitzschattingen in elke dimensie, en de motor in Oefening 15.12.
15.2 Tweede afgeleiden
Stelling 15.7(Schwarz)
Als f van klasse C2 is op U (alle tweede partiële afgeleiden bestaan en zijn continu), dan geldt voor alle i,j:
∂xi∂xj∂2f=∂xj∂xi∂2f.
Bewijs. Twee variabelen volstaan (x=xi, y=xj, de rest bevroren). Beschouw het tweede verschil
Δ(h)=f(a+h,b+h)−f(a+h,b)−f(a,b+h)+f(a,b).
Fixeer h en stel φ(x)=f(x,b+h)−f(x,b): dan is Δ(h)=φ(a+h)−φ(a), en twee toepassingen van de middelwaardestelling geven
met ξ∈(a,a+h), η∈(b,b+h). Door continuïteit geldt h2Δ(h)→∂y∂x∂2f(a,b) als h→0. Dezelfde berekening met de rollen van de variabelen omgewisseld (eerst de tweede variabele bevriezen) geeft h2Δ(h)→∂x∂y∂2f(a,b): de twee limieten van dezelfde grootheid vallen samen. ∎
Voorbeeld 15.8(Waarom C2 nodig is: het tegenvoorbeeld van Peano)
Zij f(x,y)=x2+y2xy(x2−y2), f(0,0)=0. Buiten de oorsprong is f van klasse C∞; in de oorsprong bestaan alle eerste en tweede partiële afgeleiden, maar de gemengde zijn het oneens. Bereken langs de assen: f(x,0)=f(0,y)=0, en voor y=0,
de twee gemengde partiële afgeleiden bestaan en verschillen. Geen tegenspraak met Stelling 15.7: de tweede partiële afgeleiden van f zijn niet continu in 0 (test langs y=tx). Slotinzicht: de stelling van Schwarz is een echte stelling over continuïteit, geen formele identiteit — en de hypothese “C2” in Taylor–Young hieronder doet echt werk.
Stelling 15.9(Taylor–Young van orde 2)
Zij f:U→R van klasse C2 en a∈U. Dan, als h→0,
f(a+h)=f(a)+⟨∇f(a),h⟩+21⟨Hah,h⟩+o(∥h∥2),
waar Ha=(∂xi∂xj∂2f(a)) de (symmetrische, door Schwarz) Hessematrice is.
Bewijs. Pas de éénvariabele stelling van Taylor–Young (volume Jaar 1) toe op φ(t)=f(a+th) op [0,1]: door de kettingregel is φ′(t)=⟨∇f(a+th),h⟩ en φ′′(t)=⟨Ha+thh,h⟩, beide continu in t. Dan is φ(1)=φ(0)+φ′(0)+21φ′′(θ) (Taylor–Lagrange) met θ∈(0,1), en de continuïteit van de tweede partiële afgeleiden maakt φ′′(θ)=φ′′(0)+o(1)⋅∥h∥2 uniform: de weergegeven ontwikkeling. ∎
Voorbeeld 15.10(Een ontwikkeling op twee manieren)
Ontwikkel f(x,y)=excosy in de oorsprong tot orde 2. Via samenstelling van éénvariabele ontwikkelingen:
Via partiële afgeleiden:fx=excosy, fy=−exsiny, dus ∇f(0)=(1,0); en fxx=f, fyy=−f, fxy=−exsiny geven H0=diag(1,−1): Stelling 15.9 reproduceert 1+x+21(x2−y2). De twee berekeningen stemmen overeen, en de samenstellingsroute was sneller — geen tweede partiële afgeleiden nodig. Slotinzicht: de oorsprong is geen kritiek punt (∇f=0), dus ondanks de onbepaalde Hessematrice is er geen zadel te verklaren: de lineaire term regelt, en de tweede-ordetest spreekt alleen in kritieke punten.
Stelling 15.11(Tweede-orde extremumtest, bewezen)
Zij f van klasse C2 nabij een kritiek punt a (∇f(a)=0), met Hessematrice H=Ha.
Als H positief definiet is, is a een strikt lokaal minimum (negatief definiet: maximum).
Als Heigenwaarden van beide tekens heeft, is a een zadel: geen extremum.
Als H singulier is (en semidefiniet), geen conclusie.
De “rt−s2”-test van Jaar 1 is het geval n=2: detH=rt−s2, het teken van tr afgelezen uit r.
(2) Langs een eigenvectorv+ met λ+>0: f(a+tv+)−f(a)=2λ+t2+o(t2)>0 voor kleine t; langs v− met λ−<0 is het verschil negatief: beide tekens komen in elke omgeving voor.
(3) f(x,y)=x2+y4, x2−y4, x2+y3 delen dezelfde singuliere semidefinite Hessematrice in 0 met drie verschillende gedragingen. ∎
Classificeer alle extrema van f(x,y)=x4+y4−4xy op R2. Kritieke punten:∇f=(4x3−4y,4y3−4x)=0 geeft y=x3 en x=y3=x9, dus x(x8−1)=0: de reële oplossingen zijn (0,0), (1,1), (−1,−1). Hessemmatrices:H=(12x2−4−412y2). In (±1,±1): (12−4−412), eigenwaarden8 en 16: positief definiet, strikte lokale minima met f=−2. In (0,0): (0−4−40), eigenwaarden±4: een zadel. Globaliteit: uit 2∣xy∣≤x2+y2,
f is coërcief, dus bereikt een globaal minimum (compactheid van subniveauverzamelingen), noodzakelijk in een kritiek punt: de waarde −2, in zowel (1,1) als (−1,−1), is het globale minimum; er is geen maximum (f onbegrensd naar boven). Slotinzicht: de lokale test classificeert kandidaten, maar alleen een groeianalyse maakt “lokaal” tot “globaal” — het tweestaps-patroon van elk optimaliseringsbewijs in dit boek.
Methode 15.13(De extrema van f:Rn→R classificeren)
Los ∇f=0 op (alle kritieke punten; op een domein met rand, behandel de rand afzonderlijk zoals in Oefening 15.7).
In elk kritiek punt, bereken de Hessematrice en de tekens van haar eigenwaarden — in dimensie 2 volstaan detH en trH: det<0 zadel; det>0 extremum, van het type gegeven door het teken van het spoor; det=0: de test zwijgt, bestudeer f langs krommen.
Voor globale uitspraken, voeg een compactheids- of coërciviteitsargument toe (f→+∞ op oneindig, of een compacte restrictieverzameling), en vergelijk dan de kritieke waarden.
15.3 De stelling van de inverse functie
Stelling 15.14(Stelling van de inverse functie)
Zij f:U→Rn van klasse C1 en a∈U met dfainverteerbaar. Dan bestaan open omgevingen V∋a, W∋f(a) zodat f:V→W een bijectie is met C1-inverse, en
d(f−1)f(x)=(dfx)−1(x∈V).
Bewijs.Toegegeven op dit niveau.∎
Opmerking 15.15(Waarom het waar is: de vastpuntstrategie)
f(x)=y oplossen nabij a herschrijft zich als de vastpuntvergelijking x=x+dfa−1(y−f(x))=:Φy(x); de afbeelding Φy heeft differentiaalid−dfa−1dfx, klein nabij a door continuïteit van df, dus Φy is een contractie op een kleine gesloten bal en de vastpuntstelling van Banach (Stelling 4.12) levert de unieke lokale oplossing x=f−1(y). Continuïteit en differentieerbaarheid van de inverse volgen dan uit de schattingen in de contractie. De volledige boekhouding wordt in Jaar 3 uitgevoerd; de strategie — en de uitspraak — worden vanaf nu vrij gebruikt. De begeleidende stelling van de impliciete functie (F(x,y)=0 oplossen naar y(x) wanneer ∂y∂F inverteerbaar is) volgt door de stelling toe te passen op (x,y)↦(x,F(x,y)).
inverteerbaar voor r=0, dus Φ is een lokaal C1- diffeomorfisme buiten de oorsprong — de vergunning om “over te gaan op poolcoördinaten”, vernieuwd voor de meervoudige integralen van Hoofdstuk 20.
Voorbeeld 15.17(Lokaal overal, globaal nergens)
Zij f(x,y)=(excosy,exsiny) op R2. Haar Jacobimatrix,
Jf=(excosyexsiny−exsinyexcosy),detJf=e2x>0,
verdwijnt nooit: door Stelling 15.14 is f een lokaal C1-diffeomorfisme in elk punt van het vlak. Toch is f verre van injectief: f(x,y+2π)=f(x,y), dus elke waarde wordt oneindig vaak aangenomen; en ze is ook niet surjectief, want ∥f(x,y)∥=ex>0 mist de oorsprong. Slotinzicht: de stelling van de inverse functie is onherleidbaar lokaal — inverteerbaarheid van elke dfa levert een mozaïek van lokale inversen die niet tot één hoeven samen te voegen. (Lezers die complexe getallen kennen herkennen z↦ez; het mozaïek is de familie van logaritmetakken.) Vergelijk Oefening 15.12, waar een kwantitatieve globale hypothese wel één globale inverse afdwingt.
Opmerking 15.18(Veelvoorkomende valkuilen)
(i) Richtingsafgeleiden zijn goedkoop, differentialen niet: alle richtingsafgeleiden kunnen bestaan — en zelfs niet lineair van de richting afhangen — zonder differentieerbaarheid (Oefening 15.2); alleen het C1-criterium (Stelling 15.2) promoveert partiële afgeleiden tot een differentiaal. (ii) Kritiek betekent niet extremal: zadels (Voorbeeld 15.12) en het stille singuliere geval (Stelling 15.11 (3)) schuilen beide achter ∇f=0. (iii) Geen vectorwaardige middelwaardegelijkheid: alleen de ongelijkheid van Stelling 15.5 overleeft (Oefening 15.9); schrijf nooit f(b)−f(a)=dfc(b−a) voor f met waarden in Rm, m≥2. (iv) Lokale inverteerbaarheid is geen injectiviteit:Voorbeeld 15.17. (v) De gradiënt hoort bij het inproduct:∇f is de vector die dfa voorstelt in een gekozen inproduct; verander het product (zoals in het gewogen voorbeeld van het hoofdstuk over kwadratische vormen) en de gradiënt roteert, terwijl de differentiaal — het intrinsieke object — niet beweegt.
Opmerking 15.19(Waar dit wordt gebruikt)
Alles stroomafwaarts van dit hoofdstuk is toegepaste differentiaalrekening: het hoofdstuk over differentiaalvergelijkingen lineariseert stromen en gebruikt de determinantformule van Liouville (bewezen in het weekendprobleem van dit hoofdstuk); de hoofdstukken over krommen en oppervlakken bestuderen niveauverzamelingen en parametriseringen via de stelling van de impliciete functie; meervoudige integralen veranderen van variabelen via Jacobimatrices. Het weekendprobleem ontwikkelt de calculus op de ruimte van matrices zelf — differentiaal van de determinant, van de inverse, de matrixexponentiaal, en de orthogonale groep als gladde niveauverzameling — de schaduw van Jaar 2 van wat het volume Jaar 3 formaliseert als variëteiten en Liegroepen.
15.4 Oefeningen
Oefening 15.1★
Bereken de Jacobimatrices van f(x,y)=(x2−y2,2xy) en van Φ(r,θ,z)=(rcosθ,rsinθ,z); waar zijn de differentialen inverteerbaar?
Oplossing
Oplossing van Oefening 15.1.
Jf=(2x2y−2y2x), detJf=4(x2+y2): inverteerbaar buiten de oorsprong. (Deze f is z↦z2 in complexe vermomming.)
JΦ=cosθsinθ0−rsinθrcosθ0001, det=r: inverteerbaar voor r=0 (cilindrische coördinaten).
Oefening 15.2★
Zij f(x,y)=x2+y2x3 (f(0,0)=0). Bewijs dat alle richtingsafgeleiden van f in 0 bestaan, maar dat f niet differentieerbaar is in 0(de afbeelding v↦ richtingsafgeleide is niet lineair).
Oplossing
Oplossing van Oefening 15.2.
Voor v=(a,b)=0: tf(tv)−0=t⋅t2(a2+b2)t3a3=a2+b2a3: elke richtingsafgeleide bestaat, met waarde Dv=a2+b2a3. Maar v↦Dv is niet lineair (D(1,0)=1, D(0,1)=0, D(1,1)=21=1): geen lineaire afbeelding kan deze waarden produceren, dus f is niet differentieerbaar in 0 (de differentiaal zou v↦Dv moeten zijn).
Oefening 15.3★
Vind en classificeer de kritieke punten van f(x,y)=x3+y3−3xy met Stelling 15.11, en van g(x,y)=x4+y4−2(x−y)2.
Oplossing
Oplossing van Oefening 15.3.
f=x3+y3−3xy: kritieke punten (0,0) en (1,1) (berekening van Jaar 1). Hessemmatrices: H=(6x−3−36y). In (0,0): gemengde eigen-tekens (det=−9<0): zadel. In (1,1): det=27>0, spoor >0: positief definiet, strikt lokaal minimum — nu gerechtvaardigd door Stelling 15.11 in plaats van opgelegd.
g=x4+y4−2(x−y)2: ∇g=(4x3−4(x−y),4y3+4(x−y)); kritieke punten (0,0), (2,−2), (−2,2) (Jaar 1). In (±2,∓2): H=(12⋅2−44420)=(204420): positief definiet (diagonaal dominant; eigenwaarden24,16): strikte lokale minima. In (0,0): H=(−444−4), singulier negatief semidefiniet: de test zwijgt; de richtingsstudie (g(x,x)=2x4>0, g(x,−x)=2x4−8x2<0 klein) toont een zadel-achtig punt — geen extremum.
Oefening 15.4★★
Zij f:Rn→R van klasse C1 en homogeen van graad p: f(tx)=tpf(x) voor t>0. Bewijs de identiteit van Euler
⟨∇f(x),x⟩=pf(x),
en haar omkering voor C1-functies op Rn∖{0}.
Oplossing
Oplossing van Oefening 15.4.
Differentieer t↦f(tx) in t=1: door de kettingregel, ⟨∇f(x),x⟩; door homogeniteit is dezelfde functie tpf(x), van afgeleide pf(x) in t=1: de identiteit van Euler.
Omkering: fixeer x=0 en zij φ(t)=f(tx)−tpf(x) op t>0. Dan φ′(t)=⟨∇f(tx),x⟩−ptp−1f(x)=t1(⟨∇f(tx),tx⟩−ptpf(x)). De hypothese — de identiteit van Euler in het punt tx — evalueert de haak als pf(tx)−ptpf(x)=pφ(t). Dus φ′=tpφ met φ(1)=0: de unieke oplossing van de lineaire DV is φ≡0 (eenduidigheid van Jaar 1), d.w.z. f(tx)=tpf(x).
Oefening 15.5★★
Zij Asymmetrisch en f(x)=21⟨Ax,x⟩−⟨b,x⟩. Bereken ∇f en Hf; wanneer is f convex? Onder de aanname dat A positief definiet is, toon aan dat f een uniek globaal minimum heeft in de oplossing van Ax=b — de bestaansreden van gradiëntdaling.
Oplossing
Oplossing van Oefening 15.5.
Uitwerken f(x+h)−f(x)=⟨Ax−b,h⟩+21⟨Ah,h⟩ (symmetrie van A): ∇f(x)=Ax−b en Hf=A overal. f is convex desda A positief semidefiniet is (de Hessematrice-test, hier globaal omdat H constant is: de tweede-orde Taylorformule is exact). Als A positief definiet is: het unieke kritieke punt is x∗=A−1b, en f(x∗+h)−f(x∗)=21⟨Ah,h⟩≥2λmin∥h∥2>0 voor h=0: strikt globaal minimum.
Oefening 15.6★★
(Lagrange-multiplicator, één nevenvoorwaarde, met de hand bewezen) Zij f,g van klasse C1 op R2, en veronderstel dat f in a een lokaal extremum bereikt op de niveauverzameling {g=0}, met ∇g(a)=0. Bewijs dat ∇f(a)=λ∇g(a) voor zekere λ. (Parametriseer de niveauverzameling nabij a met de stelling van de impliciete functie en differentieer t↦f(γ(t)).) Toepassing: extrema van f(x,y)=xy op de cirkel x2+y2=1.
Oplossing
Oplossing van Oefening 15.6.
Omdat ∇g(a)=0, is één partiële, zeg ∂y∂g(a)=0: de stelling van de impliciete functie (de begeleidster van Stelling 15.14) parametriseert {g=0} nabij a=(a1,a2) als γ(t)=(t,y(t)) met y van klasse C1, y′(t)=−∂yg∂xg(γ(t)) (differentieer g(t,y(t))=0). De éénvariabele functie t↦f(γ(t)) heeft een lokaal extremum in t=a1:
de vectoren ∇f(a) en ∇g(a) hebben evenredige coördinaten: ∇f(a)=λ∇g(a) met λ=∂yg(a)∂yf(a).
Toepassing: op de cirkel, ∇(xy)=(y,x) evenwijdig aan (2x,2y) dwingt y2=x2; met de nevenvoorwaarde zijn de kandidaten ±(21,21) (waarde 21) en ±(21,−21) (waarde −21): max 21, min −21 (bereikt: de cirkel is compact).
Oefening 15.7★★
Bepaal de extrema van f(x,y)=x2+y2−xy+x−y op R2, daarna haar maximum en minimum op de gesloten driehoek met hoekpunten (0,0), (1,0), (0,1)(inwendige kritieke punten, dan de drie randen, dan de hoekpunten).
Oplossing
Oplossing van Oefening 15.7.
∇f=(2x−y+1,2y−x−1)=0: oplossen, x=−31, y=31. Hessematrice (2−1−12), positief definiet: globaal minimum van de kwadratische f, waarde f(−31,31)=−31.
Op de driehoek T: het inwendige kritieke punt (−31,31)∈/T (negatieve x). Randen: op y=0, x∈[0,1]: f=x2+x, stijgend: extremen 0 en 2. Op x=0: f=y2−y, minimum −41 in y=21, waarden 0 en 0 aan de uiteinden. Op x+y=1: substitueer y=1−x, f=x2+(1−x)2−x(1−x)+x−(1−x)=3x2−x; op [0,1]: minimum −121 in x=61, waarden 0 (in x=0) en 2 (in x=1). Hoekpunten: f(0,0)=0, f(1,0)=2, f(0,1)=0. Globaal op T: minimum −41 in (0,21), maximum 2 in (1,0).
Oefening 15.8★★★
Zij f:R2→R2, f(x,y)=(x+y2,y+x2). Toon aan dat f een lokaal diffeomorfisme is nabij 0, bereken d(f−1)(0,0), en vind de grootste r zodat df inverteerbaar is op de bal ∥(x,y)∥2<r(bereken detJf).
Oplossing
Oplossing van Oefening 15.8.
Jf=(12x2y1), detJf=1−4xy. In 0: det=1=0: lokaal diffeomorfisme (Stelling 15.14), met
d(f−1)(0,0)=(Jf(0))−1=I2.
Inverteerbaarheid op een bal: nodig 4∣xy∣<1 overal; op ∥(x,y)∥2<r, ∣xy∣≤2x2+y2<2r2, dus r=21 werkt; en het is de grootste: in (x,y)=(21,21), van norm21, detJf=0.
Oefening 15.9★★★
(Rolle faalt, middelwaarde overleeft) Geef f:R→R2, van klasse C1, met f(0)=f(2π) maar f′(t)=0 voor alle t (geen vectorwaardige Rolle). Verifieer daarna op jouw voorbeeld de middelwaardeongelijkheid van Stelling 15.5.
Oplossing
Oplossing van Oefening 15.9.
f(t)=(cost,sint): f(0)=f(2π)=(1,0), toch heeft f′(t)=(−sint,cost)norm1, nooit nul: geen punt waar de afgeleide verdwijnt — Rolle heeft geen vectoranaloog. De middelwaardeongelijkheid houdt comfortabel: ∥f(2π)−f(0)∥=0≤2π⋅sup∥f′∥=2π.
Oefening 15.10★
Bereken de differentiaal en de gradiënt van f(x)=∥x∥22 en van g(x)=⟨Ax,x⟩ op Rn (A een vierkante matrix, niet als symmetrisch verondersteld), en de Hessematrice van elk. Voor welke A is g convex?
Oplossing
Oplossing van Oefening 15.10.
f(x+h)−f(x)=2⟨x,h⟩+∥h∥2: dfx=2⟨x,⋅⟩, ∇f(x)=2x, Hessematrice 2I (constant). Voor g:
dus ∇g(x)=(A+AT)x en Hg=A+AT, constant. Door Oefening 15.11 is g convex desda A+AT positief semidefiniet is — alleen het symmetrische deel van A telt, zoals inderdaad g(x)=⟨2A+ATx,x⟩.
Oefening 15.11★★
Zij f:Rn→R van klasse C2. Bewijs dat f convex is dan en slechts dan als haar Hessematrice Hx positief semidefiniet is in elke x(reduceer tot één variabele: t↦f(a+t(b−a)); gebruik Taylor–Lagrange in één richting, en voor de omkering evalueer φ′′).
Oplossing
Oplossing van Oefening 15.11.
f is convex desda haar restrictie tot elk segment convex is, d.w.z. desda elke φ(t)=f(a+tv) convex is. Door de kettingregel φ′′(t)=⟨Ha+tvv,v⟩.
Als alle Hessemmatrices positief semidefiniet zijn: φ′′≥0, dus elke φ is convex (volume Jaar 1) en f is convex. Omgekeerd, als f convex is, is elke φ convex, dus φ′′(0)≥0: ⟨Hav,v⟩≥0 voor elke a en elke richting v: alle Hessemmatrices zijn positief semidefiniet.
Oefening 15.12★★★
(Een globale inversestelling) Zij g:Rn→Rn van klasse C1 met ∣∣∣dgx∣∣∣≤k<1 voor alle x, en f=id+g.
Toon aan ∥f(x)−f(y)∥≥(1−k)∥x−y∥: f is injectief, met continue inverse op haar beeld.
Toon aan dat voor elke y∈Rn de afbeelding x↦y−g(x) een contractie is van de complete ruimte Rn, en concludeer met de vastpuntstelling van Banach (Stelling 4.12) dat f surjectief is.
Concludeer dat f een bijectie van Rn is met (1−k)−1-Lipschitz-inverse — een globaal tegenhanger van Stelling 15.14 (die daarentegen puur lokaal is).
Oplossing
Oplossing van Oefening 15.12.
Door de middelwaardeongelijkheid (Stelling 15.5) toegepast op g: ∥g(x)−g(y)∥≤k∥x−y∥, dus
∥f(x)−f(y)∥≥∥x−y∥−∥g(x)−g(y)∥≥(1−k)∥x−y∥:
f is injectief en f−1 (gedefinieerd op het beeld) is 1−k1-Lipschitz.
Fixeer y; T(x)=y−g(x) voldoet aan ∥T(x)−T(x′)∥=∥g(x′)−g(x)∥≤k∥x−x′∥: een contractie van de complete ruimte Rn. Banach (Stelling 4.12) levert een vast punt x∗=y−g(x∗), d.w.z. f(x∗)=y: f is surjectief.
f is dus een bijectie van Rn met 1−k1-Lipschitz-inverse: een globale inversestelling, waar de kleinheid van dg overal de lokale inverteerbaarheidshypothese van Stelling 15.14 vervangt.
15.5 Probleem: De calculus van matrices — Jacobi, exponentiaal, en de orthogonale groep
Probleem 15.1
De schoonste speeltuin voor differentiaalrekening is de ruimte Mn(R)≃Rn2 zelf: haar natuurlijkste afbeeldingen — product, inverse, determinant, exponentiaal — hebben differentialen van treffende elegantie. Dit probleem berekent ze allemaal: de Neumannreeks, de differentiaal van de inverse, de formule van Jacobi voor de determinant met de formule van Liouville als dividend, de matrixexponentiaal met deteA=etrA, en ten slotte de orthogonale groep On als gladde niveauverzameling met de antisymmetrische matrices als raakruimte — differentiaalmeetkunde in wording. Overal is ∣∣∣⋅∣∣∣ de operatornorm ondergeschikt aan ∥⋅∥2, en ⟨X,Y⟩=tr(XTY) het Frobenius-inproduct.
Deel I — De Neumannreeks.
Bewijs submultiplicativiteit, ∣∣∣AB∣∣∣≤∣∣∣A∣∣∣∣∣∣B∣∣∣, en leid af dat polynoomafbeeldingen van A (matrixproducten, determinant, spoor) continu zijn op Mn(R).
Voor ∣∣∣X∣∣∣<1, toon aan dat ∑k≥0Xk absoluut convergeert in Mn(R) (Stelling 5.21), dat haar som (I−X)−1 is, en dat
Leid af dat GLn(R)open is: als A inverteerbaar is en ∣∣∣H∣∣∣<∣∣∣A−1∣∣∣1, dan is A+H inverteerbaar. Leid ook af dat GLn(R)dicht is in Mn(R)(verstoor A met εI: det(A+εI) is een niet-nul polynoom in ε).
Toon aan dat de inversieafbeelding Φ(A)=A−1 continu is op GLn(R).
Deel II — Eerste differentialen.
Toon aan dat de kwadrateringsafbeelding A↦A2differentieerbaar is met differentiaalH↦AH+HA, en algemener dat A↦AkdifferentiaalH↦∑i=0k−1AiHAk−1−i heeft. Waarom kan men nietkAk−1H schrijven in het algemeen?
(schrijf (A+H)−1=(I+A−1H)−1A−1 en ontwikkel met vraag 2). Controleer de formule tegen het scalaire geval n=1.
Voor een C1-kromme t↦A(t)∈GLn(R), leid af (A(t)−1)′=−A−1A′A−1, en ontwikkel t↦(I+tB)−1 tot eerste orde in t=0.
Bereken de differentiaal van f(A)=tr(Ak) en identificeer haar gradiënt voor het Frobenius-inproduct:
dfA(H)=ktr(Ak−1H),∇f(A)=k(Ak−1)T.
Dezelfde vragen voor f(A)=tr(ATA)=∥A∥F2: differentiaal, gradiënt, en de (constante) Hessematrice; concludeer dat ∥⋅∥F2 strikt convex is.
Deel III — De formule van Jacobi.
Bewijs
det(I+H)=1+trH+O(∣∣∣H∣∣∣2)
(ontwikkel det(e1+h1,…,en+hn) door multilineaire in de kolommen: termen met minstens twee h-kolommen zijn O(∣∣∣H∣∣∣2)): d(det)I=tr.
Voor A inverteerbaar, leid af
d(det)A(H)=det(A)tr(A−1H).
Toon aan dat voor elkeA (inverteerbaar of niet), ∂aij∂det(A)=Cij, de (i,j)-cofactor (Laplace-ontwikkeling langs rij i), zodat met de geadjungeerde adjA=com(A)T:
d(det)A(H)=tr(adj(A)H),∇(det)(A)=com(A),
wat vraag 11 terugvindt wanneer A inverteerbaar is (adjA=det(A)A−1). Dit is de formule van Jacobi: (detA(t))′=tr(adj(A(t))A′(t)).
(Formule van Liouville) Zij A(t) een C1-kromme van matrices die voldoet aan de lineaire differentiaalvergelijking A′(t)=M(t)A(t). Bewijs
(gebruik adj(A)A=det(A)I en de cyclische invariantie van het spoor) — de Wronskiaan-identiteit die het hoofdstuk over differentiaalvergelijkingen voortdurend zal gebruiken.
Toon aan dat SLn(R)={det=1} een gladde niveauverzameling is: in elke A∈SLn(R) is de differentiaald(det)A een surjectieve lineaire afbeelding op R(evalueer haar in H=n1A).
Toon aan dat eA=∑k≥0k!Ak absoluut convergeert voor elke A, normaal op elke bal, met eA≤e∣∣∣A∣∣∣; en dat eA continu van A afhangt.
Bewijs dat AB=BA impliceert eA+B=eAeB(Cauchy-product, legitiem door absolute convergentie); leid af dat eA altijd inverteerbaar is, met inverse e−A: exp beeldt Mn(R) af in GLn(R).
Toon aan dat t↦etA van klasse C1 is (inderdaad C∞) met
dtdetA=AetA=etAA
(differentieer de reeks term voor term op segmenten: de afgeleide reeks convergeert normaal).
Bewijs de identiteit
det(eA)=etrA
(pas de formule van Liouville, vraag 13, toe op A(t)=etA). Controles: n=1; nilpotente A; en de spoorloze matrices landen in SLn(R).
Toon aan eH=I+H+O(∣∣∣H∣∣∣2), dus exp is differentieerbaar in 0 met d(exp)0=id; concludeer met de stelling van de inverse functie (Stelling 15.14) dat exp een C1-diffeomorfisme is van een omgeving van 0 op een omgeving van I: elke matrix dicht bij de identiteit heeft een logaritme.
Toon aan dat exp symmetrische matrices afbeeldt op symmetrische positief definiete matrices, bijectief (diagonaliseer; de inverse is de spectrale logaritme).
Deel V — De orthogonale groep als niveauverzameling.
Zij F(A)=ATA, van Mn(R) naar de symmetrische matrices Sn. Bereken dFA(H)=ATH+HTA en toon aan dat in elke A∈On=F−1(I) deze differentiaalsurjectief is op Sn(gegeven S∈Sn, probeer H=21AS): On is een gladde niveauverzameling, van dimensie n2−2n(n+1)=2n(n−1).
Toon aan dat elke C1-kromme A(t)∈On met A(0)=I een antisymmetrische snelheid A′(0) heeft, en omgekeerd dat voor antisymmetrische K de kromme etK in On blijft: de raakruimte van On in I is precies de antisymmetrische matrices.
Toon aan deteK=1 voor antisymmetrische K (vraag 18): de exponentiaalkromme leeft in de rotatiegroep SOn. Bereken haar volledig voor n=2: met J=(01−10), bewijs
eθJ=(cosθsinθ−sinθcosθ):
de matrixexponentiaalis de rotatie over θ, en de reeksdefinities van cosinus en sinus verschijnen opnieuw binnen een matrix.
(De dichtheidstruc) Met de dichtheid van GLn(R) (vraag 3) en continuïteit, breid van inverteerbaar naar alle matrices de identiteit uit
adj(AB)=adj(B)adj(A)
(voor inverteerbare A,B zijn beide zijden gelijk aan det(AB)(AB)−1; beide zijden zijn polynomiaal in de entries).
Synthese. In één zin elk: (i) welke eerdere hoofdstukken de motor van elk Deel leverden (volledigheid en genormeerde algebra’s; de spectraalstelling; de stelling van de inverse functie); (ii) op welke formule van dit probleem het hoofdstuk over differentiaalvergelijkingen leunt, en waar; (iii) wat d(det)I=tr en deteA=etrA zeggen over spoor en determinant als “infinitesimaal en globaal volume”; (iv) wat het volume Jaar 3 maakt van vragen 21–23 (Liegroepen en hun Liealgebra’s).
Oplossing
Oplossing van Probleem 15.1.
1.∥ABx∥≤∣∣∣A∣∣∣∥Bx∥≤∣∣∣A∣∣∣∣∣∣B∣∣∣∥x∥: neem de sup over ∥x∥=1. Matrixproducten, det en tr zijn polynoomfuncties van de entries, dus continu (Mn(R)≃Rn2, alle normen equivalent: Stelling 5.13).
2.∑Xk≤∑∣∣∣X∣∣∣k<∞: de reeks convergeert absoluut, dus convergeert (Stelling 5.21). Uit (I−X)∑k≤NXk=I−XN+1→I: de som is (I−X)−1. Norm: ≤∑∣∣∣X∣∣∣k=1−∣∣∣X∣∣∣1; en
3.A+H=A(I+A−1H) met A−1H≤A−1∣∣∣H∣∣∣<1: inverteerbaar door vraag 2: de open bal van straal A−1−1 rond A ligt in GLn(R). Dichtheid: det(A+εI) is een polynoom van graad n in ε met leidende coëfficiënt 1: het heeft eindig veel wortels, dus er zijn εk→0 met A+εkI inverteerbaar, convergerend naar A.
4. Voor ∣∣∣H∣∣∣<2∣∣∣A−1∣∣∣1:
(A+H)−1−A−1=[(I+A−1H)−1−I]A−1,
van norm ten hoogste 1−∣∣∣A−1H∣∣∣∣∣∣A−1H∣∣∣A−1≤2A−12∣∣∣H∣∣∣→0: Φ is continu in elke A∈GLn(R).
5.(A+H)2=A2+AH+HA+H2: de afbeelding H↦AH+HA is lineair en de fout H2 is O(∣∣∣H∣∣∣2). Uitwerken van (A+H)k en sorteren op het aantal H-factoren: het lineaire deel is ∑i=0k−1AiHAk−1−i, en de termen met ≥2 factoren H zijn begrensd door (2k)-veel producten van norm≤∣∣∣A∣∣∣k−2∣∣∣H∣∣∣2-schaal: O(∣∣∣H∣∣∣2). Men kan de som niet tot kAk−1H inkorten omdat H en A niet hoeven te commuten — de som is de correcte niet-commutatieve afgeleide.
dΦA(H)=−A−1HA−1, lineair in H. Voor n=1: d(1/a)(h)=−h/a2, de bekende afgeleide.
7. Kettingregel langs de kromme: (A(t)−1)′=dΦA(t)(A′(t))=−A(t)−1A′(t)A(t)−1. In A(t)=I+tB, t=0: (I+tB)−1=I−tB+O(t2).
8. Door vraag 5 en cyclische invariantie van het spoor:
dfA(H)=tr(i=0∑k−1AiHAk−1−i)=ktr(Ak−1H).
Tegen het Frobenius-product eist dfA(H)=tr((∇f)TH) dat (∇f)T=kAk−1: ∇f(A)=k(Ak−1)T.
9.f(A+H)−f(A)=2tr(ATH)+tr(HTH): de differentiaal is H↦2tr(ATH)=2⟨A,H⟩, dus ∇f(A)=2A; de tweede-orde term is precies ∥H∥F2: de Hessematrice is tweemaal de identieke kwadratische vorm, positief definiet en constant, dus ∥⋅∥F2 is strikt convex (de Taylorformule is hier exact).
10. Door multilineaire in de kolommen, det(I+H)=∑S⊆{1,…,n}det(MS) waar MS kolom hj heeft voor j∈S en ej anders. S=∅ geeft 1; S={j} geeft de determinant van I met kolom j vervangen door hj, namelijk haar j-de entry hjj, sommen tot trH; elke term met ∣S∣≥2 is een determinant met minstens twee kolommen van grootte O(∣∣∣H∣∣∣), dus O(∣∣∣H∣∣∣2) (multilinaire afbeeldingen op een eindigdimensionale ruimte zijn begrensd), en er zijn eindig veel. Dus det(I+H)=1+trH+O(∣∣∣H∣∣∣2): d(det)I=tr.
11.det(A+H)=detAdet(I+A−1H)=detA(1+tr(A−1H)+O(∣∣∣H∣∣∣2)): de differentiaal is H↦det(A)tr(A−1H).
12. Laplace-ontwikkeling langs rij i: detA=∑jaijCij, en de cofactoren Cij betrekken rij i niet: ∂aij∂det=Cij. Dus
Voor inverteerbare A herwint adjA=det(A)A−1 vraag 11. Langs een C1-kromme leest de kettingregel (detA(t))′=tr(adj(A(t))A′(t)): de formule van Jacobi.
13. Met A′=MA en adj(A)A=det(A)I:
(detA)′=tr(adj(A)MA)=tr(Aadj(A)M)=detAtrM
(cycliciteit; AadjA=det(A)I eveneens). De scalaire lineaire DV y′=tr(M(t))y heeft de unieke oplossing y(t)=y(0)exp(∫0ttrM) (Jaar 1): de formule van Liouville.
14. In A∈SLn(R), neem H=n1A: d(det)A(n1A)=n1det(A)tr(A−1A)=n1⋅1⋅n=1=0: de differentiaal is een niet-nul lineaire vorm, dus surjectief op R in elk punt van de niveauverzameling: SLn(R) is een gladde niveauverzameling (van dimensie n2−1).
15.∑kAk/k!≤∑∣∣∣A∣∣∣k/k!=e∣∣∣A∣∣∣: absolute convergentie (volledigheidsargument van vraag 2), met normale convergentie op elke bal ∣∣∣A∣∣∣≤R (grens Rk/k! onafhankelijk van A). Elke partiële som is continu (polynoom); de uniforme limiet op ballen is continu: A↦eA is continu, met eA≤e∣∣∣A∣∣∣.
de binomiaalidentiteit vereist AB=BA. Met B=−A: eAe−A=e0=I: elke eA∈GLn(R).
17. De reeks ∑tkAk/k! en haar afgeleide reeks ∑tk−1Ak/(k−1)!=A∑tk−1Ak−1/(k−1)! convergeren normaal op elk segment ∣t∣≤T (grenzen Tk∣∣∣A∣∣∣k/k!): de differentiatiestelling voor reeksen (Stelling 10.11, entrygewijs toegepast) geeft dtdetA=AetA; A rechts factoriseren geeft etAA. Itereren: C∞.
18.A(t)=etA voldoet aan A′(t)=AA(t): de formule van Liouville (vraag 13) met constante M=A geeft detetA=ettrA (waarde 1 in t=0); in t=1, deteA=etrA. Controles: n=1 is de exponentiaal zelf; een nilpotente A heeft trA=0 en eA unipotent van determinant1; trA=0 geeft deteA=1: de spoorloze matrices worden naar SLn(R) gestuurd.
19.eH−I−H=∑k≥2Hk/k!, van norm≤∣∣∣H∣∣∣2e∣∣∣H∣∣∣=O(∣∣∣H∣∣∣2): d(exp)0=id, inverteerbaar. Bovendien is exp van klasse C1: door vraag 5 is de differentiaalkandidaat H↦∑kk!1∑iAiHAk−1−i een normaal convergerende reeks van lineaire afbeeldingen die continu van A afhangen (grenzen ∣∣∣A∣∣∣k−1/(k−1)! op ballen), dus de partiële afgeleiden bestaan en zijn continu (Stelling 15.2 en de reeks-overdrachtsstelling). De stelling van de inverse functie (Stelling 15.14) past in 0: exp is een C1-diffeomorfisme van een omgeving van 0 op een omgeving van I — matrices nabij I hebben logaritmen.
20. Voor symmetrische S=PDPT (spectraalstelling): eS=PeDPT is symmetrisch met eigenwaardeneλi>0: positief definiet. Surjectiviteit: een positief definiete Q=Pdiag(μi)PT (μi>0) is eS voor S=Pdiag(lnμi)PT. Injectiviteit: eS bepaalt haar eigenruimten, precies die van S (op elke eigenruimte van S voor λ werkt eS als eλ; verschillende λ geven verschillende eλ), en ln van de eigenwaarden neemt S terug. Dus exp is een bijectie van symmetrische matrices op positief definiete.
21.F(A+H)=ATA+ATH+HTA+HTH: dFA(H)=ATH+HTA (waarden in Sn; fout O(∣∣∣H∣∣∣2)). In A∈On en voor S∈Sn geeft de keuze H=21AS
AT⋅21AS+21(AS)TA=21S+21ST=S:
surjectief. On=F−1(I) is een gladde niveauverzameling van dimensie n2−dimSn=2n(n−1).
22. Differentiëren van A(t)TA(t)=I in t=0 (met A(0)=I): A′(0)T+A′(0)=0: antisymmetrisch. Omgekeerd, voor KT=−K: (etK)TetK=etKTetK=e−tKetK=I (transponeer de reeks termgewijs; de exponenten commuten): de kromme blijft in On, met snelheid K in t=0. Raakruimte in I= de antisymmetrische matrices, van de verwachte dimensie 2n(n−1).
23.trK=0 voor antisymmetrische K, dus deteK=e0=1 (vraag 18): de exponentiaal landt in SOn. Voor n=2: J2=−I, dus J2m=(−1)mI, J2m+1=(−1)mJ, en
de rotatie over θ: de sinus- en cosinusreeksen leven binnen de matrixexponentiaal.
24. Voor inverteerbare A,B: adj(AB)=det(AB)(AB)−1=det(B)det(A)B−1A−1=adj(B)adj(A). Beide zijden van de identiteit zijn polynomiale (dus continue) afbeeldingen van de entries van (A,B); ze stemmen overeen op de dichte deelverzameling GLn×GLn van Mn×Mn (vraag 3: benader elke factor), dus stemmen ze overal overeen.
25. (i) Deel I liep op volledigheid van eindigdimensionale genormeerde ruimten (absoluut convergente reeksen convergeren), Deel IV op hetzelfde plus de spectraalstelling voor vraag 20, Deel V’s lokale logaritme op de stelling van de inverse functie. (ii) Het hoofdstuk over differentiaalvergelijkingen leunt op de formule van Liouville (vraag 13) voor de Wronskiaan van lineaire stelsels, en op dtdetA=AetA (vraag 17), de uitspraak dat etAX′=AX oplost. (iii) d(det)I=tr zegt dat het spoor de infinitesimale volumesnelheid is, en deteA=etrA integreert die uitspraak globaal. (iv) Het volume Jaar 3 noemt de structuren: On en SLn(R) zijn Liegroepen, hun raakruimten in I (antisymmetrische en spoorloze matrices) zijn Liealgebra’s, en exp is de brug ertussen.