dove è una qualunque funzione derivabile due volte, è un numero "grande" e gli estremi d'integrazione e possono essere anche infiniti. Questa tecnica fu per la prima volta presentata nell'articolo "Mémoir sur la probabilité des causes par évènemens" di Laplace del 1774.
Si assuma che la funzione abbia un unico massimo globale in . Allora, il valore sarà più grande degli altri valori di . Se si moltiplica questa funzione per un numero grande , il rapporto fra e rimane lo stesso (poiché , ma crescerà esponenzialmente nella funzione (vedere figura). Perciò solo punti in un intorno di daranno significativi contributi all'integrale della funzione, che può essere stimato.
Per descrivere e motivare il metodo, sono necessarie alcune ipotesi. Si assuma che non sia un estremo di integrazione, che il valore di non possa essere molto vicino a a meno che sia vicino a e che la derivata seconda .
Poiché ha un massimo globale in , e siccome non è un estremo, esso è un punto stazionario, perciò la derivata di in si annulla. Dunque, la funzione può essere approssimata al secondo ordine come
per vicino a (si ricordi che la derivata seconda nel punto di massimo è negativa). Le ipotesi assicurano la precisione dell'approssimazione
(vedere la figura sulla destra). Quest'ultimo integrale sarebbe un integrale di Gauss se i limiti di integrazione andassero da a (che può essere assunto dato che l'esponenziale decade molto velocemente lontano da ), e pertanto può essere calcolato. Si trova così che
Sia . Per la continuità di esiste tale che se allora . Dal teorema di Taylor, per ogni , .
Quindi si ha il seguente minorante:
dove l'ultima uguaglianza è stata ottenuta dal cambio di variabili . Si ricordi che e quindi è possibile estrarne la radice quadrata.
Se si dividono entrambi i membri della precedente disuguaglianza per e se ne prende il limite si ottiene:
Poiché è vero per un arbitrario , si trova il minorante:
Da notare che la dimostrazione funziona anche quando oppure (o entrambi).
Maggiorante:
La dimostrazione del maggiorante è simile a quella del minorante ma ci sono alcuni inconvenienti. Di nuovo si inizia prendendo un ma allo scopo di far funzionare la dimostrazione serve che sia piccolo abbastanza affinché . Quindi, come sopra, dalla continuità di e il teorema di Taylor si trova tale che se , allora . Infine per ipotesi (assumendo finiti) esiste un tale che se , allora .
Si può ora calcolare il seguente maggiorante:
Se si dividono entrambi i membri della disuguaglianza per e se ne prende il limite si ottiene:
Poiché è arbitrario si ha il maggiorante:
E combinandolo con il risultato ricavato prima si dimostra l'enunciato.
Da notare che la dimostrazione precedente fallisce quando oppure (o entrambi). Per trattare questi casi, c'è bisogno di ulteriori ipotesi. Un'assunzione sufficiente (e non necessaria) è che per , l'integrale sia finito, e che il numero come sopra esista (si osservi che questa deve essere un'ipotesi solo nel caso di o infinito). La dimostrazione procede altrimenti come prima, ma gli integrali
devono essere stimati superiormente da
invece di come per il minorante, così che quando si divide per , si ottiene per questo termine
il cui limite per è . Il resto della dimostrazione (l'analisi dei termini dominanti) procede come sopra.
La condizione data nel caso di intervallo infinito è, come detto precedentemente, sufficiente ma non necessaria. Tuttavia, la condizione è soddisfatta nella maggior parte delle applicazioni: la condizione semplicemente afferma che l'integrale che si sta studiando sia ben definito (non infinito) e che il massimo della funzione in sia un "vero" massimo (il numero deve esistere). Non c'è inoltre bisogno di richiedere che l'integrale sia finito per ma è sufficiente che lo sia per un qualche .
Prima di tutto, si ponga senza perdita di generalità che il massimo globale si trovi in . Perciò, quello che si vuole è l'errore relativo come mostrato sotto
dove . Quindi, posto e , si ottiene
poiché . Ora si deve trovare un maggiorante.
Grazie a , si può separare l'integrazione in 5 parti di 3 differenti tipi: , e , rispettivamente. Pertanto,
dove e sono simili, quindi si calcolerà solo , e analogamente per e .
Per , dopo aver rinominato , si ha
Questo significa che fintanto che è abbastanza grande, esso tenderà a zero.
Per , si ricava
dove
e dovrebbe avere lo stesso segno di nella regione. Si scelga come la tangente in , cioè (che è mostrata in figura).
Dalla figura si può osservare che quando o diventa piccolo, la regione che soddisfa la precedente disuguaglianza diventa sempre più grande. Dunque, se si vuole trovare una adatta a coprire l'intera nell'intervallo di , deve avere un estremo superiore. Inoltre, siccome l'integrale è semplice, si userà per stimare l'errore relativo dovuto a .
Usando lo sviluppo di Taylor, si ottiene
e
e si sostituisce nel calcolo di . Tuttavia, si trova che i resti dei due sviluppi sono entrambi inversamente proporzionali alla radice di , perciò si tralasceranno per rendere più elegante il calcolo.
In aggiunta, tenderà a zero quando diventa arbitrariamente grande, ma non si dimentichi che il limite superiore di deve essere considerato nel calcolo.
A proposito dell'integrazione vicino a , si può usare anche il teorema di Taylor per calcolarlo. Quando
e si trova che è inversamente proporzionale a . Infatti, avrà lo stesso comportamento quando è costante.
Infine, l'integrazione vicino al punto stazionario diventa piccola quando diventa grande, e le parti rimanenti tenderanno a zero fintanto che è abbastanza grande, ma quest'ultimo ha un estremo superiore dovuto alla condizione che la funzione è sempre maggiore di nella regione rimanente. Tuttavia, fino a che si trova un che soddisfa la condizione, l'estremo superiore di può essere scelto direttamente proporzionale a poiché è la tangente di in . Quindi, più grande è , più può essere grande .
Estensione del metodo di Laplace: la discesa del gradiente
Un'estensione del metodo di Laplace all'analisi complessa, insieme alla formula integrale di Cauchy, è usata per trovare un contorno di "discesa più ripida" per un (asintoticamente per grandi ) integrale equivalente, espresso come un integrale di linea. In particolare, se non esistono punti sulla retta reale in cui la derivata di si annulla, può essere necessario deformare in contorno di integrazione in uno ottimale, dove l'analisi discussa prima è possibile. Ancora l'idea principale è di ridurre, almeno in modo asintotico, il calcolo del dato integrale a uno più semplice e che quindi può essere valutato esplicitamente. Si veda il libro di Erdelyi (1956) per una semplice discussione (dove il metodo è chiamato "discesa del gradiente")
L'appropriata formulazione per il piano complesso è
per un percorso passante attraverso il punto di sella in . Da notare l'esplicita presenza di un segno meno ad indicare la direzione della derivata seconda: non se ne può prendere il modulo. Inoltre se la funzione integranda è meromorfa, si può dover aggiungere i residui corrispondenti ai poli attraversati durante la deformazione del contorno (vedere per esempio la sezione 3 dell'artico di Okounkov "Symmetric functions and random partitions").
A. Azevedo-Filho e R. Shachter, Laplace's Method Approximations for Probabilistic Inference in Belief Networks with Continuous Variables, in Mantaras R. (a cura di), Uncertainty in Artificial Intelligence, San Francisco, CA, Morgan Kaufmann, 1994.
S. Kamvissis, K. T.-R. McLaughlin e P. Miller, Semiclassical Soliton Ensembles for the Focusing Nonlinear Schrödinger Equation, in Annals of Mathematics Studies, vol. 154, Princeton University Press, 2003.
Laplace, P. S. (1774). Memoir on the probability of causes of events. Mémoires de Mathématique et de Physique, Tome Sixième. (English translation by S. M. Stigler 1986. Statist. Sci., 1(19):364–378).
Xiang-Sheng Wang e Roderick Wong, Discrete analogues of Laplace's approximation, in Asymptot. Anal., vol. 54, n. 3-4, 2007, pp. 165–180.