Overfitting

Come fai ad applicare un teorema relativo alla logica formale in ambito biologico?

Qui fa un accenno all'argomento: Kurt Gödel - Wikipedia, the free encyclopedia

Douglas Hofstadter wrote a popular book in 1979 called Gödel, Escher, Bach to celebrate the work and ideas of Gödel, along with those of artist M. C. Escher and composer Johann Sebastian Bach. The book partly explores the ramifications of the fact that Gödel's incompleteness theorem can be applied to any Turing-complete computational system, which may include the human brain.

Disclaimer: non ne so niente di più. A seguito di un po' di nostalgia scolastica :), sono andato a rileggermi la Wikipedia su Gödel e ho trovato quel paragrafo.
 
Qui fa un accenno all'argomento: Kurt Gödel - Wikipedia, the free encyclopedia

Douglas Hofstadter wrote a popular book in 1979 called Gödel, Escher, Bach to celebrate the work and ideas of Gödel, along with those of artist M. C. Escher and composer Johann Sebastian Bach. The book partly explores the ramifications of the fact that Gödel's incompleteness theorem can be applied to any Turing-complete computational system, which may include the human brain.

Disclaimer: non ne so niente di più. A seguito di un po' di nostalgia scolastica :), sono andato a rileggermi la Wikipedia su Gödel e ho trovato quel paragrafo.
:up:

Looked at this way, Gödel's proof suggests – though by no means does it prove! – that there could be some high-level way of viewing the mind/brain, involving concepts which do not appear on lower levels, and that this level might have explanatory power that does not exist – not even in principle – on lower levels. It would mean that some facts could be explained on the high level quite easily, but not on lower levels at all. No matter how long and cumbersome a low-level statement were made, it would not explain the phenomena in question. It is analogous to the fact that, if you make derivation after derivation in Peano arithmetic, no matter how long and cumbersome you make them, you will never come up with one for G – despite the fact that on a higher level, you can see that the Gödel sentence is true.
What might such high-level concepts be? It has been proposed for eons, by various holistically or "soulistically" inclined scientists and humanists that consciousness is a phenomenon that escapes explanation in terms of brain components; so here is a candidate at least. There is also the ever-puzzling notion of free will. So perhaps these qualities could be "emergent" in the sense of requiring explanations which cannot be furnished by the physiology alone (Gödel, Escher, Bach, p. 708).
 
Gödel & Hofstadter

http://users.encs.concordia.ca/~grogono/
Peter Grogono says:
August 25, 2012 at 3:26 pm
I think it is important to take into account the way in which Godel’s proof actually works. He considers a particular logical system and constructs a special statement that is not provable within that system. His result is important because it is general: a similar proof can be given for any logic that can encode its own formulas (e.g., using arithmetic).
Douglas Hofstadter gives a nice analogy in his book “Godel, Escher, Bach”. One person tries to build a perfect record-player and another person tries to construct disks that it cannot play. (When the book was written, most readers were familiar with such machines.) Give a particular record-player P, for example, you might find frequencies at which it resonates and record exactly those frequencies on a disk, D. When P plays D, it shakes itself to pieces. The point is to distinguish between the claims “this disk cannot be played” and “for each player P of sufficient quality, we can create a disk D that it cannot play”. There is a dependency between D and P.
Here’s my answer as to whether mathematicians (or even ordinary people) have Godelian limitations. Imagine a kind of super MRI machine that can monitor the state of each one of your brain cells and thus allow you to inspect your own brain. There would probably be statements of the form “Cell 12345 is not firing now” which you could see to be true but could not say, because saying them would make them false. This is how Godel’s proof works: it uses the system to operate against itself.
In Computer Science, the “Halting Theorem” is a result similar to Godelian incompleteness. (Many people actually consider HT and GI to be the same.) It says that there is no algorithm (or, equivalently, computer program) that can decide whether a given program terminates (“halts”) in a finite time. Again, it is proved by carefully constructing a program to defeat the algorithm. Here’s an informal description of the proof:
Let H be a program that decides termination. Specifically, H(P) yields “true” if program P halts and “false” otherwise. Now consider this program:
Q = if H(Q) then loop for ever else halt
From this program, and assuming H works as advertised, we conclude that Q terminates if and only if it doesn’t terminate. Since this is a contradiction, we infer that there is no such program H. Once again, the proof depends on a very special program, one designed to defeat the proposed algorithm.
Godel demonstrated the existence of just one unprovable statement for a given system. In fact, there will be many, but the others are harder to find. The work of Chaitin and others suggests that, in some sense, most statements are unprovable. The success of mathematics, however, suggests that there are enough interesting and provable statements to keep us going for a while.


Q: Does Gödel?s Incompleteness Theorem imply that it?s impossible to be logical? | Ask a Mathematician / Ask a Physicist
Mi è piaciuto questo commento (trovato per caso), non solo semplifica sufficientemente la questione tanto da renderla comprensibile anche ai neofiti quali il sottoscritto, ma mi trova anche concorde sulle conclusioni (detto dall'alto della mia notevole inesperienza in materia ;))
 
Solo Il Conte Kurt Kamikaze Pedro!!! :-x :-x :-x

Oh oh, non avevo mica capito che Kurt fosse in onore del grande Gödel :bow::bow::bow: (e non avevo osato chiedere se c'entrasse invece Kurt Cobain :lol:)

Tra l'altro mi aveva sempre affascinato anche la storia della moglie, molto più mondana di lui, che ha dato il suo contributo alla storia del pensiero umano semplicemente badando a quel genio bizzarro.

Troppa grazia, davvero, non son degno, al limite potrò finire per assomigliare al povero Gödel degli ultimi anni, distrutto dalla paranoia per non essere riuscito a comprendere l'essenza del gamma ;)
 
Come fai ad applicare un teorema relativo alla logica formale in ambito biologico?

Giusto per rientrare precisamente in topic (anche se con questo oggetto è impossibile uscirne), pensa che io quel teorema l'ho utilizzato anche per dimostrare che econometricamente è impossibile misurare l'overfitting (quando i nostri geni dell'econometria cercavano disperatamente di farlo :rolleyes:)!!!

E questa volta tutta farina mia!!! :-o

P.S. In realtà parallelamente ho presentato anche una semplice dimostrazione logica per assurdo, per i più semplici di spirito! :D
 
Giusto per rientrare precisamente in topic (anche se con questo oggetto è impossibile uscirne), pensa che io quel teorema l'ho utilizzato anche per dimostrare che econometricamente è impossibile misurare l'overfitting (quando i nostri geni dell'econometria cercavano disperatamente di farlo :rolleyes:)!!!

E questa volta tutta farina mia!!! :-o

P.S. In realtà parallelamente ho presentato anche una semplice dimostrazione logica per assurdo, per i più semplici di spirito! :D

Grande.
Io sono semplice di spirito, quindi partirei con il leggere la dimostrazione per assurdo.
Però mi piacerebbe anche quella gödereccia.
Quando ne hai voglia fammi un fischio (o lanciami 2 link), che io porto i pop corn. ;)

dog-popcorn.jpg
 
Grande.
Io sono semplice di spirito, quindi partirei con il leggere la dimostrazione per assurdo.

Semplicissima: se l'econometria fosse in grado di misurare l'overfitting non avrebbe bisogno di farlo.

Ti anticipo: tipicamente a questa dimostrazione mi si risponde parlando di stime, senza capire, altrettanto tipicamente, che vale la stessa semplice logica per assurdo.

Però mi piacerebbe anche quella gödereccia.

Per quella c'è bisogna prima di dimostrare di aver capito cos'è il rischio!!! :-o :prr:

Scherzo; ti do un indizio: nessuno strumento di misura è in grado di stimare da solo la propria precisione, ovvero di auto attribuirsi i propri intervalli di incertezza :)
 
Semplicissima: se l'econometria fosse in grado di misurare l'overfitting non avrebbe bisogno di farlo.

Ti anticipo: tipicamente a questa dimostrazione mi si risponde parlando di stime, senza capire, altrettanto tipicamente, che vale la stessa semplice logica per assurdo.



Per quella c'è bisogna prima di dimostrare di aver capito cos'è il rischio!!! :-o :prr:

Scherzo; ti do un indizio: nessuno strumento di misura è in grado di stimare da solo la propria precisione, ovvero di auto attribuirsi i propri intervalli di incertezza :)

Non ti seguo, se misuro la scrivania con un metro estensibile dovrei essere per lo meno in grado di determinare l'errore accidentale senza bisogno di altre strumentazioni.
 
E' perché non sei ingegnere! :prr:



Se e solo se ti fidi del metro! :D

Il problema è che il metro non può validare da solo se stesso, ne tantomeno auto stimare il proprio errore di misura.

Per questo ho parlato di errore accidentale.
Naturalmente può essere che il mio metro sia affetto (anche) da un errore sistematico (p.e. potrebbe essere lungo 101 cm), ma in tal caso basta usare un metro più preciso.
Se invece un metro più preciso non esistesse, allora potrei benissimo ridefinire "metro" la misura del mio strumento, eliminando in questo modo l'errore sistematico.
 
Ultima modifica:

Users who are viewing this thread

Back
Alto