Pret met Google Books Ngram

Google is al geruime tijd bezig elk boek in de wereld te indexeren. Zo nu en dan kan je daar ook leuke dingen mee doen. Zo lanceerde Google vorige week Google Ngram viewer. Een simpel tooltje waarmee je kunt zoeken hoe vaak een bepaald woord of zinsnede voorkomt in alle boeken van de bibliotheek van Google. Dat levert soms verrassende resultaten op. Wat voorbeelden:

* Draken zijn altijd cool geweest in fictie en alleen robots zijn daar ooit dichtbij gekomen.
* Sex,drugs en rock & roll in het Amerikaanse gedrukte hebben duidelijk impact gemaakt, ook in fictie, maar bij de Britten dan weer wat minder.
* Religie is minder belangrijk dan sex tegenwoordig.
* Elvis en The Beatles zijn hooguit één jaar groter dan Jezus geweest (1810 WTF?).
* Fuck doet het al jaren goed (en voor 1820 mocht je de S en F nog uitwisselen)
* Technologie doet het ook goed.

Oh ja, en er zit natuurlijk een Easter Egg in.

gepost door B-sting op 22-12-2010 om 10:46 | 52 reacties | 9 |

Share|

De easter egg is (natuurlijk) niet zichtbaar voor mensen met een Nederlands IP. http://twitpic.com/3i66c8/full

lulde Swaptor, bestaat ook uit ruimteschepen

op 21-12-2010 21:59:39 | # | 0 |

Fout, fout fout.

lulde Draken.

op 21-12-2010 23:37:26 | # | 0 |

Wb. fuck: je ziet een duidelijke en vrij plotse stijging rond 1960, die afvlakt en een kort dalletje toont rond 1983, maar daarna als een gek doorstijgt.

Ik denk dat we hier getuige zijn van de sexuele revolutie en de hippietijd, toen gebruik in de zin van 'geslachtsgemeenschap hebben' aanvaardbaar werd. Juist toen het spannende eraf was, kwam de videoclip in '82 en werd het woord een betekenisloze krachtterm.

/huistuinkeukensocioloog

lulde Draken.

op 21-12-2010 23:44:29 | # | 1 |

Cool! Schiet me hierdoor te binnen:
ook een leuke feature is de "reading level index" van een website die aangeeft wat het 'leesniveau' van de betreffende site is ("For example, if you are in an introductory course on biology, you may want to select basic or intermediate results for your specific query.")

De erectolo's hebben 0% advanced, 62% intermediate en 37% basic

en - fucking hell - de verguisde _televaag komt weg met 0% basic, 80% intermediate en 20% advanced. GVD.

lulde marjolein

op 21-12-2010 23:46:15 | # | 1 |

Dat kan nooit kloppen Marjolein. Misschien omdat de site in het Nederlands is, maar de zoekmachine in het Engels denkt? Daarover: de Volkskrant

lulde B-sting

op 21-12-2010 23:51:04 | # | 0 |

Ja, nee, dat kompt omdat jullie henk en ingrid de hele tijd naar de telegrof zitten te linken.

lulde Draken.

op 22-12-2010 00:12:07 | # | 0 |

Ah, kijk. Religie nadert (asymptotisch?) naar fictie!. Sinds 1920 zit religion under de science.

Ook opmerkelijk is de trend voor gay. "De ouden" waren er niet vies van (dat wisten we al) maar nu zie je het ook. En rond 1990 ineens een heel scherpe stijging na een anderhalve eeuw dalende trend, zeg maar.

Oeh, en wat ook leuk is ... ze hebben de ruwe datasets online staan, kun je je eigen "research" er mee doen.
Ik moet zeggen dat de N-grams wel heel veel lijken op wat MegaHAL (zie Henk/Ingrid bot-topic) doet. Wachten totdat google ook alle .nl boeken heeft gescand, dan kunnen die datasets zo aan plasbot enzo gevoerd worden.

lulde marjolein

op 22-12-2010 01:41:55 | # | 1 |

Volgens mij is de ontwikkeling van "gay" te verklaren door de veranderende betekenis. Tot de jaren '60 betekende het "vrolijk" (toen de Flintstones zongen "we'll have a gay old time" was dat niet omdat ze bedoelden dat ze elkaar in de darkroom zouden gaan palen) en pas daarna is het "homo" gaan betekenen.

lulde QStel

op 22-12-2010 07:55:49 | # | 2 |

Over Elvis, Beatles en je zus. Zoekterm is hoofdlettergevoelig, en dus krijg je in 1810 hits met beatles (/seth) als zijnde van die beestjes.
Met hoofdletters verhoudt Jezus tot Elvis en Beatles als Sha-Baz tot de rest.

lulde koei

op 22-12-2010 09:05:46 | # | 0 |

OMGWTF Sha-Baz scoort van de schaal af?

lulde Die_kale

op 22-12-2010 09:19:42 | # | 0 |

@Die_kale: Dat is neerwaarts van de schaal af, jij blasfemist!

lulde tapmarin

op 22-12-2010 09:31:28 | # | 0 |

Ah, de goegels kunnen gewoon NIET spellen na 2000 scoort Sha-Baz als een raket... de asymptoot is wel heel steil ?

lulde Die_kale

op 22-12-2010 10:13:32 | # | 0 |

Bedankt voor de datasets, marjolein.

lulde Wildplasser, beroepsweigeraar

op 22-12-2010 10:59:50 | # | 0 |

'apartheid' bestond voor 1950 niet. De trend in 'apartheid' lijkt verdacht veel op die van 'drugs'.

Trouwens, de 'nederlandse identiteit' bestaat inderdaad niet.

lulde Loulap

op 22-12-2010 11:12:16 | # | 0 |

Ik dacht dat de bevolking sterk toenam door de industrialisatie, maar ik zie nu dat het gewoon toenam omdat de seks toenam.

lulde behanger

op 22-12-2010 11:14:28 | # | 0 |

http://i.imgur.com/eFvKM.png hahaha, zelfpijpers!

lulde behanger

op 22-12-2010 11:27:47 | # | 0 |

Sinds Retecool: !!!!!! OMG het is erger dan we dachten!

lulde behanger

op 22-12-2010 11:30:53 | # | 2 |

boeiend: Terrorist

http://ngrams.googlelabs.com/graph?content=terrorist&year_start=1800&year_end=2008&corpus=5&smoothing=0

lulde Rebel, 1400 Gyros

op 22-12-2010 11:31:48 | # | 1 |

"Zoekterm is hoofdlettergevoelig" dat is stom, want dan doet het er toe of een woord aan het begin van een zin stond.

lulde behanger

op 22-12-2010 11:31:49 | # | 0 |

Zie je wel, zoveel stelde het allemaal niet voor...

lulde Hayo Beckman

op 22-12-2010 11:34:31 | # | 0 |

ha! reet is geboren in 1881! http://ngrams.googlelabs.com/graph?content=reet&year_start=1800&year_end=2008&corpus=0&smoothing=3

lulde teringbibber

op 22-12-2010 11:34:36 | # | 0 |

@behanger De kans dat een zelfstandig naamwoord aan het begin van een zin staat word niet groter of kleiner met de tijd zou je denken. Ook in de vergelijking tussen twee zelfstandig naamwoorden is de kans bij beide gelijk dat hij vooraan een zin kan staan.

lulde Rebel, 1400 Gyros

op 22-12-2010 11:36:31 | # | 0 |

Evolutie bestaat niet!

lulde behanger

op 22-12-2010 11:36:59 | # | 0 |

en: moet je kijken wat een invloed het WK op schrijvers heeft!
http://ngrams.googlelabs.com/graph?content=netherlands&year_start=1980&year_end=2008&corpus=0&smoothing=0

lulde teringbibber

op 22-12-2010 11:39:23 | # | 0 |

het is zel de hoogste piek allertijden, heer Bibber.
http://ngrams.googlelabs.com/graph?content=netherlands&year_start=1776&year_end=2008&corpus=0&smoothing=0

lulde behanger

op 22-12-2010 11:43:32 | # | 0 |

@Rebelse Dwaas:
"De kans dat een zelfstandig naamwoord aan het begin van een zin staat word niet groter of kleiner met de tijd zou je denken."
Niet in 10 jaar, wel in 100.

"Ook in de vergelijking tussen twee zelfstandig naamwoorden is de kans bij beide gelijk dat hij vooraan een zin kan staan."
klopt, effecten zullen voor beide termen gelijk zijn.

lulde behanger

op 22-12-2010 11:46:52 | # | 0 |

Tijd voor een Godwin!

lulde B-sting

op 22-12-2010 11:51:01 | # | 0 |

@Draken: Bitch en shit hebben (soort van) dezelfde curve als fuck.

lulde pedigree

op 22-12-2010 11:51:44 | # | 0 |

Het verschil is duidelijk

lulde Apenkoning

op 22-12-2010 12:06:54 | # | 1 |

14 is groter dan 42!

lulde marjolein

op 22-12-2010 12:24:01 | # | 2 |

En ik weet niet of 'ie bij jullie dat ook doet:
Ik zocht op pirates,ninjas maar dan blijft hij er automagisch "global temperature" bij doen.
Ligt dat nu aan mij? Is dit een bug? Een feature? Easter-egg?

lulde marjolein

op 22-12-2010 12:25:17 | # | 1 |

Na de renaissance is nooit meer echt wat het was geworden met mij

lulde Frodooh

op 22-12-2010 12:26:21 | # | 0 |

in de litteratuur wordt duidelijk niet geneukt

lulde Frodooh

op 22-12-2010 12:30:09 | # | 0 |

schopt engelse omhoog

lulde Frodooh

op 22-12-2010 12:30:56 | # | 0 |

Dus ergens in 1970 dacht iemand he! wacht eens even!

lulde Frodooh

op 22-12-2010 12:36:52 | # | 0 |

Als je de smoothing op fistfucking uit zet valt het best mee. In de jaren '80 was het een jaartje hot blijkbaar.

Zei ik smoothing en fistfucking in één zin? Ja, dat zei ik.

lulde B-sting

op 22-12-2010 12:40:53 | # | 1 |

De duivel regeerde vroeger boven god.

lulde Kret-209

op 22-12-2010 12:44:35 | # | 0 |

Je zou verwachten dat die curve pas na 1940 drastisch zou dalen http://ngrams.googlelabs.com/graph?content=jew&year_start=1800&year_end=2000&corpus=0&smoothing=3 /godwin

lulde Kret-209

op 22-12-2010 12:45:53 | # | 0 |

Laten we wel het perspectief een beetje bewaren :)

http://ngrams.googlelabs.com/graph?content=jesus%2Cbeatles%2Cfuck%2Csuck%2Cass%2Csatan&year_start=1800&year_end=2008&corpus=0&smoothing=1

lulde Nisses

op 22-12-2010 12:46:17 | # | 0 |

http://ngrams.googlelabs.com/graph?content=devil%2C+god&year_start=1800&year_end=2000&corpus=0&smoothing=3

god en devil

lulde Kret-209

op 22-12-2010 12:46:28 | # | 0 |

Dit is vreemd??

Zoek even op "internet".. Wat heb ik gemist begin vorige eeuw?

lulde Want je Weet

op 22-12-2010 13:41:35 | # | 2 |

Iemand had ooit een hippe naam voor 'telefooncentrale' bedacht?

lulde B-sting

op 22-12-2010 15:27:07 | # | 0 |

En wat heeft Microsoft begin vorige eeuw daar mee te maken???

lulde B-sting

op 22-12-2010 15:30:01 | # | 0 |

En Digital en Dell zitten ook in het complot!

ZOUDEN DEZE PARTIJEN EEN TIJDMACHINE GEBOUWD HEBBEN BEGIN JAREN 90?
[/aluhoedje]

lulde B-sting

op 22-12-2010 15:34:16 | # | 0 |

Deze heeft het complot al in 1800 ontworpen:

http://ngrams.googlelabs.com/graph?content=hitler&year_start=1800&year_end=2008&corpus=0&smoothing=3

lulde Nick Changez -

op 22-12-2010 18:34:15 | # | 0 |

Ah, beschaving http://ngrams.googlelabs.com/graph?content=porn&year_start=1800&year_end=2008&corpus=5&smoothing=3

lulde N1

op 22-12-2010 18:45:47 | # | 0 |

Zo te zien waren piraten in 1839 hotter dan draken hoor, en in de 80's hadden ze last van peak-robots.

lulde Weirdoinventor heeft zin om campagne te voeren, maar voor wie...

op 23-12-2010 08:35:19 | # | 0 |

Ah, hier, ze doen zelfs peilingen.

lulde Weirdoinventor heeft zin om campagne te voeren, maar voor wie...

op 23-12-2010 08:47:05 | # | 0 |

Nieuw onderzoek (en dicky): draken geen match voor ...

lulde Weirdoinventor heeft zin om campagne te voeren, maar voor wie...

op 23-12-2010 08:54:34 | # | 0 |

Haha...

lulde Weirdoinventor heeft zin om campagne te voeren, maar voor wie...

op 23-12-2010 08:58:16 | # | 0 |

En @ de internet conspiracy: gaat het misschien om een boek uit '05?

lulde Weirdoinventor heeft zin om campagne te voeren, maar voor wie...

op 23-12-2010 13:39:20 | # | 0 |

@Internet before 1950, daar hebben ze bij teh googles zelf ook al aan gedacht:

Why does the word "Internet" occur before 1950?
~~Time traveling software engineers!~~
Most of those are OCR errors; we do a good job at filtering out books with low OCR quality scores, but some errors do slip through.

lulde marjolein

op 23-12-2010 13:53:10 | # | 0 |

Om te kunnen reageren moet je ingelogd zijn.

Inloggen en Registreren

Nu op Retecool Goldmember

Wrong Cops

Mortuarium Everest

WAT zegt u over orka's?

Zo, en dan nu even 40 miljard bij elkaar sprokkelen.

Stelling van de dag

15-05-2012: Volkert van der Graaf moet gewoon vrijkomen na twee derde van zijn straf, 68 reactie(s), voor, tegen.

09-05-2012: Maar wat vindt U dan?, 43 reactie(s), voor, tegen.

18-04-2012: Oproep tot boycot door Tweede Kamer van TV programma is prima, 29 reactie(s), voor, tegen.

17-04-2012: Olifanten doodschieten is prima, 39 reactie(s), voor, tegen.

28-02-2012: Journalistiek is oorlog?, 107 reactie(s), voor, tegen.

Nu in het forum

Welkom in Rotterdam!

Populistisch taalgebruik en insluipers

Afschaffen onbelaste reiskostenvergoeding.

Spamhoer wil aandacht? Spamhoer krijgt aandacht.

Pret met Google Books Ngram