{
"cells": [
{
"attachments": {},
"cell_type": "markdown",
"metadata": {},
"source": [
"# Eksperimentelle tjenester"
]
},
{
"cell_type": "code",
"execution_count": 1,
"metadata": {},
"outputs": [],
"source": [
"from dhlab.future.corpus_conc_coll import Corpus, Concordance, Collocations, Frequencies"
]
},
{
"cell_type": "code",
"execution_count": 2,
"metadata": {},
"outputs": [
{
"data": {
"text/html": [
"
\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" dhlabid | \n",
" urn | \n",
" title | \n",
" authors | \n",
" oaiid | \n",
" sesamid | \n",
" isbn10 | \n",
" city | \n",
" timestamp | \n",
" year | \n",
" publisher | \n",
" langs | \n",
" subjects | \n",
" ddc | \n",
" genres | \n",
" literaryform | \n",
" doctype | \n",
" ocr_creator | \n",
" ocr_timestamp | \n",
"
\n",
" \n",
" \n",
" \n",
" 0 | \n",
" 100495998 | \n",
" URN:NBN:no-nb_digibok_2014061628001 | \n",
" Ulysses & Outinus Unus & Idem , Sive Disqvisit... | \n",
" Ramus , Jonas / Lynov , Ove / Bircherod , Jens... | \n",
" oai:nb.bibsys.no:990402670084702202 | \n",
" ae76cdc850ddfd619290b3e6dd860513 | \n",
" | \n",
" | \n",
" 17130101 | \n",
" 1713 | \n",
" Typis Ovidii Lynnovii | \n",
" lat | \n",
" Geografi / Historie / Oddysevs / Odin | \n",
" | \n",
" | \n",
" Faglitteratur | \n",
" digibok | \n",
" nb | \n",
" 20060101 | \n",
"
\n",
" \n",
" 1 | \n",
" 100327307 | \n",
" URN:NBN:no-nb_digibok_2017030348025 | \n",
" Regjeringsadvokat Johannes Bergh : 18. februar... | \n",
" Bergh , Johannes | \n",
" oai:nb.bibsys.no:999510918244702202 | \n",
" 41d4e1afe9f378fbc01a15582cff6c56 | \n",
" | \n",
" <S.l.> | \n",
" 19370101 | \n",
" 1937 | \n",
" | \n",
" nob | \n",
" | \n",
" | \n",
" | \n",
" Uklassifisert | \n",
" digibok | \n",
" nb | \n",
" 20060101 | \n",
"
\n",
" \n",
"
\n",
"
"
],
"text/plain": [
" dhlabid urn \\\n",
"0 100495998 URN:NBN:no-nb_digibok_2014061628001 \n",
"1 100327307 URN:NBN:no-nb_digibok_2017030348025 \n",
"\n",
" title \\\n",
"0 Ulysses & Outinus Unus & Idem , Sive Disqvisit... \n",
"1 Regjeringsadvokat Johannes Bergh : 18. februar... \n",
"\n",
" authors \\\n",
"0 Ramus , Jonas / Lynov , Ove / Bircherod , Jens... \n",
"1 Bergh , Johannes \n",
"\n",
" oaiid sesamid \\\n",
"0 oai:nb.bibsys.no:990402670084702202 ae76cdc850ddfd619290b3e6dd860513 \n",
"1 oai:nb.bibsys.no:999510918244702202 41d4e1afe9f378fbc01a15582cff6c56 \n",
"\n",
" isbn10 city timestamp year publisher langs \\\n",
"0 17130101 1713 Typis Ovidii Lynnovii lat \n",
"1 19370101 1937 nob \n",
"\n",
" subjects ddc genres literaryform doctype \\\n",
"0 Geografi / Historie / Oddysevs / Odin Faglitteratur digibok \n",
"1 Uklassifisert digibok \n",
"\n",
" ocr_creator ocr_timestamp \n",
"0 nb 20060101 \n",
"1 nb 20060101 "
]
},
"execution_count": 2,
"metadata": {},
"output_type": "execute_result"
}
],
"source": [
"c = Corpus.build(doctype=\"digibok\")\n",
"c.head(2)"
]
},
{
"cell_type": "code",
"execution_count": 3,
"metadata": {},
"outputs": [
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" Ut och leta växter ! : om bär och blommor i vår natur | \n",
" Nye utfordringer i klagesaksbehandlingen : fra et nordisk seminar på Lillehammer den 5. - 7 . Marts 1997 | \n",
" Erasmus Montanus , eller Rasmus Berg : Komedie i fem Akter | \n",
" Ulysses & Outinus Unus & Idem , Sive Disqvisitio Historica & Geographica , Qva Ex collatis inter se Odyssea Homeri & Edda Island . Homerizante , Outini fraudes deteguntur , ac , detracta larva in lucem protrahitur Ulysses | \n",
" De norske Livsforsikringsselskapers Korrespondansekursus for yrkesakkvisitører | \n",
" Det spirituelle og okkulte | \n",
" Regjeringsadvokat Johannes Bergh : 18. februar 1837 - 18. februar 1937 : utg. på 100-årsdagen 18. februar 1937 | \n",
" Drama i Russland | \n",
" Eksamensoppgaver i mekanikk ved universitetet i Oslo | \n",
" Ord om fred | \n",
"
\n",
" \n",
" \n",
" \n",
" . | \n",
" 662.0 | \n",
" 3318.0 | \n",
" 1387.0 | \n",
" 1673.0 | \n",
" 3459.0 | \n",
" 1780.0 | \n",
" 307.0 | \n",
" 2569.0 | \n",
" 440.0 | \n",
" 65.0 | \n",
"
\n",
" \n",
" , | \n",
" 347.0 | \n",
" 2059.0 | \n",
" 1222.0 | \n",
" 3120.0 | \n",
" 2705.0 | \n",
" 1493.0 | \n",
" 312.0 | \n",
" 1304.0 | \n",
" 222.0 | \n",
" 96.0 | \n",
"
\n",
" \n",
" och | \n",
" 293.0 | \n",
" 395.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
"
\n",
" \n",
" år | \n",
" 229.0 | \n",
" 341.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 289.0 | \n",
" 27.0 | \n",
" 21.0 | \n",
" 5.0 | \n",
" 0.0 | \n",
" 1.0 | \n",
"
\n",
" \n",
" du | \n",
" 227.0 | \n",
" 9.0 | \n",
" 85.0 | \n",
" 3.0 | \n",
" 0.0 | \n",
" 2.0 | \n",
" 3.0 | \n",
" 179.0 | \n",
" 0.0 | \n",
" 4.0 | \n",
"
\n",
" \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
" ... | \n",
"
\n",
" \n",
" NYE | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 3.0 | \n",
"
\n",
" \n",
" UKJENT | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 3.0 | \n",
"
\n",
" \n",
" WILLIAM | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 3.0 | \n",
"
\n",
" \n",
" GAMLE | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 6.0 | \n",
"
\n",
" \n",
" TESTAMENTET | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 0.0 | \n",
" 9.0 | \n",
"
\n",
" \n",
"
\n",
"
49061 rows × 10 columns
\n",
"
"
],
"text/plain": [
" Ut och leta växter ! : om bär och blommor i vår natur \\\n",
". 662.0 \n",
", 347.0 \n",
"och 293.0 \n",
"år 229.0 \n",
"du 227.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Nye utfordringer i klagesaksbehandlingen : fra et nordisk seminar på Lillehammer den 5. - 7 . Marts 1997 \\\n",
". 3318.0 \n",
", 2059.0 \n",
"och 395.0 \n",
"år 341.0 \n",
"du 9.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Erasmus Montanus , eller Rasmus Berg : Komedie i fem Akter \\\n",
". 1387.0 \n",
", 1222.0 \n",
"och 0.0 \n",
"år 0.0 \n",
"du 85.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Ulysses & Outinus Unus & Idem , Sive Disqvisitio Historica & Geographica , Qva Ex collatis inter se Odyssea Homeri & Edda Island . Homerizante , Outini fraudes deteguntur , ac , detracta larva in lucem protrahitur Ulysses \\\n",
". 1673.0 \n",
", 3120.0 \n",
"och 0.0 \n",
"år 0.0 \n",
"du 3.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" De norske Livsforsikringsselskapers Korrespondansekursus for yrkesakkvisitører \\\n",
". 3459.0 \n",
", 2705.0 \n",
"och 0.0 \n",
"år 289.0 \n",
"du 0.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Det spirituelle og okkulte \\\n",
". 1780.0 \n",
", 1493.0 \n",
"och 0.0 \n",
"år 27.0 \n",
"du 2.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Regjeringsadvokat Johannes Bergh : 18. februar 1837 - 18. februar 1937 : utg. på 100-årsdagen 18. februar 1937 \\\n",
". 307.0 \n",
", 312.0 \n",
"och 0.0 \n",
"år 21.0 \n",
"du 3.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Drama i Russland \\\n",
". 2569.0 \n",
", 1304.0 \n",
"och 0.0 \n",
"år 5.0 \n",
"du 179.0 \n",
"... ... \n",
"NYE 0.0 \n",
"UKJENT 0.0 \n",
"WILLIAM 0.0 \n",
"GAMLE 0.0 \n",
"TESTAMENTET 0.0 \n",
"\n",
" Eksamensoppgaver i mekanikk ved universitetet i Oslo Ord om fred \n",
". 440.0 65.0 \n",
", 222.0 96.0 \n",
"och 0.0 0.0 \n",
"år 0.0 1.0 \n",
"du 0.0 4.0 \n",
"... ... ... \n",
"NYE 0.0 3.0 \n",
"UKJENT 0.0 3.0 \n",
"WILLIAM 0.0 3.0 \n",
"GAMLE 0.0 6.0 \n",
"TESTAMENTET 0.0 9.0 \n",
"\n",
"[49061 rows x 10 columns]"
]
},
"execution_count": 3,
"metadata": {},
"output_type": "execute_result"
}
],
"source": [
"c.get_freqs().display_names()"
]
},
{
"cell_type": "code",
"execution_count": 4,
"metadata": {},
"outputs": [
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" frequencies | \n",
"
\n",
" \n",
" \n",
" \n",
" . | \n",
" 15660.0 | \n",
"
\n",
" \n",
" , | \n",
" 12880.0 | \n",
"
\n",
" \n",
" och | \n",
" 688.0 | \n",
"
\n",
" \n",
" år | \n",
" 913.0 | \n",
"
\n",
" \n",
" du | \n",
" 512.0 | \n",
"
\n",
" \n",
" ... | \n",
" ... | \n",
"
\n",
" \n",
" NYE | \n",
" 3.0 | \n",
"
\n",
" \n",
" UKJENT | \n",
" 3.0 | \n",
"
\n",
" \n",
" WILLIAM | \n",
" 3.0 | \n",
"
\n",
" \n",
" GAMLE | \n",
" 6.0 | \n",
"
\n",
" \n",
" TESTAMENTET | \n",
" 9.0 | \n",
"
\n",
" \n",
"
\n",
"
49061 rows × 1 columns
\n",
"
"
],
"text/plain": [
" frequencies\n",
". 15660.0\n",
", 12880.0\n",
"och 688.0\n",
"år 913.0\n",
"du 512.0\n",
"... ...\n",
"NYE 3.0\n",
"UKJENT 3.0\n",
"WILLIAM 3.0\n",
"GAMLE 6.0\n",
"TESTAMENTET 9.0\n",
"\n",
"[49061 rows x 1 columns]"
]
},
"execution_count": 4,
"metadata": {},
"output_type": "execute_result"
}
],
"source": [
"c.get_freqs().sum_freqs()"
]
},
{
"cell_type": "code",
"execution_count": 5,
"metadata": {},
"outputs": [
{
"data": {
"text/html": [
"\n",
"\n",
"
\n",
" \n",
" \n",
" | \n",
" index | \n",
" docid | \n",
" urn | \n",
" concordance | \n",
" link | \n",
"
\n",
" \n",
" \n",
" \n",
" 0 | \n",
" 0 | \n",
" 100279411 | \n",
" URN:NBN:no-nb_digibok_2016011848084 | \n",
" ... Mwaash eller Woot < Mashamboy > er Kubas f... | \n",
" <a target='_blank' href = 'https://urn.nb.no/U... | \n",
"
\n",
" \n",
"
\n",
"
"
],
"text/plain": [
" index docid urn \\\n",
"0 0 100279411 URN:NBN:no-nb_digibok_2016011848084 \n",
"\n",
" concordance \\\n",
"0 ... Mwaash eller Woot < Mashamboy > er Kubas f... \n",
"\n",
" link \n",
"0