TIM digitalizacija - potek

[miharix]

Da vam predstavim kako sem si zamislil se lotit realizacije digitalizacije revije TIM.

Zagotovo bo kdo imel občutek dĂ©jĂ  vu, saj isto temo imam še odprto na www.s5tech.net ter www.elektronik.si

Pri nasvetih/predlogih prosim upoštevajte, da za ta projekt raje vložim več časa kot €
& Nimam na voljo delavnice("delavnica"==garsionera+balkonček)

Faze:
1 - zbiranje revij
2 - uradni dogovor na kak način je objava dovoljena
3 - izdelava orodja za zajem
4 - digitalizacija revij
5 - OCR
6 - digitalizacija prilog načrtov (A2)
7? - vektorizacija načrtov (ne poznam nobene opensource rešitve, ki naredi uporaben dxf)
8 - se dogovorit z COBISS za pridobitev seznama vseh zabeleženih avtorjev in naslovov člankov, za izdelavo kazal
9 - uvoz obstoječih uradnih digitalnih izvodov
10 - postavitev strežnika za objavo skladno z točko 2
11 - popravki morebitnih slabih zajemov / manjko (zagotovo načrti prilog)

Posebnosti TIM:
- različni formati ~A5 in ~A4
- letnik je orientiran na šolsko leto torej začne v enem in konča v drugem koledarskem
- letnik je 9 ali 10 številk , bilo zgleda tudi nekaj izjem z manj
- pri nekaterih številkah je priloga A2 (nimam podatka od katerega letnika je priloga stalnica)
- vsebina ni le besedilo in slike temveč tudi načrti

FAQ:
Zakaj to počneš?
Že dolgo imel ta cilj, v prejšnji službi kot učitelj videl da bi to še kako prav prišlo, nihče pa se tega v takem obsegu še ni lotil.
Mogoče pa sem le konkretno preveč usekan.

Misliš s tem služiti?
Ne ne mislim!

Zakaj tega še ni uredništvo naredilo?
€€€ Kolikor mi je znano se revija zadnja leta ravno, da se drži.
Prejšnji založnik(TZS?) bi jo ukinil, zato sedaj izhaja pod ZOTKS

Zakaj hočeš celo fizično zbirko?
Ne dvomno bo pri taki masi prišlo do kakega slabega zajetja, če imam izvod pri roki lahko tisti del ponovno digitaliziram.
In ja če to delam kot hvala lepa, bi bil vesel da imam tudi fizično zbirko
Če zajemam vse na isti napravi bo kvaliteta zajema skozi vse enaka
Ždet ure po šihtu v knjižnici, še posebej z masko se mi res ne ljubi
Vodit evidenco pri komu sem si sposodil kateri izvod ni ravno zabavno.

Kako dolgo bo trajalo?
Niti nočem računati da ne zgubim motivacije, če boš računal prosim obdrži zase.
Nimam ciljnega datuma.

Faza 1 - Zbiranje revij
Prvotno sem zbrane revije vodil v txt, nato tabelci a se je izkazalo za nezanesljivo.
Izdelal sem si preprosto stojalo za fotografiranje platnic (casio ex-zr200)

slikanje_platnic.jpg (56.56 KiB) Pogledano 2465 krat

Vsak letnik je na disku kot mapa
Mapa vsebuje slike vseh platnic tistega letnika, ki jih imam tudi podvojene
Poimenovani so TIM1,TIM2... če je številka podvojena dobi zadaj - npr TIM1-, potrojena -- itd

struktura.jpg (40.52 KiB) Pogledano 2465 krat

Manjhna PHP skripta na malinci se sprehodi skozi mape in v kombinaciji z CSS se izriše pikaz viden na
https://tim.izdelal.si , da je prikaz hitrejši je še ena mapa kjer so vse platnice še močno pomanjšane.

Faza 3 - orodje za zajem
A) Ploski skener (razen za priloge) odpade ker
- rezat revij nimam namena, jih je preveč škoda in tudi papirji so različne kakovosti prepričan sem da bi jih par samodejni podajalec uničil.
- nekateri izvodi so zelo krhi, tukaj sem dal revijo na ploskega pa je bilo slišat pokanje šivov, ni škode a dvomim da bi ostala cela če bi vse strani tako delal.
- imam tudi letnike, ki so vezani z trdimi platnicami
- nekatere številke (ponavadi 9-10) so opazno debelejše v skrajnih točkah pride do popačenja
B) Dat nekomu profesionalno skenirat revije... nisem preverjal sem precej prepričan da bo dražje kot izdelava naprave... in kaj takrat če kak zajem ni dober ?
C) izdelat si mislim nekaj takega https://www.diybookscanner.org/
- rabim nabavit 2 identični kameri kateri še se nisem odločil
Bolj točno "Archivist Quill" načrti sicer niso javni, kit ni za dobit
a prodajalec se mi je odzval in brezplačno podal podatke o dolžinah profilov, navodila za gradnjo pa so že javna na http://tenrec.builders/quill/guide/
(profilov imam verjetno dovolj od razdrtega projekta)

Faza 5 - OCR
Zelo verjetno: https://github.com/manisandro/gImageReader
ki sem ga slučajno že testiral za potrebe službe ter spotoma še vmesnik prevedel v Slovenščino

[miharix]

Prvi dve vprašanji če mi kdo lahko svetuje:

1. Ima kdo od vas Raspbery Pi HD kamero in Priporočen 16mm 10MP objektiv ?
Zanima me kakšna berljivost je če slikaš A4 ?

2. Avtor "Archivist Quill" mi svetuje, ker so določeni profili pod hecnimi koti (50° & 40°), da uporabim "hand mitre saw"
Mi lahko kdo predlaga kako preverjeno?
Sem bil slučajno danes v Merkurju, so eno imeli, a za tisto nobenega nadomestnega lista za kovine.
Zajeralna žaga odpade, žal nimam prostora za večje strojčke.

[alesb]

Zakaj pa ne bi enostavno poskeniral?

[2R]

Napisal bom svoje mnenje, zato vzet moje pisanje le na znanje.
Imam občutek, da predstavlja ta način zelo veliko komliciranja za bore slab efekt na koncu. Nekateri me poznajo in vejo, da se ukvarjamo s stop motion animacijo, zato zelo dobro poznam situacijo s kvaliteto fotografije, pravilno osvetlitvijo, popačenjem objektivov, ... tukaj bi lahko našteval še morje problemov.
Takole slikanje revij, kot sem videl na posnetku, je dobro le za tekstovne predloge, ki se kasneje tekstovno digitalizirajo. Za skeniranje načrtov pa je tole popolnoma brez smisla, saj bodo vsi listi popačeni. Za članke je praktično vseeno če so slike in tekst popačeni, je pa v revijah polno načrtov, ki morajo biti točnih dimenzij in dobre ostrine. Objektivi z goriščno razdaljo okoli 50 mm imajo nekako najbolj naraven kot, kot ga vidijo naše oči. Žal še vedno prihaja do popačenj slike zaradi različne razdalje predmeta slikanja, različnega kota objekta, ... Če boš uporabil širokokotni objektiv (manjša goriščna razdalja kot 50 mm) boš dobil ekstremno popačene slike. Ne samo da je slika raztegnjena v eno smer linearno, pač pa dobivaš vedno večji efekt ribjega očesa. Z uporabo večje gorišne razdalje začneš dobivat manjša popačenja, vendar pa mora biti fotoaparat vedno bolj oddaljen od predmeta. Z razdaljo pa začneš izgubljat ostrino, seveda s predpostavko da se uporabljajo klasični nizkocenovni objektivi. Začne se tudi pojavljat problem z osvetlitvijo.
Upoštevaj tudi pravo resolucijo skeniranja. HD ali 4K HD sta absolutno preslaba za tako delo. Barvne slike za tisk so v resoluciji 300 dpi, črno bele oziroma bitne kot so načrti pa v resoluciji 600 dpi. Jaz bi pri toliko truda absolutno upošteval skeniranje na 600 dpi. Če vzamemo prepostavko da imamo revijo v velikosti A4, se pravi je višina lista 30 cm kar je na okroglo 12 inča, potem pri 600 dpi potrebujemo (12 inč x 600 dpi) 7200 pik v višini, kar pomeni da je to 2x večja resolucija kot 4K HD format. Par takih izračunov takoj pokaže da za delo potrebuješ profesionalni fotoaparat.
Zato se meni hitro poraja vprašanje, da je zadeva lahko dokaj enostavna, če se uporabi kakšen poceni ploskovni skener, ki se mu odreže steklo na robu pregiba, da se revija ne ravna in s tem poka. Mimogrede, novejše revije so vse spete s sponkami zato tukaj ne bo preblema.
Malo razmisli, kako najbolje in najceneje pripravit takle arhiv.
Mimogrede še to, vidim da ti nekaj izvodov še manjka. Od letnika 1980 naprej imam jaz v svojem arhivu vse izvode posortirane v fasciklih, vendar želim da moj arhiv ostane popoln, zato revij ne bi prodal. Bi se pa lahko zmenila za posojo.

LP2R

[Stanko P.]

Pohvale za pogum.

Za nas, ki smo malo nostalgiki pa nimamo starih TIM-ov, je tudi poslikana vsebina več, kot idealna.

Za samo indexiranje revij in prilog bi verjetno bila najboljša kaka baza sql, glede na to da itak zaganjaš neke php skripte.
Pri tem bi ti lahko pomagal, če boš hotel.

Tudi za kako urejanje slik bi našel čas, saj navsezadnje gre za modelarstvo.



Nekateri novejši letniki imajo zraven CD, čeprav ga nisem nikoli zagnal, da bi videl kaj je sploh gor.

Uredništvo ne bi bilo pripravljeno pomagati z vsebinami? Pomoje imajo vsaj zadnjih 10 let nekje shranjene izdaje.

LP

[miharix]

Hvala 2R. Vse še posebej strokovne izkušnje zelo dobrodošle.

Imam občutek, da predstavlja ta način zelo veliko komliciranja za bore slab efekt na koncu.

Ne vem kateri način bi bil primeren. Če nebi nič objavljal bi na koncu dobil kup kritik, rezultat dela pa zagotovo slabši.

Za članke je praktično vseeno če so slike in tekst popačeni, je pa v revijah polno načrtov, ki morajo biti točnih dimenzij in dobre ostrine.

Seveda to je ravno moja največja skrb.

Če boš uporabil širokokotni objektiv (manjša goriščna razdalja kot 50 mm)

Mislim da govoriš o "Optical Length" Omenjeni objektiv ima 67.53mm
Kamerca pa 4056 x 3040 ter podpira raw

Par takih izračunov takoj pokaže da za delo potrebuješ profesionalni fotoaparat.

Zagotovo a kateri meniš bi bil dovolj dober? (x2 + x2 ista objektiva se grdo hitro nabere, torej rabim nekaj kar je rabljeno in bilo zelo razširjeno)

Zato se meni hitro poraja vprašanje, da je zadeva lahko dokaj enostavna, če se uporabi kakšen poceni ploskovni skener, ki se mu odreže steklo na robu pregiba, da se revija ne ravna in s tem poka.

Tega si ne predstavljam kako misliš. Če pogledaš ploski skener ima pod steklom mehaniko, ki na vseh straneh sega čez območje zajemanja.

Malo razmisli, kako najbolje in najceneje pripravit takle arhiv.

Razmišljal sem že preveč in predolgo. Treba je zbrat več praktičnih testov pol pa veselo na delo.

[miharix]

Za samo indexiranje revij in prilog bi verjetno bila najboljša kaka baza sql, glede na to da itak zaganjaš neke php skripte.
Pri tem bi ti lahko pomagal, če boš hotel.
Tudi za kako urejanje slik bi našel čas, saj navsezadnje gre za modelarstvo.

Odlično!
OCR izvaža v hOCR kar je XML ter šele nato v PDF - ocr bo seveda preko bash ne preko klikanja
Torej tisto bo treba naštudirat strukturo pol pa v SQL
Ali pa da je SQL kot nek chaching predhodnih iskanj ter kazal/avtorjev/kategorij...
Na to temo sem tuhtal da bi mogoče na kak način med skeniranjem spotoma lahko dodajal markerje(npr: stran vsebuje načrt, poškodba vsebine)

Uredništvo ne bi bilo pripravljeno pomagati z vsebinami? Pomoje imajo vsaj zadnjih 10 let nekje shranjene izdaje.

Je pripravljeno. Če ne pride spet kaj vmes javim kako in kaj še ta teden.

[2R]

Po moje bo najbolje da starejše lepljene letnike poslikaš - tudi če je popačeno je nekako v redu.
Ostale letnike, ki so speti s sponkami pa ploskovno skeniraš. Tu ni bojazni da uničiš revijo, jo je pa seveda treba obtežiti.

LP2R

[dejko1]

Predlagam vsaj 10MP kamero v normalni velikosti, pri malih zna bit problem v optiki in posledično slabšemu posnetku detajlov. Optično popačenje objektiva se lahko relativno enostavno popravi v softwareu (če imaš fiksni setup), moraš pa računat da s tem nekoliko izgubiš na pikslih/ostrini. Če imaš RPi kamero lahko naredimo primerjavo.

Če bi imel za poskusit ti lahko posodim kaj iz Nikon družine DSLR, žal nimam v parih Za setup je najbolje dva identična fotoaparata z identičnimi objektivi. Tega ranga lahko dobiš rabljene Canon / Nikon relativno poceni, verjetno pod 150EUR za par z objektivi. Objektive imaš lahko fiksne, sicer bodo pa tudi kit (nastavljiv zoom, poceni, ker jih dobiš s kamero ) objektivi odlični. Rabiš dobro zunanjo osvetlitev, da bo ostrina čim boljša.

Kako si mislil imeti izvedeno avtomatizacijo? Z webcam moduli je relativno enostavno saj imaš live stream. S fotoaparati lahko narediš na IR ali žični sprožilec in potem slike s kartic prenašaš ročno. Če vstaviš WIFI (SD/CF) kartice lahko avtomatiziraš prenos slike na računalnik, IR sprožilec pa enostavno emuliraš s kakšnim arduinom. Še bolj integrirano je pa verjetno z uporabo gphoto2 knjižnice http://gphoto.org/doc/remote/ in daljinsko kontrolo aparata ter prenosom slik. Lahko pomagam pri SW.

[miharix]

Verjetno se že kdo sprašuje kako je s tem projektom:

1. manjka še samo 6 številk: https://tim.izdelal.si
Najstarejše mi je celo priskrbel trenutni urednik TIM-a

2.1. Semptembra sem bil pri uredniku TIM-a,
povedal mi je, da sta z prejšnjim urednikom se pogovarjala če je kakšna možnost, od nekje pričarat sredstva,
da bi dali komu digitalizirati, da nebi rabil to početi jaz za hvala lepa.
Vstopila sta v stik z vodstvom NUK in so jima rekli, da bi mogoče šlo v sklopu nekega projekta sredstva zbrati,
da bi pol to oni digitalizirali in tudi dali vse v digitalno javno dostopni arhiv.
Ker ni bilo nič še podpisano je me prosil, naj počakam še kak mesec dva, da si ne bom delal stroškov in dela po nepotrebnem.
Če pa pade vse v vodo pa bodo zelo veseli moje namere.

2.2. Od takrat do danes so imeli en sestanek z NUK. V letošnjem koledarskem letu ne bo šlo. Naslednje leto pa zelo verjetno da ja.
Ni še dorečeno z kakšnim zamikom bodo številke javne, verjetno 3-4leta.
Tudi še ni dorečeno kako bo z dostopom do večje resolucije, saj tista javna od NUK ni dovolj kakovosten načrte za modelarje.

Tako da... iščem še teh 6.
Projekt je pri meni zaradi navedenega na pavzi.
Dokler ni res digitalizirano, če kdo rabi kak članek in ve točno številko mi lahko javi.
Za tiste ki ste prispevali revije, nič bat dobili boste dostop.

Mimogrede če ste aktivni na socialnih omrežjih... dajte "folow", #revijatim @revija_tim
da bo ob večji števili mogoče algoritem kakemu mulcu/dečvi namignil, da obstaja taka revija pri nas.
Pa pisci novih člankov so zelo zaželjeni!

[JozeS]

V temi Špica je poletela je razprava o verzijah tega modela in tudi omenjeno, da je v TIMu članek o tem modelu.
Tole bi bilo zanimivo pogledat.

Screenshot 2021-11-08 at 10-29-45 Ĺ pica je poletela - Stran 4 - Portal Modelarji com.png (44.49 KiB) Pogledano 1822 krat

LP, J.

[oldtimer 65]

Pozdravljen,
imam revije, ki ti še manjkajo.

na ZS mi pošlji svojo kontaktno številko da se dogovoriva kako pa kaj naprej.

[miharix]

Pozdrav,

glede obljubljene digitalizacije iz strani NUK žal nimam nobenega novega podatka.
Me je pa urednik prosil, da vas povabim k sledečima dogodkoma:

-----------------------

TIM60_ne_spreglejte_.jpg (105.42 KiB) Pogledano 1299 krat

Septembra letos bo minilo natančno 60 let od izida prve številke Tima. Ker bi radi na prav poseben način obeležiti ta častitljivi jubilej, prosimo, da naj se nam do 15. avgusta po telefonu, elektronski pošti ali osebno javijo naročniki s čim daljšim stažem, imetniki kar najbolj popolne zbirke Timov ter upokojeni mentorji in učitelji, ki so si pri svojem delu pomagali s to revijo, veseli pa bomo tudi fotografije najstarejšega izdelka, narejenega po načrtih iz Tima.
-----------------------





----------------------

NAGRADNI NATEČAJ Iskra ERO

Pogoji za sodelovanje

Nagradnega natečaja se lahko udeležijo posamezniki, klubi, krožki in šolske skupine, za vse pa veljajo enaka pravila. Gradivo, ki ga bomo zbirali na e-poštnem naslovu [email protected], mora vsebovati podatke o avtorju oziroma skupini, vsaj dve čim bolj kakovostni fotografiji končanega izdelka, nekaj posnetkov posameznih faz gradnje, delavniško risbo izdelka z merami in kratek opis izdelave.

Tema

Na natečaju je mogoče sodelovati z uporabnimi izdelki, igračami, okrasnimi predmeti ipd. iz lesa, umetnih mas in kovin, ki so bili narejeni s pomočjo električnega orodja katerega koli proizvajalca. Zaželeni so projekti po svojih zamislih, lahko pa gre tudi za dopolnitve, izboljšave in preoblikovanje projektov, objavljenih v Timu.

Nagrade(glej priponko)

TIM 5 - Uvodnik + Razpis Iskra ERO.pdf

(129.63 KiB) Prenešeno 52 krat

Natečaj bo trajal od 1. januarja do 1. septembra 2022, nagrajence pa bomo predstavili v oktobrski številki Tima.

[Ron1]

Živijo,
prvič pišem tule, drugače berem že dalj časa

Sem pobrskal po starih škatlah in mislim da imam ravno to kar ti manjka:
29. letnik september in marec (1990/91 št. 1 in 7)
30. letnik oktober (1991 št. 2)

Seveda z veseljem prispevam v skupno dobro



https://drive.google.com/file/d/1MgVonb ... mc7ud/view

Naročnik TIMa sem od 1983 - s pavzo kakih 20 let. Zdaj sem naročen tudi zato, da vsaj malo pomagam da nam revija ne izumre!

Drugače pa sem se tudi jaz pred letom-dvema lotil "delne" digitalizacije - poskeniral sem le članke, ki so me zanimali še kot mulca (vse prispevke Jana Lokovška, Jerneja Bohma in podobno, zanimive modele, modelarske nasvete,...). En novejši letnik (svoj) sem nesel v kopirnico in plačal skeniranje v celoti, potem pa ugotovil, da me "vse" najbrž ne bo nikoli zanimalo, zato sem začel doma skenirati le kar me zanima.

Izposodil pa sem si TIMe ki jih nimam v knjižnici - konkretno Mestna knjižnica Ljubljana, enota KOŽ. V času corona lockdowna sploh niso komplicirali - naenkrat sem si lahko na dom izposodil po 10 vezanih letnikov in tudi novejše, še ne vezane letnike, tako da sem komaj nesel do avta
So pa starejši letniki žal nepopolni - kar nekaj listov manjka, manjkajo cele sredine revij z načrti,...

Na koncu sem naredil še OCR s programom PDF24 in končni rezultat je super - razen na (barvnih) naslovnicah, so prepoznane praktično vse besede.

Drugače pa vso čast in kapo dol za tale projekt - bo kar časovno zahteven se mi zdi.

lp
Roni

PS: kako embedam sliko iz google drive-a? z [img] tagi ne deluje prav, link pa deluje...

[JozeS]

TIM v digitalni obliki, pobuda je postala realnost:
https://www.dlib.si/results/?query=%27r ... al=journal

Screenshot 2022-10-05 at 10-19-02 dLib.Si - Digitalna knjiĹľnica Slovenije.jpg (57.12 KiB) Pogledano 835 krat

LP, J.

[miharix]

Majhna novička:

Danes sem se slišal z urednikom TIM-a in mi je povedal, da so mu je pred 10 dnevi
iz NUK sporočili, da se digitalizacija bliža koncu.