Změny dokumentu Postup převodu dat z Clavia
Naposledy změněno Jan Šimeček 2025/11/03 15:11
Od verze 46.1
změnil(a) Jan Šimeček
k 2024/06/28 11:03
k 2024/06/28 11:03
Změnit komentář:
Žádné komentáře k této verzi
Na verzi 41.1
změnil(a) Jan Šimeček
k 2024/06/28 10:55
k 2024/06/28 10:55
Změnit komentář:
Žádné komentáře k této verzi
Summary
-
Page properties (1 modified, 0 added, 0 removed)
Details
- Page properties
-
- Content
-
... ... @@ -86,8 +86,7 @@ 86 86 87 87 V případě připojování dat je nutná existence čárového kódu v tabulce svazky u výměnných souborů, aby došlo ke správnému napárování: 88 88 89 -{{html}} 90 -<button onclick="toggleContent('content2')">Postup kontroly a příkazy pro vygenerování</button> 89 +{{html}}<button onclick="toggleContent('content2')">Postup kontroly a příkazy pro vygenerování</button> 91 91 <div id="content2" style="display: none;"> 92 92 <hr style="border: none; height: 5px; background-color: black;"> 93 93 <p><b>Kontrola dat v Claviu, jestli obsahují vygenerovaný správně ckod, kdy 31840 - je prefix nadřízené knihovny:</b></p> ... ... @@ -111,8 +111,7 @@ 111 111 content.style.display = "none"; 112 112 } 113 113 } 114 -</script> 115 -{{/html}} 113 +</script>{{/html}} 116 116 117 117 Je nutné zkontrolovat u VS, aby svazky měli {{html}}<span style="color: red;">vyplněný</span>{{/html}} CKOD (viz výše) a poté {{html}}<span style="color: red;">PIDKN</span>{{/html}} obsahovalo znak {{html}}<span style="color: red;">˙</span>{{/html}} : 118 118 ... ... @@ -178,7 +178,7 @@ 178 178 **{{html}}<span style="color: red;">POZOR!!!!</span>{{/html}}**: kontrola na existenci A podpolí v Tritiu, které zbyli od minulého importu, pokud ano tak smazat před importem!: 179 179 180 180 {{html}} 181 -<button onclick="toggleContent('content5')"> Příkaz pro kontrolu</button>179 +<button onclick="toggleContent('content5')">SELECT</button> 182 182 <div id="content5" style="display: none;"> 183 183 <hr style="border: none; height: 5px; background-color: black;"> 184 184 <p>select count(*) from authority_data where subfield_definition in (</p> ... ... @@ -204,17 +204,17 @@ 204 204 {{/html}} 205 205 206 206 * Pokud importuji do knihovny s defaultně jiným jazykem (slovenské knihovny) musím před importem správně nastavit **SYSTEM_DEFAULT_LANGUAGE **tak i** LOCALE.** 207 -* Pokud se nejedná o multiknihovní instanci, nastavit v položkách nastavení ** {{html}}<span style="color: red;">MULTI_LIBRARY_INSTANCE</span>{{/html}}** na false ( -304 ) - musí se provést před importem vzkazů čtenářů.208 -* V záložce **Systém** je volba ** {{html}}<span style="color: green;">Import dat</span>{{/html}}**205 +* Pokud se nejedná o multiknihovní instanci, nastavit v položkách nastavení **MULTI_LIBRARY_INSTANCE** na false ( -304 ) - musí se provést před importem vzkazů čtenářů. 206 +* V záložce **Systém** je volba **Import dat** 209 209 * Spustí se importní mód - běžní uživatelé se do knihovny v importním módu nemohou přihlásit 210 210 * //Doporučení - naimportovat dump databáze na VM s Tritiem pod uživatelem root (import je řádově rychlejší)// 211 211 * URL spojení databázi Clavius SQL kde jsou výpůjčky : 212 -** Pro MySQL: **jdbc:mysql:~/~/server.lanius.cz:3306/// {{html}}<span style="color: green;"><databaseName></span>{{/html}}//?useUnicode=true&characterEncoding=UTF-8&serverTimezone=Europe/Prague**213 -** Pro MSSQL: **jdbc:sqlserver:~/~/192.168.0.24:1433;databaseName=// {{html}}<span style="color: green;"><databaseName></span>{{/html}}//**;SendStringParametersAsUnicode=False;214 -* Zadáte uživatele a heslo pro připojení do databáze a tlačítkem ** {{html}}<span style="color: green;">Připojit</span>{{/html}}** provedete spojení (po úspěchu se tlačítko změní na **Odpojit**)215 -* ** {{html}}<span style="color: green;">Start import mode</span>{{/html}}**210 +** Pro MySQL: **jdbc:mysql:~/~/server.lanius.cz:3306///<databaseName>//?useUnicode=true&characterEncoding=UTF-8&serverTimezone=Europe/Prague** 211 +** Pro MSSQL: **jdbc:sqlserver:~/~/192.168.0.24:1433;databaseName=//<databaseName>//**;SendStringParametersAsUnicode=False; 212 +* Zadáte uživatele a heslo pro připojení do databáze a tlačítkem **Připojit** provedete spojení (po úspěchu se tlačítko změní na **Odpojit**) 213 +* **Start import mode** 216 216 * Postupně procházíme jednotlivé záložky zleva do prava. Vynecháváme ty které nejsou vždy (akvizice, webový katalog Carmen) 217 -** ** {{html}}<span style="color: green;">Záložka Definice</span>{{/html}}** - vybrat postupně po jedné definiční tabulky a dejte **Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!)215 +** **Záložka Definice** - vybrat postupně po jedné definiční tabulky a dejte **Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!) 218 218 *** **Definici webů (DEFWEB)** importovat pouze pro REKSové knihovny (při převodu do sdílené knihovny je třeba založit ručně při registraci knihovny) 219 219 *** Pokud se nepodaří v případě knihovny, která má Carmen převést DEFWEB, tak stačí v Tritius založit ručně webovou definici a do import_id vyplnit ID, které se najde v databázi Clavia: 220 220 *** SELECT distinct defWebId FROM car_cloud; ... ... @@ -221,21 +221,21 @@ 221 221 222 222 * 223 223 ** //Doporučení - Pokud se jedná o převod větší knihovny, tak po importu větších dat (autorit, díla, poplatky, čtenáři, výpůjčky, ...) dělat zálohu databáze// 224 -** ** {{html}}<span style="color: green;">Záložka Autority</span>{{/html}}{{html}}<span style="color: red;">(u REKSovky zvážit neimportování!)</span>{{/html}}**:222 +** **Záložka Autority (u REKSovky zvážit neimportování!)**: 225 225 *** tlačítko Nahrát soubor nalistujeme **AUTORITY.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed 226 226 ** Pokud je soubor velký desítky MB a nejde nahrát zkuste přímou adresu např. : [[http:~~/~~/192.168.0.250:8080/Tritius/>>url:http://192.168.0.250:8080/Tritius/cz.effectiva.tritius.Application/Application.html#Import_wizard]] takto obejdete Apache web server 227 -** ** {{html}}<span style="color: green;">Záložka Díla a Svazky</span>{{/html}} {{html}}<span style="color: red;">(u REKSovky zvážit ztitulování a neskládání autorit!)</span>{{/html}}:**225 +** **Záložka Díla a Svazky (u REKSovky zvážit ztitulování a neskládání autorit!):** 228 228 *** obsah složky **NAWEB** z Clavia (pokud existuje) - v průvodci importu dat je na záložce import děl tlačítko, které nahraje zabalenou složku (NAWEB.zip) do příslušné složky a rozbalí. (dříve - ručně nakopírovat do složky Tritia (\tritius\files\Clavius\WORK\NAWEB) 229 -*** {{html}}<span style="color: red;">Pozor: zkontrolovat názvy souborů pokud obsahují mezery nebo znaky s diakritikou nedojde k propojení !!!</span>{{/html}}227 +*** Pozor: zkontrolovat názvy souborů pokud obsahují mezery nebo znaky s diakritikou nedojde k propojení !!! 230 230 *** Typ importu duplicit - kontroluje duplicitu podle typu dokumentu a ISBN, popřípadě podle typu dokumentu, názvu, autora a roku (Zkontrolovat duplicity ISBN v TAGu) 231 231 *** Přes Nahrát soubor vybereme **DATA.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed 232 232 *** Problémové záznamy v souboru failed, které se nenaimportovaly, je potřeba hned řešit tzn. **opravit a opakovaně importovat teprve pak se může pokračovat**! 233 -** ** {{html}}<span style="color: green;">Čtenáři:</span>{{/html}}**234 -*** Vybrat CTENARI nebo CTENARI_DO_VSECH_KNIHOVEN - {{html}}<spanstyle="color: red;">neimportovat obě!</span>{{/html}}235 -** ** {{html}}<span style="color: green;">MVS</span>{{/html}}**231 +** **Čtenáři:** 232 +*** Vybrat CTENARI nebo CTENARI_DO_VSECH_KNIHOVEN - neimportovat obě! 233 +** **MVS** 236 236 *** Lepší Vytvářet nové záznamy, aby nedocházelo k propojení rezervací na MVS. 237 -** ** {{html}}<span style="color: green;">Záložka Výpůjčky</span>{{/html}}**:238 -*** Vybrat KPUJCKY nebo KPUJCKY_REKS - {{html}}<spanstyle="color: red;">neimportovat obě!</span>{{/html}}235 +** **Záložka Výpůjčky**: 236 +*** Vybrat KPUJCKY nebo KPUJCKY_REKS - neimportovat obě! 239 239 *** postupně po jednotlivých tabulkách importovat a v logu kontrolovat provedení. 240 240 *** **Poplatky **- způsob uhrazení (poplatek.kartou) 241 241 **** 0 - platba v hotovosti ... ... @@ -246,12 +246,12 @@ 246 246 247 247 === Odstranění importovaných dat === 248 248 249 -Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>> doc:.Postup-Odstraneni-importovanych-dat.WebHome]]247 +Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>>url:https://confluence.tritius.cz/pages/viewpage.action?pageId=102925148]] 250 250 251 251 == Nastavení po importu == 252 252 253 -* ** {{html}}<span style="color: red;">Před ukončením importního módu je třeba vytvořit zálohu databáze.</span>{{/html}}**254 -* ** {{html}}<span style="color: red;">Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! **(u velkého serveru může zastavení trvat i půl hodiny)</span>{{/html}}**251 +* **Před ukončením importního módu je třeba vytvořit zálohu databáze.** 252 +* **Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! **(u velkého serveru může zastavení trvat i půl hodiny) 255 255 * Pokud se převáděla konfigurace výpůjčního protokolu je potřeba projít a opravit podmínky v následujících částek nastavení, jinak by spadla reindexace: 256 256 ** Kategorie operací 257 257 ** Pravidla registrací ... ... @@ -266,33 +266,81 @@ 266 266 * **Restart Tomcatu pomocí tools** (vyčistí se paměť po importu) !!!((( 267 267 268 268 ))) 269 -* ** {{html}}<span style="color: red;">Provést nastavení podle checklist!!!!</span>{{/html}}**270 -* ** {{html}}<span style="color: red;">Přečíst 2.1 Tipy a Triky na začátku stránky!</span>{{/html}}**267 +* **Provést nastavení podle checklist!!!!** 268 +* **Přečíst 2.1 Tipy a Triky na začátku stránky!** 271 271 272 272 = Regulární výrazy pro opravy dat = 273 273 274 274 Všechny nové regulární výrazy je třeba nejprve otestovat vývojářem - **ReplaceHelperTest**. 275 275 276 -<button onclick="toggleContent('content5')">Příkaz pro kontrolu</button> 277 -<div id="content5" style="display: none;"> 278 -<hr style="border: none; height: 5px; background-color: black;"> 279 -<p>select count(*) from authority_data where subfield_definition in (</p> 280 -<p>select id from subfield_definition where name_sub='A')</p> 281 -<br> 282 -<p>select count(*) from work_data where subfield_definition in (</p> 283 -<p>select id from subfield_definition where name_sub='A')</p> 284 -<br> 285 -<p>dále:</p> 286 -<p>Po zapnutí Importovacího módu nesmí tabulka import_id_backup obsahovat jediný řádek, který má ve sloupci library ID právě převáděné knihovny, tedy select * from import_id_backup where library = ID_prave_prevadene_knihovny musí vrátit 0 .</p> 287 -<hr style="border: none; height: 5px; background-color: black;"> 288 -</div> 289 -<script> 290 - function toggleContent(contentId) { 291 - var content = document.getElementById(contentId); 292 - if (content.style.display === "none") { 293 - content.style.display = "block"; 294 - } else { 295 - content.style.display = "none"; 296 - } 297 - } 298 -</script> 274 +|((( 275 +== Autority == 276 + 277 +|=Popis problému|=Regulární výraz|=Vstup|=Výstup|=(% colspan="1" %)Poznámka 278 +| Pole 100 obsahuje podpole 4.| 279 + 280 +{{{100\\ [\\ 0-9]{2}\\ \\$4.*}}}| 281 + 282 +{{{100 1 $4070}}}| |(% colspan="1" %)Celé pole se zahodí. 283 + 284 +| Obsahuje pole 1??| 285 + 286 +{{{(1\?\?\ )(.*,.*)§100 $2}}} 287 + 288 +{{{(1\?\?\ )(.*)§110 $2}}}| 289 + 290 +{{{1?? $aAudoly, Sylvie}}}| 291 + 292 +{{{100 $aAudoly, Sylvie}}}|(% colspan="1" %)Pokusí se rozpoznat zda se jedná o osobní jméno, nebo korporaci (pokud je osobní jméno, obsahuje hodnota čárku) 293 + 294 +|(% colspan="1" %)Pole 1XXa je prázdné|(% colspan="1" %) 295 + 296 +{{{^1??.*\\$a$}}}| 297 + 298 +{{{199 $a}}}|(% colspan="1" %) |Odstraní se celé opakování pole 299 + 300 +|(% colspan="1" %)Obsahuje pole 100 a 110|(% colspan="1" %) 301 + 302 +{{{^110.*}}}| 303 + 304 +{{{100 1 $aRoni, Luigi 110 2 $aRoni, Luigii}}}| 305 + 306 +{{{100 1 $aRoni, Luigi}}}|(% colspan="1" %)Odstraní opakování pole 110 307 + 308 +== Díla == 309 + 310 +|=Popis problému|=Regulární výraz|=Vstup|=Výstup|=(% colspan="1" %)Poznámka 311 +|Odkazy na soubory v NAWEB obsahují před adresářem neplatné znaky.| 312 + 313 +{{{(X00[\ ]{4}.*\$[uo]).*(NAWEB.*)(\$.*)§$1$2$3 (X00[\ ]{4}.*\$[uo]).*(NAWEB.*)§$1$2}}}| 314 + 315 +{{{X00 $uW:\NAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uW:\NAWEB\OBSAHY\N38492.pdf$tObsah$oW:\NAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oW:\NAWEB\2016_Knihy\N38492.jpg X00 $oW:\NAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oW:\NAWEB\OBSAHY\N38492.pdf$tObsah$uW:\NAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uW:\NAWEB\2016_Knihy\N38492.jpg}}}| 316 + 317 +{{{X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg}}}|(% colspan="1" %)Odstraní znaky co nepatří před NAWEB. 318 + 319 +|(% colspan="1" %)X00 odakzuje na adresář, který neexistuje z důvodu velikosti písmen na linuxu (velikost písmen se musí shodovat).|(% colspan="1" %) 320 + 321 +{{{(X00[\ ]{4}\$[ou]NAWEB[\\/])OBSAHY([\\/].*)§$1Obsahy$2}}}| 322 + 323 +{{{X00 $oNAWEB/OBSAHY/NC3404.pdf}}}| 324 + 325 +{{{X00 $oNAWEB/Obsahy/NC3404.pdf}}}|(% colspan="1" %)Změna velikosti písmen "OBSAHY" → "Obsahy". Regulární příkaz se musí dát až za regulární příkaz opravující validnost cesty. 326 + 327 +|(% colspan="1" %)Obsahuje pole ???.|(% colspan="1" %) 328 + 329 +{{{^\?\?\?.*}}}| 330 + 331 +{{{??? $aCzech Republic$eautomapa}}}|(% colspan="1" %) |Odstraní otazníkové pole. 332 + 333 +|(% colspan="1" %)1XX4 nebo 7XX4 obsahuje neexistující kód role|(% colspan="1" %) 334 + 335 +{{{(^[710]{3}.*)(\$4sut)(.*)§$1$3}}}| 336 + 337 +{{{100 1 $A1000239919$aLiker, Jeffrey K.$7xx0031426$4sut}}}| 338 + 339 +{{{100 1 $A1000239919$aLiker, Jeffrey K.$7xx0031426}}}|(% colspan="1" %)kód role z autority Neznámý kód role odstraní. 340 + 341 + 342 +))) 343 + 344 + ~{~{/html}}~{~{/html}}