Changes for page Postup převodu dat z Clavia
Last modified by Jan Šimeček on 2025/11/03 15:11
From version 64.1
edited by Jan Šimeček
on 2025/11/03 14:42
on 2025/11/03 14:42
Change comment:
There is no comment for this version
To version 44.1
edited by Jan Šimeček
on 2024/06/28 11:01
on 2024/06/28 11:01
Change comment:
There is no comment for this version
Summary
-
Page properties (2 modified, 0 added, 0 removed)
-
Attachments (0 modified, 0 added, 1 removed)
Details
- Page properties
-
- Default language
-
... ... @@ -1,1 +1,1 @@ 1 - cs1 +en - Content
-
... ... @@ -36,17 +36,12 @@ 36 36 * Zeptat se knihovny před převodem: [[Dotazy na knihovnu před převodem>>doc:.Dotazy-na-knihovnu-pred-prevodem.WebHome]] 37 37 * Zálohu rozbalovat přes **{{html}}<span style="color: red;">Total Commander </span>{{/html}}**- ne přes Windows průzkumníka!!! 38 38 39 -1. **{{html}}<span style="color: green;">Aktualizovat Clavius</span>{{/html}}** na současnou verzi ( 40 -11. Pomůcky → Update přes internet 41 -11. Pomůcky → Ladící funkce → Oprava struktury dat 42 -11. Systém → Obnova indexů) 39 +1. **{{html}}<span style="color: green;">Aktualizovat Clavius</span>{{/html}}** na současnou verzi (Pomůcky → Update přes internet) 43 43 1. **{{html}}<span style="color: green;">Provést synchronizaci polí</span>{{/html}}** (Pomůcky → Editace polí → Sync → Aktualizovat) 44 -1. **{{html}}<span style="color: red;">U SK knihovny zkontrolovat, že jsou data převedena na eura!</span>{{/html}}[[Návod pro Clavius>>https://www.clavius.sk/euro.htm]]** 45 45 1. **{{html}}<span style="color: green;">Provést kontrolu integrit dat </span>{{/html}}**(chyby opravovat !!! hlavně dogenerovat autority a smazat chybná pole) 46 46 1*. Katalogizace: 47 47 1**. **do integrit with .t.,.t. **( lze využít i příkazu **do tritius** , dělá to samé ) 48 48 1***. vyzve ke sloučení slovníků C1 a C3 do C1 - dát ano 49 -1***. [[kódy jazyk>>https://ipk.nkp.cz/docs/kp/marc-21/kody-jazyku-marc-21-pdf.-537-kb]] [[kódy zemí>>https://ipk.nkp.cz/docs/kp/marc-21/kody-zemi-marc-21-pdf.-157-kb]] 50 50 1**. **do OKindik with .T.** 51 51 1*. Výpůjčák 52 52 1**. Clex.exe → Systém → Provést Kontrolu integrity dat) ... ... @@ -53,7 +53,7 @@ 53 53 1. **{{html}}<span style="color: green;">pohled([select !s.scislo, s.pcislo, s.ucislo, #s.ckod from svazky s, (select ckod from svazky group by ckod having count(*)>1) s1 where s.ckod<>'' and s.ckod=s1.ckod order by s.ckod])</span>{{/html}}** 54 54 1*. duplicity čárových kódů svazků řešit ve foxíku tak že za čárový kód přídáte písmeno a,b,c ... kromě prvního výskytu čárového kódu 55 55 1. **{{html}}select isxn, count(*) as pocet from tituly group by isxn order by pocet desc{{/html}}** 56 -1*. kontrola na duplicitu ISBN -> opravit hromadně v TAGu51 +1*. kontrola na duplicitu ISBN 57 57 58 58 == Vlastní export dat z Clavia - automaticky (verze Clavia od 28.2.2019) == 59 59 ... ... @@ -89,10 +89,6 @@ 89 89 90 90 == Importování knihovny pokud v cílovém Tritiu již je část svazků (např. Výměnné soubory) == 91 91 92 -{{html}} 93 -<span style="color: red;">Při importu např. na Lounský serveru je někdy VF v Claviu jako vlastní fond, a u některých VF svazků v Claviu je v čárovém jiný prefix, něž mají Louny, takže se importem nerozpozná, že jde o duplicitu. Je potřeba toto při každém importu REKSovky do Tritia pečlivě hlídat.</span> 94 -{{/html}} 95 - 96 96 V případě připojování dat je nutná existence čárového kódu v tabulce svazky u výměnných souborů, aby došlo ke správnému napárování: 97 97 98 98 {{html}} ... ... @@ -132,7 +132,6 @@ 132 132 <p><b>Kontrola:</b></p> 133 133 <p>pohled("SELECT * FROM svazky where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p> 134 134 <p></p> 135 -<p>- Zontrolovat okem, ujistit se že jsou to VS a až pak opravit.</p> 136 136 <p><b>Oprava:</b></p> 137 137 <p>pohled("UPDATE svazky SET pidkn = '˙' where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p> 138 138 <hr style="border: none; height: 5px; background-color: black;"> ... ... @@ -169,6 +169,10 @@ 169 169 Při převádění REKSového Clavia nebo převádění knihovny, která má {{html}}<span style="color: red;">Carmen</span></span>{{/html}} (Knihovna s REKSovkami - Clavius neobsahuje pouze jednu knihovnu) nedávat po registraci vytvořit webovou definici - vznikne naimportováním DEFWEB, kdy dojde k založení webové definice pro každou REKSovou knihovnu. 170 170 171 171 {{html}} 162 +<span style="color: red;">!!!Pokud se jedná o sdílený server, kde již běží knihovny na ostro, tak provést zálohu databáze, kdyby se něco zvrtlo co nedokáže <a href="https://doc.tritius.cz/bin/view/uzivatelsky-manual/Pro-spravce/Postup-prevodu-dat-z-Clavia/Postup-Odstraneni-importovanych-dat/">Postup Odstranění importovaných dat</a> vyřešit a bylo potřeba provést obnovení!!!</span> 163 +{{/html}} 164 + 165 +{{html}} 172 172 <span style="color: red;">!!!Před zahájením zkontrolovat dostatek místa na disku VM!!!</span> 173 173 {{/html}} 174 174 ... ... @@ -179,11 +179,6 @@ 179 179 180 180 === Import dat === 181 181 182 -{{html}} 183 -<span style="color: red; font-size: 20px;">!!!Pokud se jedná o sdílený server, tak převádět až po 20:00 a provést zálohu databáze, kdyby se něco zvrtlo co nedokáže <a href="https://doc.tritius.cz/bin/view/uzivatelsky-manual/Pro-spravce/Postup-prevodu-dat-z-Clavia/Postup-Odstraneni-importovanych-dat/">Postup Odstranění importovaných dat</a> vyřešit a bylo potřeba provést obnovení!!!</span> 184 -{{/html}} 185 - 186 - 187 187 {{html}}<span style="color: red;">Import REKS:</span>{{/html}} nezapomenout **{{html}}<span style="color: red;">zamknout</span>{{/html}}** slovníky (především klíčová slova, popřípadě dodavatele) 188 188 189 189 **{{html}}<span style="color: red;">POZOR!!!!</span>{{/html}}**: kontrola na existenci A podpolí v Tritiu, které zbyli od minulého importu, pokud ano tak smazat před importem!: ... ... @@ -225,7 +225,7 @@ 225 225 * Zadáte uživatele a heslo pro připojení do databáze a tlačítkem **{{html}}<span style="color: green;">Připojit</span>{{/html}}** provedete spojení (po úspěchu se tlačítko změní na **Odpojit**) 226 226 * **{{html}}<span style="color: green;">Start import mode</span>{{/html}}** 227 227 * Postupně procházíme jednotlivé záložky zleva do prava. Vynecháváme ty které nejsou vždy (akvizice, webový katalog Carmen) 228 -** **{{html}}<span style="color: green;">Záložka Definice</span>{{/html}}** **{{html}}<span style="color: red;">(u sdíleného serveru zvážit neimportování kvůli tvorbě duplicit nebo je naimportovat a pak ty co už na serveru jsou vymazat)</span>{{/html}}**- vybrat postupně po jedné definiční tabulky a dejte **Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!)217 +** **{{html}}<span style="color: green;">Záložka Definice</span>{{/html}}** - vybrat postupně po jedné definiční tabulky a dejte **Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!) 229 229 *** **Definici webů (DEFWEB)** importovat pouze pro REKSové knihovny (při převodu do sdílené knihovny je třeba založit ručně při registraci knihovny) 230 230 *** Pokud se nepodaří v případě knihovny, která má Carmen převést DEFWEB, tak stačí v Tritius založit ručně webovou definici a do import_id vyplnit ID, které se najde v databázi Clavia: 231 231 *** SELECT distinct defWebId FROM car_cloud; ... ... @@ -244,7 +244,7 @@ 244 244 ** **{{html}}<span style="color: green;">Čtenáři:</span>{{/html}}** 245 245 *** Vybrat CTENARI nebo CTENARI_DO_VSECH_KNIHOVEN - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}} 246 246 ** **{{html}}<span style="color: green;">MVS</span>{{/html}}** 247 -*** Lepší Vytvářet nové záznamy, aby nedocházelo k propojení rezervací na MVS. (i u importu REKS)236 +*** Lepší Vytvářet nové záznamy, aby nedocházelo k propojení rezervací na MVS. 248 248 ** **{{html}}<span style="color: green;">Záložka Výpůjčky</span>{{/html}}**: 249 249 *** Vybrat KPUJCKY nebo KPUJCKY_REKS - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}} 250 250 *** postupně po jednotlivých tabulkách importovat a v logu kontrolovat provedení. ... ... @@ -257,13 +257,13 @@ 257 257 258 258 === Odstranění importovaných dat === 259 259 260 -Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>> doc:.Postup-Odstraneni-importovanych-dat.WebHome]]249 +Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>>url:https://confluence.tritius.cz/pages/viewpage.action?pageId=102925148]] 261 261 262 262 == Nastavení po importu == 263 263 264 -* ** {{html}}<span style="color: red;">Před ukončením importního módu je třeba vytvořit zálohu databáze.</span>{{/html}}**265 -* ** {{html}}<span style="color: red;">Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! **(u velkého serveru může zastavení trvat i půl hodiny)</span>{{/html}}**266 -* Pokud se převáděla konfigurace výpůjčního protokolu je potřeba projít a opravit [[podmínky>>doc:uzivatelsky-manual.Pro-spravce.Priklady-podminek.WebHome]]vnásledujících částek nastavení, jinak by spadla reindexace:253 +* **Před ukončením importního módu je třeba vytvořit zálohu databáze.** 254 +* **Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! **(u velkého serveru může zastavení trvat i půl hodiny) 255 +* Pokud se převáděla konfigurace výpůjčního protokolu je potřeba projít a opravit podmínky v následujících částek nastavení, jinak by spadla reindexace: 267 267 ** Kategorie operací 268 268 ** Pravidla registrací 269 269 ** Prohledávané oblasti ... ... @@ -277,11 +277,81 @@ 277 277 * **Restart Tomcatu pomocí tools** (vyčistí se paměť po importu) !!!((( 278 278 279 279 ))) 280 -* ** {{html}}<span style="color: red;">Provést nastavení podle checklist!!!!</span>{{/html}}**281 -* ** {{html}}<span style="color: red;">Přečíst 2.1 Tipy a Triky na začátku stránky!</span>{{/html}}**269 +* **Provést nastavení podle checklist!!!!** 270 +* **Přečíst 2.1 Tipy a Triky na začátku stránky!** 282 282 283 283 = Regulární výrazy pro opravy dat = 284 284 285 -Všechny nové regulární výrazy je třeba nejprve otestovat vývojářem - **ReplaceHelperTest**. - příklady viz poslední stránka:274 +Všechny nové regulární výrazy je třeba nejprve otestovat vývojářem - **ReplaceHelperTest**. 286 286 287 -[[attach:TP-109543491-280624-1107-24.pdf||target="_blank"]] 276 +|((( 277 +== Autority == 278 + 279 +|=Popis problému|=Regulární výraz|=Vstup|=Výstup|=(% colspan="1" %)Poznámka 280 +| Pole 100 obsahuje podpole 4.| 281 + 282 +{{{100\\ [\\ 0-9]{2}\\ \\$4.*}}}| 283 + 284 +{{{100 1 $4070}}}| |(% colspan="1" %)Celé pole se zahodí. 285 + 286 +| Obsahuje pole 1??| 287 + 288 +{{{(1\?\?\ )(.*,.*)§100 $2}}} 289 + 290 +{{{(1\?\?\ )(.*)§110 $2}}}| 291 + 292 +{{{1?? $aAudoly, Sylvie}}}| 293 + 294 +{{{100 $aAudoly, Sylvie}}}|(% colspan="1" %)Pokusí se rozpoznat zda se jedná o osobní jméno, nebo korporaci (pokud je osobní jméno, obsahuje hodnota čárku) 295 + 296 +|(% colspan="1" %)Pole 1XXa je prázdné|(% colspan="1" %) 297 + 298 +{{{^1??.*\\$a$}}}| 299 + 300 +{{{199 $a}}}|(% colspan="1" %) |Odstraní se celé opakování pole 301 + 302 +|(% colspan="1" %)Obsahuje pole 100 a 110|(% colspan="1" %) 303 + 304 +{{{^110.*}}}| 305 + 306 +{{{100 1 $aRoni, Luigi 110 2 $aRoni, Luigii}}}| 307 + 308 +{{{100 1 $aRoni, Luigi}}}|(% colspan="1" %)Odstraní opakování pole 110 309 + 310 +== Díla == 311 + 312 +|=Popis problému|=Regulární výraz|=Vstup|=Výstup|=(% colspan="1" %)Poznámka 313 +|Odkazy na soubory v NAWEB obsahují před adresářem neplatné znaky.| 314 + 315 +{{{(X00[\ ]{4}.*\$[uo]).*(NAWEB.*)(\$.*)§$1$2$3 (X00[\ ]{4}.*\$[uo]).*(NAWEB.*)§$1$2}}}| 316 + 317 +{{{X00 $uW:\NAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uW:\NAWEB\OBSAHY\N38492.pdf$tObsah$oW:\NAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oW:\NAWEB\2016_Knihy\N38492.jpg X00 $oW:\NAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oW:\NAWEB\OBSAHY\N38492.pdf$tObsah$uW:\NAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uW:\NAWEB\2016_Knihy\N38492.jpg}}}| 318 + 319 +{{{X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $uNAWEB\OBSAHY\N38492.pdf$tObsah$oNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg X00 $oNAWEB\OBSAHY\N38492.pdf$tObsah$uNAWEB\2016_Knihy\N38492.jpg}}}|(% colspan="1" %)Odstraní znaky co nepatří před NAWEB. 320 + 321 +|(% colspan="1" %)X00 odakzuje na adresář, který neexistuje z důvodu velikosti písmen na linuxu (velikost písmen se musí shodovat).|(% colspan="1" %) 322 + 323 +{{{(X00[\ ]{4}\$[ou]NAWEB[\\/])OBSAHY([\\/].*)§$1Obsahy$2}}}| 324 + 325 +{{{X00 $oNAWEB/OBSAHY/NC3404.pdf}}}| 326 + 327 +{{{X00 $oNAWEB/Obsahy/NC3404.pdf}}}|(% colspan="1" %)Změna velikosti písmen "OBSAHY" → "Obsahy". Regulární příkaz se musí dát až za regulární příkaz opravující validnost cesty. 328 + 329 +|(% colspan="1" %)Obsahuje pole ???.|(% colspan="1" %) 330 + 331 +{{{^\?\?\?.*}}}| 332 + 333 +{{{??? $aCzech Republic$eautomapa}}}|(% colspan="1" %) |Odstraní otazníkové pole. 334 + 335 +|(% colspan="1" %)1XX4 nebo 7XX4 obsahuje neexistující kód role|(% colspan="1" %) 336 + 337 +{{{(^[710]{3}.*)(\$4sut)(.*)§$1$3}}}| 338 + 339 +{{{100 1 $A1000239919$aLiker, Jeffrey K.$7xx0031426$4sut}}}| 340 + 341 +{{{100 1 $A1000239919$aLiker, Jeffrey K.$7xx0031426}}}|(% colspan="1" %)kód role z autority Neznámý kód role odstraní. 342 + 343 + 344 +))) 345 + 346 + ~{~{/html}}~{~{/html}}
- TP-109543491-280624-1107-24.pdf
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.simecek - Size
-
... ... @@ -1,1 +1,0 @@ 1 -48.8 KB - Content