Kod źródłowy Wiki Postup převodu dat z Clavia

Ostatnio modyfikowane 2025/12/18 11:44 przez Jan Šimeček

version	line-number	content
1.1	1
	2
	3	= Záloha dat Clavia pro převod do Tritia =
	4
2.1	5	Postup pro malé knihovny k poslání je zde: [[Záloha dat Clavia pro převod do Tritia>>doc:.Zaloha-dat-Clavia-pro-prevod-do-Tritia.WebHome]]
1.1	6
	7	= Převod =
	8
	9	== Tipy a Triky ==
	10
14.1	11	{{html}}
23.1	12	<button onclick="toggleContent('content1')">Tipy a Triky - přečíst</button>
	13	<div id="content1" style="display: none;">
40.1	14	<hr style="border: none; height: 5px; background-color: black;">
18.1	15	<p>Revize se nepřevádí, musí být před zahájením převodu do Tritia uzavřena.</p>
	16	<p>Dispečink Clavia se nepřevádí, pokud data potřebují, tak si je musí před vypnutím Clavia opsat.</p>
	17	<p>Statistiky LWWW se nepřevádí, knihovna si je musí opsat.</p>
	18	<p>Neměnit klíč v definici poplatků po testovacím převodu, nepovede se pak napojení poplatků při dalším importu - měnit až po posledním importu knihovny.</p>
	19	<p>Neměnit zkratky v odděleních, nebude fungovat vazba výchozího oddělení čtenáře - měnit až po ostrém startu.</p>
40.1	20	<hr style="border: none; height: 5px; background-color: black;">
14.1	21	</div>
16.1	22	<script>
23.1	23	function toggleContent(contentId) {
	24	var content = document.getElementById(contentId);
16.1	25	if (content.style.display === "none") {
	26	content.style.display = "block";
	27	} else {
	28	content.style.display = "none";
	29	}
	30	}
	31	</script>
14.1	32	{{/html}}
1.1	33
	34	== Příprava převodu ==
	35
66.1	36	{{html}}<span style="color: red;">Pokud vyskočí chyba, tak dávat několikrát Opakovat, popřípadě zkusit Ignorovat, ale jen v krajním případě dávat Přerušit!</span>{{/html}}
	37
2.1	38	* Zeptat se knihovny před převodem: [[Dotazy na knihovnu před převodem>>doc:.Dotazy-na-knihovnu-pred-prevodem.WebHome]]
7.1	39	* Zálohu rozbalovat přes {{html}}<span style="color: red;">Total Commander </span>{{/html}}- ne přes Windows průzkumníka!!!
1.1	40
64.1	41	1. {{html}}<span style="color: green;">Aktualizovat Clavius</span>{{/html}} na současnou verzi (
	42	11. Pomůcky → Update přes internet
	43	11. Pomůcky → Ladící funkce → Oprava struktury dat
	44	11. Systém → Obnova indexů)
7.1	45	1. {{html}}<span style="color: green;">Provést synchronizaci polí</span>{{/html}} (Pomůcky → Editace polí → Sync → Aktualizovat)
61.1	46	1. {{html}}<span style="color: red;">U SK knihovny zkontrolovat, že jsou data převedena na eura!</span>{{/html}}[[Návod pro Clavius>>https://www.clavius.sk/euro.htm]]
7.1	47	1. {{html}}<span style="color: green;">Provést kontrolu integrit dat </span>{{/html}}(chyby opravovat !!! hlavně dogenerovat autority a smazat chybná pole)
1.1	48	1*. Katalogizace:
	49	1. do integrit with .t.,.t. ( lze využít i příkazu do tritius** , dělá to samé )
	50	1***. vyzve ke sloučení slovníků C1 a C3 do C1 - dát ano
59.1	51	1***. [[kódy jazyk>>https://ipk.nkp.cz/docs/kp/marc-21/kody-jazyku-marc-21-pdf.-537-kb]] [[kódy zemí>>https://ipk.nkp.cz/docs/kp/marc-21/kody-zemi-marc-21-pdf.-157-kb]]
1.1	52	1. do OKindik with .T.**
	53	1*. Výpůjčák
	54	1**. Clex.exe → Systém → Provést Kontrolu integrity dat)
7.1	55	1. *{{html}}<span style="color: green;">pohled([select !s.scislo, s.pcislo, s.ucislo, #s.ckod from svazky s, (select ckod from svazky group by ckod having count()>1) s1 where s.ckod<>'' and s.ckod=s1.ckod order by s.ckod])</span>{{/html}}**
1.1	56	1*. duplicity čárových kódů svazků řešit ve foxíku tak že za čárový kód přídáte písmeno a,b,c ... kromě prvního výskytu čárového kódu
12.1	57	1. *{{html}}select isxn, count() as pocet from tituly group by isxn order by pocet desc{{/html}}**
52.1	58	1*. kontrola na duplicitu ISBN -> opravit hromadně v TAGu
1.1	59
	60	== Vlastní export dat z Clavia - automaticky (verze Clavia od 28.2.2019) ==
	61
14.1	62	* {{html}}<span style="color: red;">Pokud se jedná o reksové centrum, musí export probíhat pod uživatelem Správce Reksu!!</span>{{/html}} ( Systém - Servis dat - Výběr jiné knihovny - zaškrtnout Správce REKSu - OK )
1.1	63	* Při importu REKS knihovny = přečíst oddíl 2.5 ( možná úprava svazků v Claviu )
	64	* ve foxíku spustit:
	65	* do FULLEXPORT
	66	** -vyzve ke kontrole OKAcisla - dát ano a lze jít spát, bude následně automaticky pokračovat export tagů
	67	* TAG soubory se automaticky vygenerují do složky TXT ve složce Clavius
	68
	69	== Příprava CLAVIUS SQL ==
32.1	70
31.1	71	{{html}}
41.1	72	<button onclick="toggleContent('content4')">O programu NASQL</button>
31.1	73	<div id="content4" style="display: none;">
40.1	74	<hr style="border: none; height: 5px; background-color: black;">
32.1	75	<p>Pro převod dat akvizice, výpůjčního protokolu a další částí se používá přímý převod do Tritiia z SQL databáze Clavius.
	76	<p>Proto je nutné převést celý Clavius do SQL (lze využít SQL server pro Tritius), tento krok lze vynechat jen pokud se importuje pouze fond.
	77	<p>Je zapotřebí použít program <b>NASQL.exe</b></p>
40.1	78	<hr style="border: none; height: 5px; background-color: black;">
31.1	79	</div>
	80	<script>
	81	function toggleContent(contentId) {
	82	var content = document.getElementById(contentId);
	83	if (content.style.display === "none") {
	84	content.style.display = "block";
	85	} else {
	86	content.style.display = "none";
	87	}
	88	}
	89	</script>
	90	{{/html}}
1.1	91
	92	== Importování knihovny pokud v cílovém Tritiu již je část svazků (např. Výměnné soubory) ==
	93
57.1	94	{{html}}
	95	<span style="color: red;">Při importu např. na Lounský serveru je někdy VF v Claviu jako vlastní fond, a u některých VF svazků v Claviu je v čárovém jiný prefix, něž mají Louny, takže se importem nerozpozná, že jde o duplicitu. Je potřeba toto při každém importu REKSovky do Tritia pečlivě hlídat.</span>
	96	{{/html}}
	97
65.1	98	--V případě připojování dat je nutná existence čárového kódu v tabulce svazky u výměnných souborů, aby došlo ke správnému napárování DEPRECATED:--
1.1	99
42.1	100	{{html}}
	101	<button onclick="toggleContent('content2')">Postup kontroly a příkazy pro vygenerování</button>
25.1	102	<div id="content2" style="display: none;">
40.1	103	<hr style="border: none; height: 5px; background-color: black;">
30.1	104	<p><b>Kontrola dat v Claviu, jestli obsahují vygenerovaný správně ckod, kdy 31840 - je prefix nadřízené knihovny:</b></p>
27.1	105	<br>
	106	<p>browse for betw(val(pcislo),500000,599999) and !empt(ckod) and ckod<>'31840'</p>
	107	<br>
30.1	108	<p><b>Pokud nic nevrátí, tak netřeba dělat! V opačném případě je potřeba předem dogenerovat do svazky.ckod čárový kód s prefiem nadřízené knihovny:</b></p>
27.1	109	<br>
	110	<p>browse for betw(val(pcislo),500000,599999) and betw(len(allt(ckod)),0,8)</p>
	111	<br>
	112	<p>repl ckod with '31840'+padl(allt(pcislo),8,'0') for betw(val(pcislo),500000,599999) and betw(len(allt(ckod)),0,8)</p>
	113	<p>repl ckod with '31840'+right(ckod,7) for betw(val(pcislo),500000,599999) and !empt(ckod) and ckod<>'31840'</p>
40.1	114	<hr style="border: none; height: 5px; background-color: black;">
25.1	115	</div>
	116	<script>
	117	function toggleContent(contentId) {
	118	var content = document.getElementById(contentId);
	119	if (content.style.display === "none") {
	120	content.style.display = "block";
	121	} else {
	122	content.style.display = "none";
	123	}
	124	}
42.1	125	</script>
	126	{{/html}}
29.1	127
28.1	128	Je nutné zkontrolovat u VS, aby svazky měli {{html}}<span style="color: red;">vyplněný</span>{{/html}} CKOD (viz výše) a poté {{html}}<span style="color: red;">PIDKN</span>{{/html}} obsahovalo znak {{html}}<span style="color: red;">˙</span>{{/html}} :
29.1	129
30.1	130	{{html}}
	131	<button onclick="toggleContent('content3')">Postup kontroly a příkazy pro vygenerování</button>
29.1	132	<div id="content3" style="display: none;">
40.1	133	<hr style="border: none; height: 5px; background-color: black;">
30.1	134	<p><b>Kontrola:</b></p>
28.1	135	<p>pohled("SELECT * FROM svazky where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p>
	136	<p></p>
54.1	137	<p>- Zontrolovat okem, ujistit se že jsou to VS a až pak opravit.</p>
30.1	138	<p><b>Oprava:</b></p>
28.1	139	<p>pohled("UPDATE svazky SET pidkn = '˙' where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p>
40.1	140	<hr style="border: none; height: 5px; background-color: black;">
28.1	141	</div>
	142	<script>
	143	function toggleContent(contentId) {
	144	var content = document.getElementById(contentId);
	145	if (content.style.display === "none") {
	146	content.style.display = "block";
	147	} else {
	148	content.style.display = "none";
	149	}
	150	}
30.1	151	</script>
	152	{{/html}}
29.1	153
1.1	154	//Rozdíly oproti bodu 2.6.2 Import dat~://
	155
33.1	156	1. {{html}}<span style="color: green;">Díla:</span>{{/html}}
1.1	157
34.1	158	* vybrat v roletce pro duplicity: {{html}}<span style="color: red;">Kontroluje duplicitu čárových kódů - duplicitní čárové kódy neimportuje a nepřidá je failed souboru</span>{{/html}}
	159	** doporučuji použít až na druhý pokus a okem zkontrolovat, že jsou to opravdu duplicity s knihovnou, která už je na serveru
1.1	160
33.1	161	1. {{html}}<span style="color: green;">Výpůjčky:</span>{{/html}}
1.1	162
34.1	163	* Vybrat {{html}}<span style="color: red;">KPUJCKY_REKS</span>{{/html}} a neimportovat KPUJCKY!
1.1	164
	165	== Import dat v Tritiu, pokud v cílovém Tritiu není část svazků (např. Výměnné soubory) ==
	166
	167	=== Založení knihovny v Tritiu ===
	168
	169	Je potřeba zaregistrovat novou knihovnu v Tritiu (Přihlášení do Tritia tlačítko Registrovat)
	170
35.1	171	Při převádění REKSového Clavia nebo převádění knihovny, která má {{html}}<span style="color: red;">Carmen</span></span>{{/html}} (Knihovna s REKSovkami - Clavius neobsahuje pouze jednu knihovnu) nedávat po registraci vytvořit webovou definici - vznikne naimportováním DEFWEB, kdy dojde k založení webové definice pro každou REKSovou knihovnu.
1.1	172
35.1	173	{{html}}
	174	<span style="color: red;">!!!Před zahájením zkontrolovat dostatek místa na disku VM!!!</span>
	175	{{/html}}
1.1	176
	177	Kontrolu lze provést 2 způsoby:
	178
	179	1. přes putty pomocí příkazu df -h
	180	1. v Zabixxu: Sledování → Obrazovky → VM Overview → Hostitel vybrat VM a podívat se na graf Disk space usage
	181
	182	=== Import dat ===
	183
62.1	184	{{html}}
	185	<span style="color: red; font-size: 20px;">!!!Pokud se jedná o sdílený server, tak převádět až po 20:00 a provést zálohu databáze, kdyby se něco zvrtlo co nedokáže <a href="https://doc.tritius.cz/bin/view/uzivatelsky-manual/Pro-spravce/Postup-prevodu-dat-z-Clavia/Postup-Odstraneni-importovanych-dat/">Postup Odstranění importovaných dat</a> vyřešit a bylo potřeba provést obnovení!!!</span>
	186	{{/html}}
	187
	188
36.1	189	{{html}}<span style="color: red;">Import REKS:</span>{{/html}} nezapomenout {{html}}<span style="color: red;">zamknout</span>{{/html}} slovníky (především klíčová slova, popřípadě dodavatele)
1.1	190
36.1	191	{{html}}<span style="color: red;">POZOR!!!!</span>{{/html}}: kontrola na existenci A podpolí v Tritiu, které zbyli od minulého importu, pokud ano tak smazat před importem!:
1.1	192
37.1	193	{{html}}
42.1	194	<button onclick="toggleContent('content5')">Příkaz pro kontrolu</button>
37.1	195	<div id="content5" style="display: none;">
39.1	196	<hr style="border: none; height: 5px; background-color: black;">
37.1	197	<p>select count(*) from authority_data where subfield_definition in (</p>
	198	<p>select id from subfield_definition where name_sub='A')</p>
	199	<br>
	200	<p>select count(*) from work_data where subfield_definition in (</p>
	201	<p>select id from subfield_definition where name_sub='A')</p>
	202	<br>
	203	<p>dále:</p>
	204	<p>Po zapnutí Importovacího módu nesmí tabulka import_id_backup obsahovat jediný řádek, který má ve sloupci library ID právě převáděné knihovny, tedy select * from import_id_backup where library = ID_prave_prevadene_knihovny musí vrátit 0 .</p>
39.1	205	<hr style="border: none; height: 5px; background-color: black;">
37.1	206	</div>
	207	<script>
	208	function toggleContent(contentId) {
	209	var content = document.getElementById(contentId);
	210	if (content.style.display === "none") {
	211	content.style.display = "block";
	212	} else {
	213	content.style.display = "none";
	214	}
	215	}
	216	</script>
	217	{{/html}}
1.1	218
2.1	219	* Pokud importuji do knihovny s defaultně jiným jazykem (slovenské knihovny) musím před importem správně nastavit SYSTEM_DEFAULT_LANGUAGE tak i LOCALE.
44.1	220	* Pokud se nejedná o multiknihovní instanci, nastavit v položkách nastavení {{html}}<span style="color: red;">MULTI_LIBRARY_INSTANCE</span>{{/html}} na false ( -304 ) - musí se provést před importem vzkazů čtenářů.
	221	* V záložce Systém je volba {{html}}<span style="color: green;">Import dat</span>{{/html}}
1.1	222	* Spustí se importní mód - běžní uživatelé se do knihovny v importním módu nemohou přihlásit
	223	* //Doporučení - naimportovat dump databáze na VM s Tritiem pod uživatelem root (import je řádově rychlejší)//
	224	* URL spojení databázi Clavius SQL kde jsou výpůjčky :
68.1	225	Pro MySQL: jdbc:mysql:~/~/server.lanius.cz:3306/////{{html}}<span style="color: red;">databaseName</span>{{/html}}?useUnicode=true&characterEncoding=UTF-8&serverTimezone=Europe/Prague**
	226	Pro MSSQL: jdbc:sqlserver:~/~/192.168.0.24:11150;databaseName={{html}}<span style="color: red;">databaseName</span>{{/html}}**;SendStringParametersAsUnicode=False;
44.1	227	* Zadáte uživatele a heslo pro připojení do databáze a tlačítkem {{html}}<span style="color: green;">Připojit</span>{{/html}} provedete spojení (po úspěchu se tlačítko změní na Odpojit)
	228	* {{html}}<span style="color: green;">Start import mode</span>{{/html}}
1.1	229	* Postupně procházíme jednotlivé záložky zleva do prava. Vynecháváme ty které nejsou vždy (akvizice, webový katalog Carmen)
55.1	230	{{html}}<span style="color: green;">Záložka Definice</span>{{/html}} {{html}}<span style="color: red;">(u sdíleného serveru zvážit neimportování kvůli tvorbě duplicit nebo je naimportovat a pak ty co už na serveru jsou vymazat)</span>{{/html}}- vybrat postupně po jedné definiční tabulky a dejte Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!)
1.1	231	* Definici webů (DEFWEB)** importovat pouze pro REKSové knihovny (při převodu do sdílené knihovny je třeba založit ručně při registraci knihovny)
	232	*** Pokud se nepodaří v případě knihovny, která má Carmen převést DEFWEB, tak stačí v Tritius založit ručně webovou definici a do import_id vyplnit ID, které se najde v databázi Clavia:
	233	*** SELECT distinct defWebId FROM car_cloud;
	234
68.1	235	*
1.1	236	** //Doporučení - Pokud se jedná o převod větší knihovny, tak po importu větších dat (autorit, díla, poplatky, čtenáři, výpůjčky, ...) dělat zálohu databáze//
44.1	237	{{html}}<span style="color: green;">Záložka Autority</span>{{/html}} {{html}}<span style="color: red;">(u REKSovky zvážit neimportování!)</span>{{/html}}**:
1.1	238	* tlačítko Nahrát soubor nalistujeme AUTORITY.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed
	239	** Pokud je soubor velký desítky MB a nejde nahrát zkuste přímou adresu např. : [[http:~~/~~/192.168.0.250:8080/Tritius/>>url:http://192.168.0.250:8080/Tritius/cz.effectiva.tritius.Application/Application.html#Import_wizard]] takto obejdete Apache web server
44.1	240	{{html}}<span style="color: green;">Záložka Díla a Svazky </span>{{/html}} {{html}}<span style="color: red;">(u REKSovky zvážit ztitulování a neskládání autorit!)</span>{{/html}}:**
1.1	241	* obsah složky NAWEB** z Clavia (pokud existuje) - v průvodci importu dat je na záložce import děl tlačítko, které nahraje zabalenou složku (NAWEB.zip) do příslušné složky a rozbalí. (dříve - ručně nakopírovat do složky Tritia (\tritius\files\Clavius\WORK\NAWEB)
44.1	242	*** {{html}}<span style="color: red;">Pozor: zkontrolovat názvy souborů pokud obsahují mezery nebo znaky s diakritikou nedojde k propojení !!!</span>{{/html}}
1.1	243	*** Typ importu duplicit - kontroluje duplicitu podle typu dokumentu a ISBN, popřípadě podle typu dokumentu, názvu, autora a roku (Zkontrolovat duplicity ISBN v TAGu)
	244	* Přes Nahrát soubor vybereme DATA.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed
	245	* Problémové záznamy v souboru failed, které se nenaimportovaly, je potřeba hned řešit tzn. opravit a opakovaně importovat teprve pak se může pokračovat**!
44.1	246	{{html}}<span style="color: green;">Čtenáři:</span>{{/html}}**
	247	*** Vybrat CTENARI nebo CTENARI_DO_VSECH_KNIHOVEN - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}}
	248	{{html}}<span style="color: green;">MVS</span>{{/html}}**
63.1	249	*** Lepší Vytvářet nové záznamy, aby nedocházelo k propojení rezervací na MVS. (i u importu REKS)
44.1	250	{{html}}<span style="color: green;">Záložka Výpůjčky</span>{{/html}}**:
	251	*** Vybrat KPUJCKY nebo KPUJCKY_REKS - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}}
1.1	252	*** postupně po jednotlivých tabulkách importovat a v logu kontrolovat provedení.
	253	* Poplatky **- způsob uhrazení (poplatek.kartou)
	254	**** 0 - platba v hotovosti
	255	**** 1, 2, 3, 4 - platba kartou
	256	**** 5, 6, 7 - platba na účet
	257	**** 8, 9 - platba kreditem
	258	* //Odstranit z VM databázi Clavia, pokud byla naimportována do VM.//
	259
	260	=== Odstranění importovaných dat ===
	261
45.1	262	Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>>doc:.Postup-Odstraneni-importovanych-dat.WebHome]]
1.1	263
	264	== Nastavení po importu ==
	265
45.1	266	* {{html}}<span style="color: red;">Před ukončením importního módu je třeba vytvořit zálohu databáze.</span>{{/html}}
46.1	267	* {{html}}<span style="color: red;">Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! (u velkého serveru může zastavení trvat i půl hodiny)</span>{{/html}}**
51.1	268	* Pokud se převáděla konfigurace výpůjčního protokolu je potřeba projít a opravit [[podmínky >>doc:uzivatelsky-manual.Pro-spravce.Priklady-podminek.WebHome]]v následujících částek nastavení, jinak by spadla reindexace:
1.1	269	** Kategorie operací
	270	** Pravidla registrací
	271	** Prohledávané oblasti
	272	Definice webů - nastavit také výp. kategorii Nezobrazovat na WWW** ((itemBorrowCategoryId IS NULL OR itemBorrowCategoryId <> 3)) - ID se liší podle převodu
	273	* Na poslední záložce Naplánované úlohy spustit postupně od shora jednotlivé operace
	274	** u malé knihovny nečekat na dokončení a lze pustit od shora najednou
	275	** u velké knihovny pustit 1., 2., 3., počkat na dokončení a poté pustit 4. a po dokončení pustit 5. a po dokončení pustit 6.
	276
	277	== Závěrečné důležité operace ==
	278
	279	* Restart Tomcatu pomocí tools (vyčistí se paměť po importu) !!!(((
	280
	281	)))
45.1	282	* {{html}}<span style="color: red;">Provést nastavení podle checklist!!!!</span>{{/html}}
	283	* {{html}}<span style="color: red;">Přečíst 2.1 Tipy a Triky na začátku stránky!</span>{{/html}}
1.1	284
	285	= Regulární výrazy pro opravy dat =
	286
50.1	287	Všechny nové regulární výrazy je třeba nejprve otestovat vývojářem - ReplaceHelperTest. - příklady viz poslední stránka:
1.1	288
49.1	289	[[attach:TP-109543491-280624-1107-24.pdf\|\|target="_blank"]]

Kod źródłowy Wiki Postup převodu dat z Clavia

Interní

Aplikacje

Nawigacja