Postup převodu dat z Clavia - Dokumentace Tritius

<p>Neměnit klíč v definici poplatků po testovacím převodu, nepovede se pak napojení poplatků při dalším importu - měnit až po posledním importu knihovny.</p>

19

<p>Neměnit zkratky v odděleních, nebude fungovat vazba výchozího oddělení čtenáře - měnit až po ostrém startu.</p>

20

21

</div>

22

23

function toggleContent(contentId) {

24

var content = document.getElementById(contentId);

25

if (content.style.display === "none") {

26

content.style.display = "block";

27

} else {

28

content.style.display = "none";

}

}

</script>

== Příprava převodu ==

35

36

* Zeptat se knihovny před převodem: [[Dotazy na knihovnu před převodem>>doc:.Dotazy-na-knihovnu-pred-prevodem.WebHome]]

37

* Zálohu rozbalovat přes **{{html}}<span style="color: red;">Total Commander </span>{{/html}}**- ne přes Windows průzkumníka!!!

38

39

1. **{{html}}<span style="color: green;">Aktualizovat Clavius</span>{{/html}}** na současnou verzi (Pomůcky → Update přes internet)

40

1. **{{html}}<span style="color: green;">Provést synchronizaci polí</span>{{/html}}** (Pomůcky → Editace polí → Sync → Aktualizovat)

41

1. **{{html}}<span style="color: green;">Provést kontrolu integrit dat </span>{{/html}}**(chyby opravovat !!! hlavně dogenerovat autority a smazat chybná pole)

42

1*. Katalogizace:

43

1**. **do integrit with .t.,.t. **( lze využít i příkazu **do tritius** , dělá to samé )

44

1***. vyzve ke sloučení slovníků C1 a C3 do C1 - dát ano

45

1**. **do OKindik with .T.**

46

1*. Výpůjčák

47

1**. Clex.exe → Systém → Provést Kontrolu integrity dat)

48

1. **{{html}}<span style="color: green;">pohled([select !s.scislo, s.pcislo, s.ucislo, #s.ckod from svazky s, (select ckod from svazky group by ckod having count(*)>1) s1 where s.ckod<>'' and s.ckod=s1.ckod order by s.ckod])</span>{{/html}}**

49

1*. duplicity čárových kódů svazků řešit ve foxíku tak že za čárový kód přídáte písmeno a,b,c ... kromě prvního výskytu čárového kódu

50

1. **{{html}}select isxn, count(*) as pocet from tituly group by isxn order by pocet desc{{/html}}**

51

1*. kontrola na duplicitu ISBN

52

53

== Vlastní export dat z Clavia - automaticky (verze Clavia od 28.2.2019) ==

54

55

* **{{html}}<span style="color: red;">Pokud se jedná o reksové centrum, musí export probíhat pod uživatelem Správce Reksu!!</span>{{/html}}** ( Systém - Servis dat - Výběr jiné knihovny - zaškrtnout Správce REKSu - OK )

56

* Při importu REKS knihovny = přečíst oddíl 2.5 ( možná úprava svazků v Claviu )

57

* ve foxíku spustit:

58

* **do FULLEXPORT**

59

** -vyzve ke kontrole OKAcisla - dát ano a lze jít spát, bude následně automaticky pokračovat export tagů

60

* TAG soubory se automaticky vygenerují do složky TXT ve složce Clavius

61

62

== Příprava CLAVIUS SQL ==

63

64

65

<button onclick="toggleContent('content4')">O programu NASQL</button>

66

67

68

<p>Pro převod dat akvizice, výpůjčního protokolu a další částí se používá přímý převod do Tritiia z SQL databáze Clavius.

69

<p>Proto je nutné převést celý Clavius do SQL (lze využít SQL server pro Tritius), tento krok lze vynechat jen pokud se importuje pouze fond.

70

<p>Je zapotřebí použít program <b>NASQL.exe</b></p>

</div>

function toggleContent(contentId) {

75

var content = document.getElementById(contentId);

76

if (content.style.display === "none") {

77

content.style.display = "block";

78

} else {

79

content.style.display = "none";

}

}

</script>

== Importování knihovny pokud v cílovém Tritiu již je část svazků (např. Výměnné soubory) ==

86

87

V případě připojování dat je nutná existence čárového kódu v tabulce svazky u výměnných souborů, aby došlo ke správnému napárování:

88

89

90

<button onclick="toggleContent('content2')">Postup kontroly a příkazy pro vygenerování</button>

91

92

93

<p><b>Kontrola dat v Claviu, jestli obsahují vygenerovaný správně ckod, kdy 31840 - je prefix nadřízené knihovny:</b></p>

94

<br>

95

<p>browse for betw(val(pcislo),500000,599999) and !empt(ckod) and ckod<>'31840'</p>

96

<br>

97

<p><b>Pokud nic nevrátí, tak netřeba dělat! V opačném případě je potřeba předem dogenerovat do svazky.ckod čárový kód s prefiem nadřízené knihovny:</b></p>

98

<br>

99

<p>browse for betw(val(pcislo),500000,599999) and betw(len(allt(ckod)),0,8)</p>

100

<br>

101

<p>repl ckod with '31840'+padl(allt(pcislo),8,'0') for betw(val(pcislo),500000,599999) and betw(len(allt(ckod)),0,8)</p>

102

<p>repl ckod with '31840'+right(ckod,7) for betw(val(pcislo),500000,599999) and !empt(ckod) and ckod<>'31840'</p>

</div>

function toggleContent(contentId) {

107

var content = document.getElementById(contentId);

108

if (content.style.display === "none") {

109

content.style.display = "block";

110

} else {

111

content.style.display = "none";

}

}

</script>

Je nutné zkontrolovat u VS, aby svazky měli {{html}}<span style="color: red;">vyplněný</span>{{/html}} CKOD (viz výše) a poté {{html}}<span style="color: red;">PIDKN</span>{{/html}} obsahovalo znak {{html}}<span style="color: red;">˙</span>{{/html}} :

118

119

120

<button onclick="toggleContent('content3')">Postup kontroly a příkazy pro vygenerování</button>

121

122

123

<p><b>Kontrola:</b></p>

124

<p>pohled("SELECT * FROM svazky where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p>

125

<p></p>

126

<p><b>Oprava:</b></p>

127

<p>pohled("UPDATE svazky SET pidkn = '˙' where ckod <> ' ' AND ckod not like 'prefixImportovaneREKSovky%' AND pidkn != '˙'")</p>

</div>

function toggleContent(contentId) {

132

var content = document.getElementById(contentId);

133

if (content.style.display === "none") {

134

content.style.display = "block";

135

} else {

136

content.style.display = "none";

}

}

</script>

//Rozdíly oproti bodu 2.6.2 Import dat~://

143

144

1. **{{html}}<span style="color: green;">Díla:</span>{{/html}}**

145

146

* vybrat v roletce pro duplicity: {{html}}<span style="color: red;">Kontroluje duplicitu čárových kódů - duplicitní čárové kódy neimportuje a nepřidá je failed souboru</span>{{/html}}

147

** doporučuji použít až na druhý pokus a okem zkontrolovat, že jsou to opravdu duplicity s knihovnou, která už je na serveru

148

149

1. **{{html}}<span style="color: green;">Výpůjčky:</span>{{/html}}**

150

151

* Vybrat {{html}}<span style="color: red;">KPUJCKY_REKS</span>{{/html}} a neimportovat KPUJCKY!

152

153

== Import dat v Tritiu, pokud v cílovém Tritiu není část svazků (např. Výměnné soubory) ==

154

155

=== Založení knihovny v Tritiu ===

156

157

Je potřeba zaregistrovat novou knihovnu v Tritiu (Přihlášení do Tritia tlačítko Registrovat)

158

159

Při převádění REKSového Clavia nebo převádění knihovny, která má {{html}}<span style="color: red;">Carmen</span></span>{{/html}} (Knihovna s REKSovkami - Clavius neobsahuje pouze jednu knihovnu) nedávat po registraci vytvořit webovou definici - vznikne naimportováním DEFWEB, kdy dojde k založení webové definice pro každou REKSovou knihovnu.

160

161

162

<span style="color: red;">!!!Pokud se jedná o sdílený server, kde již běží knihovny na ostro, tak provést zálohu databáze, kdyby se něco zvrtlo co nedokáže <a href="https://doc.tritius.cz/bin/view/uzivatelsky-manual/Pro-spravce/Postup-prevodu-dat-z-Clavia/Postup-Odstraneni-importovanych-dat/">Postup Odstranění importovaných dat</a> vyřešit a bylo potřeba provést obnovení!!!</span>

<span style="color: red;">!!!Před zahájením zkontrolovat dostatek místa na disku VM!!!</span>

167

168

169

Kontrolu lze provést 2 způsoby:

170

171

1. přes putty pomocí příkazu df -h

172

1. v Zabixxu: Sledování → Obrazovky → VM Overview → Hostitel vybrat VM a podívat se na graf Disk space usage

=== Import dat ===

{{html}}<span style="color: red;">Import REKS:</span>{{/html}} nezapomenout **{{html}}<span style="color: red;">zamknout</span>{{/html}}** slovníky (především klíčová slova, popřípadě dodavatele)

177

178

**{{html}}<span style="color: red;">POZOR!!!!</span>{{/html}}**: kontrola na existenci A podpolí v Tritiu, které zbyli od minulého importu, pokud ano tak smazat před importem!:

179

180

181

<button onclick="toggleContent('content5')">Příkaz pro kontrolu</button>

182

183

184

<p>select count(*) from authority_data where subfield_definition in (</p>

185

<p>select id from subfield_definition where name_sub='A')</p>

186

<br>

187

<p>select count(*) from work_data where subfield_definition in (</p>

188

<p>select id from subfield_definition where name_sub='A')</p>

189

<br>

190

191

<p>Po zapnutí Importovacího módu nesmí tabulka import_id_backup obsahovat jediný řádek, který má ve sloupci library ID právě převáděné knihovny, tedy select * from import_id_backup where library = ID_prave_prevadene_knihovny musí vrátit 0 .</p>

</div>

function toggleContent(contentId) {

196

var content = document.getElementById(contentId);

197

if (content.style.display === "none") {

198

content.style.display = "block";

199

} else {

200

content.style.display = "none";

}

}

</script>

* Pokud importuji do knihovny s defaultně jiným jazykem (slovenské knihovny) musím před importem správně nastavit **SYSTEM_DEFAULT_LANGUAGE **tak i** LOCALE.**

207

* Pokud se nejedná o multiknihovní instanci, nastavit v položkách nastavení **{{html}}<span style="color: red;">MULTI_LIBRARY_INSTANCE</span>{{/html}}** na false ( -304 ) - musí se provést před importem vzkazů čtenářů.

208

* V záložce **Systém** je volba **{{html}}<span style="color: green;">Import dat</span>{{/html}}**

209

* Spustí se importní mód - běžní uživatelé se do knihovny v importním módu nemohou přihlásit

210

* //Doporučení - naimportovat dump databáze na VM s Tritiem pod uživatelem root (import je řádově rychlejší)//

211

* URL spojení databázi Clavius SQL kde jsou výpůjčky :

212

** Pro MySQL: **jdbc:mysql:~/~/server.lanius.cz:3306///{{html}}<span style="color: green;"><databaseName></span>{{/html}}//?useUnicode=true&characterEncoding=UTF-8&serverTimezone=Europe/Prague**

213

** Pro MSSQL: **jdbc:sqlserver:~/~/192.168.0.24:1433;databaseName=//{{html}}<span style="color: green;"><databaseName></span>{{/html}}//**;SendStringParametersAsUnicode=False;

214

* Zadáte uživatele a heslo pro připojení do databáze a tlačítkem **{{html}}<span style="color: green;">Připojit</span>{{/html}}** provedete spojení (po úspěchu se tlačítko změní na **Odpojit**)

215

* **{{html}}<span style="color: green;">Start import mode</span>{{/html}}**

216

* Postupně procházíme jednotlivé záložky zleva do prava. Vynecháváme ty které nejsou vždy (akvizice, webový katalog Carmen)

217

** **{{html}}<span style="color: green;">Záložka Definice</span>{{/html}}** - vybrat postupně po jedné definiční tabulky a dejte **Importuj** vybrané tabulky (v případě opakovaného importu podruhé neprovádět !!!)

218

*** **Definici webů (DEFWEB)** importovat pouze pro REKSové knihovny (při převodu do sdílené knihovny je třeba založit ručně při registraci knihovny)

219

*** Pokud se nepodaří v případě knihovny, která má Carmen převést DEFWEB, tak stačí v Tritius založit ručně webovou definici a do import_id vyplnit ID, které se najde v databázi Clavia:

220

*** SELECT distinct defWebId FROM car_cloud;

221

222

*

223

** //Doporučení - Pokud se jedná o převod větší knihovny, tak po importu větších dat (autorit, díla, poplatky, čtenáři, výpůjčky, ...) dělat zálohu databáze//

224

** **{{html}}<span style="color: green;">Záložka Autority</span>{{/html}} {{html}}<span style="color: red;">(u REKSovky zvážit neimportování!)</span>{{/html}}**:

225

*** tlačítko Nahrát soubor nalistujeme **AUTORITY.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed

226

** Pokud je soubor velký desítky MB a nejde nahrát zkuste přímou adresu např. : [[http:~~/~~/192.168.0.250:8080/Tritius/>>url:http://192.168.0.250:8080/Tritius/cz.effectiva.tritius.Application/Application.html#Import_wizard]] takto obejdete Apache web server

227

** **{{html}}<span style="color: green;">Záložka Díla a Svazky </span>{{/html}} {{html}}<span style="color: red;">(u REKSovky zvážit ztitulování a neskládání autorit!)</span>{{/html}}:**

228

*** obsah složky **NAWEB** z Clavia (pokud existuje) - v průvodci importu dat je na záložce import děl tlačítko, které nahraje zabalenou složku (NAWEB.zip) do příslušné složky a rozbalí. (dříve - ručně nakopírovat do složky Tritia (\tritius\files\Clavius\WORK\NAWEB)

229

*** {{html}}<span style="color: red;">Pozor: zkontrolovat názvy souborů pokud obsahují mezery nebo znaky s diakritikou nedojde k propojení !!!</span>{{/html}}

230

*** Typ importu duplicit - kontroluje duplicitu podle typu dokumentu a ISBN, popřípadě podle typu dokumentu, názvu, autora a roku (Zkontrolovat duplicity ISBN v TAGu)

231

*** Přes Nahrát soubor vybereme **DATA.TAG** a po jeho nahrání jej vybereme a dáme Importovat. Po importu jsou chybné, neimportované záznamy v souboru failed

232

*** Problémové záznamy v souboru failed, které se nenaimportovaly, je potřeba hned řešit tzn. **opravit a opakovaně importovat teprve pak se může pokračovat**!

233

** **{{html}}<span style="color: green;">Čtenáři:</span>{{/html}}**

234

*** Vybrat CTENARI nebo CTENARI_DO_VSECH_KNIHOVEN - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}}

235

** **{{html}}<span style="color: green;">MVS</span>{{/html}}**

236

*** Lepší Vytvářet nové záznamy, aby nedocházelo k propojení rezervací na MVS.

237

** **{{html}}<span style="color: green;">Záložka Výpůjčky</span>{{/html}}**:

238

*** Vybrat KPUJCKY nebo KPUJCKY_REKS - {{html}}<span style="color: red;">neimportovat obě!</span>{{/html}}

239

*** postupně po jednotlivých tabulkách importovat a v logu kontrolovat provedení.

240

*** **Poplatky **- způsob uhrazení (poplatek.kartou)

241

**** 0 - platba v hotovosti

242

**** 1, 2, 3, 4 - platba kartou

243

**** 5, 6, 7 - platba na účet

244

**** 8, 9 - platba kreditem

245

* //Odstranit z VM databázi Clavia, pokud byla naimportována do VM.//

246

247

=== Odstranění importovaných dat ===

248

249

Pokud dojde během importu k problému s některou částí importu (kromě nastavení), tak ji lze smazat pomocí: [[Postup Odstranění importovaných dat>>doc:.Postup-Odstraneni-importovanych-dat.WebHome]]

250

251

== Nastavení po importu ==

252

253

* **{{html}}<span style="color: red;">Před ukončením importního módu je třeba vytvořit zálohu databáze.</span>{{/html}}**

254

* **{{html}}<span style="color: red;">Ukončit import mód - až v momentě, kdy jsou všechna data správně převedená! **(u velkého serveru může zastavení trvat i půl hodiny)</span>{{/html}}**

255

* Pokud se převáděla konfigurace výpůjčního protokolu je potřeba projít a opravit podmínky v následujících částek nastavení, jinak by spadla reindexace:

256

** Kategorie operací

257

** Pravidla registrací

258

** Prohledávané oblasti

259

** Definice webů - nastavit také výp. kategorii **Nezobrazovat na WWW** ((itemBorrowCategoryId IS NULL OR itemBorrowCategoryId <> 3)) - ID se liší podle převodu

260

* Na poslední záložce **Naplánované úlohy** spustit postupně od shora jednotlivé operace

261

** u malé knihovny nečekat na dokončení a lze pustit od shora najednou

262

** u velké knihovny pustit 1., 2., 3., počkat na dokončení a poté pustit 4. a po dokončení pustit 5. a po dokončení pustit 6.

263

264

== Závěrečné důležité operace ==

265

266

* **Restart Tomcatu pomocí tools** (vyčistí se paměť po importu) !!!(((

267

268

)))

269

* **{{html}}<span style="color: red;">Provést nastavení podle checklist!!!!</span>{{/html}}**

270

* **{{html}}<span style="color: red;">Přečíst 2.1 Tipy a Triky na začátku stránky!</span>{{/html}}**

271

272

= Regulární výrazy pro opravy dat =

273

274

Všechny nové regulární výrazy je třeba nejprve otestovat vývojářem - **ReplaceHelperTest**.

Kod źródłowy Wiki Postup převodu dat z Clavia