OSDN Git Service

changed spec. of JFM
[luatex-ja/luatexja.git] / src / ltj-jfont.lua
1 --
2 -- luatexja/jfont.lua
3 --
4 luatexbase.provides_module({
5   name = 'luatexja.jfont',
6   date = '2014/10/03',
7   description = 'Loader for Japanese fonts',
8 })
9 module('luatexja.jfont', package.seeall)
10
11 luatexja.load_module('base');      local ltjb = luatexja.base
12 luatexja.load_module('charrange'); local ltjc = luatexja.charrange
13 luatexja.load_module('rmlgbm');    local ltjr = luatexja.rmlgbm
14 luatexja.load_module('direction'); local ltjd = luatexja.direction
15
16
17 local Dnode = node.direct or node
18
19 local setfield = (Dnode ~= node) and Dnode.setfield or function(n, i, c) n[i] = c end
20 local getid = (Dnode ~= node) and Dnode.getid or function(n) return n.id end
21 local getfont = (Dnode ~= node) and Dnode.getfont or function(n) return n.font end
22 local getchar = (Dnode ~= node) and Dnode.getchar or function(n) return n.char end
23
24 local nullfunc = function(n) return n end
25 local to_direct = (Dnode ~= node) and Dnode.todirect or nullfunc
26
27 local node_new = Dnode.new
28 local node_free = Dnode.free
29 local has_attr = Dnode.has_attribute
30 local set_attr = Dnode.set_attribute
31 local node_write = Dnode.write
32 local round = tex.round
33 local font_getfont = font.getfont
34
35 local attr_icflag = luatexbase.attributes['ltj@icflag']
36 local attr_curjfnt = luatexbase.attributes['ltj@curjfnt']
37 local attr_curtfnt = luatexbase.attributes['ltj@curtfnt']
38 local id_glyph = node.id('glyph')
39 local id_kern = node.id('kern')
40 local id_glue_spec = node.id('glue_spec')
41 local id_glue = node.id('glue')
42 local cat_lp = luatexbase.catcodetables['latex-package']
43 local ITALIC       = luatexja.icflag_table.ITALIC
44 local FROM_JFM     = luatexja.icflag_table.FROM_JFM
45
46 ------------------------------------------------------------------------
47 -- LOADING JFM
48 ------------------------------------------------------------------------
49
50 metrics={} -- this table stores all metric informations
51 font_metric_table={} -- [font number] -> jfm_name, jfm_var, size
52
53 luatexbase.create_callback("luatexja.load_jfm", "data", function (ft, jn) return ft end)
54
55 local jfm_file_name, jfm_var
56 local defjfm_res
57 local jfm_dir, is_def_jfont
58
59 function define_jfm(t)
60    local real_char -- Does current character class have the 'real' character?
61    if t.dir~=jfm_dir then
62       defjfm_res= nil; return
63    elseif type(t.zw)~='number' or type(t.zh)~='number' then
64       defjfm_res= nil; return
65    end
66    t.char_type = {}; t.chars = {}
67    for i,v in pairs(t) do
68       if type(i) == 'number' then -- char_type
69          if not v.chars then
70             if i ~= 0 then defjfm_res= nil; return  end
71             real_char = true
72          else
73             real_char = false
74             for j,w in pairs(v.chars) do
75                if type(w) == 'number' and w~=-1 then
76                   real_char = true;
77                elseif type(w) == 'string' and utf.len(w)==1 then
78                   real_char = true; w = utf.byte(w)
79                elseif type(w) == 'string' and utf.len(w)==2 and utf.sub(w,2) == '*' then
80                   real_char = true; w = utf.byte(utf.sub(w,1,1))
81                end
82                if not t.chars[w] then
83                   t.chars[w] = i
84                else
85                   defjfm_res= nil; return
86                end
87             end
88             if type(v.align)~='string' then
89                v.align = 'left' -- left
90             end
91             if real_char then
92                if type(v.width)~='number' and v.width~='prop' then
93                   defjfm_res= nil; return
94                else
95                   if v.width=='prop' and jfm_dir=='tate' then
96                      v.width = 1.0
97                   end
98                   if type(v.height)~='number' then
99                      v.height = 0.0
100                   end
101                   if type(v.depth)~='number' then
102                      v.depth = 0.0
103                   end
104                   if type(v.italic)~='number' then
105                      v.italic = 0.0
106                   end
107                   if type(v.left)~='number' then
108                      v.left = 0.0
109                   end
110                   if type(v.down)~='number' then
111                      v.down = 0.0
112                   end
113                end
114             end
115             v.chars = nil
116          end
117          v.kern = v.kern or {}; v.glue = v.glue or {}
118          for j in pairs(v.glue) do
119             if v.kern[j] then defjfm_res= nil; return end
120          end
121          for j,x in pairs(v.kern) do
122             if type(x)=='number' then
123                v.kern[j] = {x, 0}
124             elseif type(x)=='table' then
125                v.kern[j] = {x[1], x[2] or 0}
126             end
127          end
128          t.char_type[i] = v
129          t[i] = nil
130       end
131    end
132    t = luatexbase.call_callback("luatexja.load_jfm", t, jfm_file_name)
133    t.size_cache = {}
134    defjfm_res = t
135 end
136
137 local update_jfm_cache
138 do
139    local function mult_table(old,scale) -- modified from table.fastcopy
140       if old then
141          local new = { }
142          for k,v in next, old do
143             if type(v) == "table" then
144                new[k] = mult_table(v,scale)
145             elseif type(v) == "number" then
146                new[k] = round(v*scale)
147             else
148                new[k] = v
149             end
150          end
151          return new
152       else return nil end
153    end
154
155    update_jfm_cache = function (j,sz)
156       if metrics[j].size_cache[sz] then return end
157       local t = {}
158       metrics[j].size_cache[sz] = t
159       t.chars = metrics[j].chars
160       t.char_type = mult_table(metrics[j].char_type, sz)
161       for i,v in pairs(t.char_type) do
162          v.align = (v.align=='left') and 0 or
163             ((v.align=='right') and 1 or 0.5)
164          if type(i) == 'number' then -- char_type
165             for k,w in pairs(v.glue) do
166                local h = node_new(id_glue_spec)
167                v[k] = {true, h, (w[5] and w[5]/sz or 0), FROM_JFM + (w[4] and w[4]/sz or 0)}
168                setfield(h, 'width', w[1])
169                setfield(h, 'stretch', w[2])
170                setfield(h, 'shrink', w[3])
171                setfield(h, 'stretch_order', 0)
172                setfield(h, 'shrink_order', 0)
173             end
174             for k,w in pairs(v.kern) do
175                local g = node_new(id_kern)
176                setfield(g, 'kern', w[1])
177                setfield(g, 'subtype', 1)
178                set_attr(g, attr_icflag, FROM_JFM)
179                v[k] = {false, g, w[2]/sz}
180             end
181          end
182          v.glue, v.kern = nil, nil
183       end
184       t.kanjiskip = mult_table(metrics[j].kanjiskip, sz)
185       t.xkanjiskip = mult_table(metrics[j].xkanjiskip,sz)
186       t.zw = round(metrics[j].zw*sz)
187       t.zh = round(metrics[j].zh*sz)
188       t.size = sz
189    end
190 end
191
192 luatexbase.create_callback("luatexja.find_char_class", "data",
193                            function (arg, fmtable, char)
194                               return 0
195                            end)
196 do
197    local start_time_measure = ltjb.start_time_measure
198    local stop_time_measure = ltjb.stop_time_measure
199    local fcc_temp = { chars_cbcache = {} }
200    setmetatable(
201       fcc_temp.chars_cbcache,
202       {
203          __index = function () return 0 end,
204       })
205    function find_char_class(c,m)
206       -- c: character code, m:
207       local r = (m or fcc_temp).chars_cbcache[c]
208       if not r then
209          r = m.chars[c] or
210             luatexbase.call_callback("luatexja.find_char_class", 0, m, c)
211          m.chars_cbcache[c or 0] = r
212       end
213       return r
214    end
215 end
216
217
218 ------------------------------------------------------------------------
219 -- LOADING JAPANESE FONTS
220 ------------------------------------------------------------------------
221
222 do
223    local cstemp
224    local global_flag -- true if \globaljfont, false if \jfont
225    local function load_jfont_metric()
226       if jfm_file_name=='' then
227          ltjb.package_error('luatexja',
228                             'no JFM specified',
229                             'To load and define a Japanese font, a JFM must be specified.'..
230                             "The JFM 'ujis' will be  used for now.")
231          jfm_file_name='ujis'
232       end
233       for j,v in ipairs(metrics) do
234          if v.name==jfm_file_name then return j end
235       end
236       luatexja.load_lua('jfm-' .. jfm_file_name .. '.lua')
237       if defjfm_res then
238          defjfm_res.name = jfm_file_name
239          table.insert(metrics, defjfm_res)
240          return #metrics
241       else
242          return nil
243       end
244    end
245
246 -- EXT
247    function jfontdefX(g, dir)
248       jfm_dir, is_def_jfont = dir, true
249       local t = token.get_next()
250       cstemp=token.csname_name(t)
251       global_flag = g and '\\global' or ''
252       tex.sprint(cat_lp, '\\expandafter\\font\\csname ', cstemp, '\\endcsname')
253    end
254
255    luatexbase.create_callback("luatexja.define_jfont", "data", function (ft, fn) return ft end)
256
257 -- EXT
258    local identifiers = fonts.hashes.identifiers
259    function jfontdefY()
260       local j = load_jfont_metric(jfm_dir)
261       local fn = font.id(cstemp)
262       local f = font_getfont(fn)
263       if not j then
264          ltjb.package_error('luatexja',
265                             "bad JFM `" .. jfm_file_name .. "'",
266                             'The JFM file you specified is not valid JFM file.\n'..
267                                'So defining Japanese font is cancelled.')
268          tex.sprint(cat_lp, global_flag, '\\expandafter\\let\\csname ', cstemp,
269                        '\\endcsname=\\relax')
270          return
271       end
272       update_jfm_cache(j, f.size)
273       local ad = identifiers[fn].parameters
274       local sz = metrics[j].size_cache[f.size]
275       local fmtable = { jfm = j, size = f.size, var = jfm_var,
276                         zw = sz.zw, zh = sz.zh,
277                         ascent = ad.ascender,
278                         descent = ad.descender,
279                         chars = sz.chars, char_type = sz.char_type,
280                         kanjiskip = sz.kanjiskip, xkanjiskip = sz.xkanjiskip,
281                         chars_cbcache = {},
282       }
283
284       fmtable = luatexbase.call_callback("luatexja.define_jfont", fmtable, fn)
285       font_metric_table[fn]=fmtable
286       tex.sprint(cat_lp, global_flag, '\\protected\\expandafter\\def\\csname ',
287                     cstemp , '\\endcsname{\\ltj@cur'..
288                     (jfm_dir == 'yoko' and 'j' or 't') .. 'fnt', fn, '\\relax}')
289    end
290 end
291
292 do
293    local get_dir_count = ltjd.get_dir_count
294    local dir_tate = luatexja.dir_table.dir_tate
295    local tex_get_attr = tex.getattribute
296    -- PUBLIC function
297    function get_zw()
298       local a = font_metric_table[
299          tex_get_attr((get_dir_count()==dir_tate) and attr_curtfnt or attr_curjfnt)]
300       return a and a.zw or 0
301    end
302    function get_zh()
303       local a = font_metric_table[
304          tex_get_attr((get_dir_count()==dir_tate) and attr_curtfnt or attr_curjfnt)]
305       return a and a.zw or 0
306    end
307 end
308
309 do
310    -- extract jfm_file_name and jfm_var
311    -- normalize position of 'jfm=' and 'jfmvar=' keys
312    local function extract_metric(name)
313       jfm_file_name = ''; jfm_var = ''
314       local tmp, index = name:sub(1, 5), 1
315       if tmp == 'file:' or tmp == 'name:' or tmp == 'psft:' then
316          index = 6
317       end
318       local p = name:find(":", index); index = p and (p+1) or index
319       while index do
320          local l = name:len()+1
321          local q = name:find(";", index+1) or l
322          if name:sub(index, index+3)=='jfm=' and q>index+4 then
323             jfm_file_name = name:sub(index+4, q-1)
324             if l~=q then
325                name = name:sub(1,index-1) .. name:sub(q+1)
326             else
327                name = name:sub(1,index-1)
328                index = nil
329             end
330          elseif name:sub(index, index+6)=='jfmvar=' and q>index+6 then
331             jfm_var = name:sub(index+7, q-1)
332             if l~=q then
333                name = name:sub(1,index-1) .. name:sub(q+1)
334             else
335                name = name:sub(1,index-1)
336                index = nil
337             end
338          else
339             index = (l~=q) and (q+1) or nil
340          end
341       end
342       if jfm_file_name~='' then
343          local l = name:sub(-1)
344          name = name
345             .. ((l==':' or l==';') and '' or ';')
346             .. 'jfm=' .. jfm_file_name
347          if jfm_var~='' then
348             name = name .. 'jfmvar=' .. jfm_var
349          end
350       end
351       if jfm_dir == 'tate' then
352          if not name:match('vert') and not name:match('vrt2') then
353             name = name .. ';vert;vrt2'
354          end
355       end
356       return name
357    end
358
359    -- define_font callback
360    local otfl_fdr = fonts.definers.read
361    local ltjr_font_callback = ltjr.font_callback
362    function luatexja.font_callback(name, size, id)
363       local new_name = is_def_jfont and extract_metric(name) or name
364       is_def_jfont = false
365       local res =  ltjr_font_callback(new_name, size, id, otfl_fdr)
366       luatexbase.call_callback('luatexja.define_font', res, new_name, size, id)
367       -- this callback processes variation selector, so we execute it always
368       return res
369    end
370    luatexbase.create_callback('luatexja.define_font', 'simple', function (n) return n end)
371    luatexbase.add_to_callback('define_font',luatexja.font_callback,"luatexja.font_callback", 1)
372 end
373
374 ------------------------------------------------------------------------
375 -- LATEX INTERFACE
376 ------------------------------------------------------------------------
377 do
378    -- these function are called from ltj-latex.sty
379    local kyenc_list, ktenc_list = {}, {}
380    function add_kyenc_list(enc) kyenc_list[enc] = 'true ' end
381    function add_ktenc_list(enc) ktenc_list[enc] = 'true ' end
382    function is_kyenc(enc)
383       tex.sprint(cat_lp, '\\let\\ifin@\\if' .. (kyenc_list[enc] or 'false '))
384    end
385    function is_ktenc(enc)
386       tex.sprint(cat_lp, '\\let\\ifin@\\if' .. (ktenc_list[enc] or 'false '))
387    end
388    function is_kenc(enc)
389       tex.sprint(cat_lp, '\\let\\ifin@\\if'
390                  .. (kyenc_list[enc] or ktenc_list[enc] or 'false '))
391    end
392
393    local kfam_list, Nkfam_list = {}, {}
394    function add_kfam_list(enc, fam)
395       if not kfam_list[enc] then kfam_list[enc] = {} end
396       kfam_list[enc][fam] = 'true '
397    end
398    function add_Nkfam_list(enc, fam)
399       if not Nkfam_list[enc] then Nkfam_list[enc] = {} end
400       Nkfam_list[enc][fam] = 'true '
401    end
402    function is_kfam(enc, fam)
403       tex.sprint(cat_lp, '\\let\\ifin@\\if'
404                  .. (kfam_list[enc] and kfam_list[enc][fam] or 'false ')) end
405    function is_Nkfam(enc, fam)
406       tex.sprint(cat_lp, '\\let\\ifin@\\if'
407                  .. (Nkfam_list[enc] and Nkfam_list[enc][fam] or 'false ')) end
408
409    local ffam_list, Nffam_list = {}, {}
410    function add_ffam_list(enc, fam)
411       if not ffam_list[enc] then ffam_list[enc] = {} end
412       ffam_list[enc][fam] = 'true '
413    end
414    function add_Nffam_list(enc, fam)
415       if not Nffam_list[enc] then Nffam_list[enc] = {} end
416       Nffam_list[enc][fam] = 'true '
417    end
418    function is_ffam(enc, fam)
419       tex.sprint(cat_lp, '\\let\\ifin@\\if'
420                  .. (ffam_list[enc] and ffam_list[enc][fam] or 'false ')) end
421    function is_Nffam(enc, fam)
422       tex.sprint(cat_lp, '\\let\\ifin@\\if'
423                  .. (Nffam_list[enc] and Nffam_list[enc][fam] or 'false ')) end
424 end
425 ------------------------------------------------------------------------
426 -- ALTERNATE FONTS
427 ------------------------------------------------------------------------
428 alt_font_table = {}
429 local alt_font_table = alt_font_table
430 local attr_curaltfnt = {}
431 local ucs_out = 0x110000
432
433 ------ for TeX interface
434 -- EXT
435 function set_alt_font(b,e,ind,bfnt)
436    -- ind: 新フォント, bfnt: 基底フォント
437    if b>e then b, e = e, b end
438    if b*e<=0 then
439       ltjb.package_error('luatexja',
440                         'bad character range ([' .. b .. ',' .. e .. ']). ' ..
441                            'I take the intersection with [0x80, 0x10ffff].')
442       b, e = math.max(0x80,b),math.min(ucs_out-1,e)
443    elseif e<0 then -- b<e<0
444       -- do nothing
445    elseif b<0x80 or e>=ucs_out then
446       ltjb.package_warning('luatexja',
447                            'bad character range ([' .. b .. ',' .. e .. ']). ' ..
448                               'I take the intersection with [0x80, 0x10ffff].')
449       b, e = math.max(0x80,b), math.min(ucs_out-1,e)
450    end
451    if not alt_font_table[bfnt] then alt_font_table[bfnt]={} end
452    local t = alt_font_table[bfnt]
453    local ac = font_getfont(ind).characters
454    if bfnt==ind then ind = nil end -- ind == bfnt の場合はテーブルから削除
455    if e>=0 then -- character range
456       for i=b, e do
457          if ac[i]then  t[i]=ind end
458       end
459    else
460       b, e = -e, -b
461       local tx = font_metric_table[bfnt].chars
462       for i,v in pairs(tx) do
463          if b<=v and v<=e and ac[i] then t[i]=ind end
464       end
465    end
466 end
467
468 -- EXT
469 function clear_alt_font(bfnt)
470    if alt_font_table[bfnt] then
471       local t = alt_font_table[bfnt]
472       for i,_ in pairs(t) do t[i]=nil; end
473    end
474 end
475
476 ------ used in ltjp.suppress_hyphenate_ja callback
477 function replace_altfont(pf, pc)
478    local a = alt_font_table[pf]
479    return a and a[pc] or pf
480 end
481
482 ------ for LaTeX interface
483
484 local alt_font_table_latex = {}
485
486 -- EXT
487 function clear_alt_font_latex(bbase)
488    local t = alt_font_table_latex[bbase]
489    if t then
490       for j,v in pairs(t) do t[j] = nil end
491    end
492 end
493
494 -- EXT
495 function set_alt_font_latex(b,e,ind,bbase)
496    -- ind: Alt font の enc/fam/ser/shape, bbase: 基底フォントの enc/fam/ser/shape
497    if b>e then b, e = e, b end
498    if b*e<=0 then
499       ltjb.package_error('luatexja',
500                         'bad character range ([' .. b .. ',' .. e .. ']). ' ..
501                            'I take the intersection with [0x80, 0x10ffff].')
502       b, e = math.max(0x80,b),math.min(ucs_out-1,e)
503    elseif e<0 then -- b<e<0
504       -- do nothing
505    elseif b<0x80 or e>=ucs_out then
506       ltjb.package_warning('luatexja',
507                            'bad character range ([' .. b .. ',' .. e .. ']). ' ..
508                               'I take the intersection with [0x80, 0x10ffff].')
509       b, e = math.max(0x80,b), math.min(ucs_out-1,e)
510    end
511
512    if not alt_font_table_latex[bbase] then alt_font_table_latex[bbase]={} end
513    local t = alt_font_table_latex[bbase]
514    if not t[ind] then t[ind] = {} end
515    for i=b, e do
516       for j,v in pairs(t) do
517          if v[i] then -- remove old entry
518             if j~=ind then v[i]=nil end; break
519          end
520       end
521       t[ind][i]=true
522    end
523    -- remove the empty tables
524    for j,v in pairs(t) do
525       local flag_clear = true
526       for k,_ in pairs(v) do flag_clear = false; break end
527       if flag_clear then t[j]=nil end
528    end
529    if ind==bbase  then t[bbase] = nil end
530 end
531
532 -- ここから先は 新 \selectfont の内部でしか実行されない
533 do
534    local alt_font_base, alt_font_base_num
535    local aftl_base
536    -- EXT
537    function does_alt_set(bbase)
538       aftl_base = alt_font_table_latex[bbase]
539       tex.sprint(cat_lp, '\\if' .. (aftl_base and 'true' or 'false'))
540    end
541    -- EXT
542    function print_aftl_address()
543       tex.sprint(cat_lp, ';ltjaltfont' .. tostring(aftl_base):sub(8))
544    end
545
546 -- EXT
547    function output_alt_font_cmd(dir, bbase)
548       alt_font_base = bbase
549       if dir == 't' then
550          alt_font_base_num = tex.getattribute(attr_curtfnt)
551       else
552          alt_font_base_num = tex.getattribute(attr_curjfnt)
553       end
554       local t = alt_font_table[alt_font_base_num]
555       if t then
556          for i,_ in pairs(t) do t[i]=nil end
557       end
558       t = alt_font_table_latex[bbase]
559       if t then
560        for i,_ in pairs(t) do
561             tex.sprint(cat_lp, '\\ltj@pickup@altfont@aux' .. dir .. '{' .. i .. '}')
562          end
563       end
564    end
565
566 -- EXT
567    function pickup_alt_font_a(size_str)
568       local t = alt_font_table_latex[alt_font_base]
569       if t then
570          for i,v in pairs(t) do
571             tex.sprint(cat_lp, '\\expandafter\\ltj@pickup@altfont@copy'
572                           .. '\\csname ' .. i .. '/' .. size_str .. '\\endcsname{' .. i .. '}')
573          end
574       end
575    end
576
577    local function pickup_alt_font_class(class, afnt_num, afnt_chars)
578       local t  = alt_font_table[alt_font_base_num]
579       local tx = font_metric_table[alt_font_base_num].chars
580       for i,v in pairs(tx) do
581          if v==class and afnt_chars[i] then t[i]=afnt_num end
582       end
583    end
584
585 -- EXT
586    function pickup_alt_font_b(afnt_num, afnt_base)
587       local t = alt_font_table[alt_font_base_num]
588       local ac = font_getfont(afnt_num).characters
589       if not t then t = {}; alt_font_table[alt_font_base_num] = t end
590       for i,v in pairs(alt_font_table_latex[alt_font_base]) do
591          if i == afnt_base then
592             for j,_ in pairs(v) do
593                if j>=0 then
594                   if ac[j] then t[j]=afnt_num end
595                else  -- -n (n>=1) means that the character class n,
596                      -- which is defined in the JFM
597                   pickup_alt_font_class(-j, afnt_num, ac)
598                end
599             end
600             return
601          end
602       end
603    end
604
605 end
606
607 ------------------------------------------------------------------------
608 -- 追加のフォント情報
609 ------------------------------------------------------------------------
610 font_extra_info = {}
611 local font_extra_info = font_extra_info -- key: fontnumber
612 local font_extra_basename = {} -- key: basename
613
614 -- IVS and vertical metrics
615 local prepare_fl_data
616 local supply_vkern_table
617 do
618    local fields = fontloader.fields
619    local function glyph_vmetric(glyph)
620       local flds = fields(glyph)
621       local vw, tsb, vk = nil, nil, nil
622       for _,i in ipairs(flds) do
623          if i=='vwidth' then vw = glyph.vwidth end
624          if i=='tsidebearing' then tsb = glyph.tsidebearing end
625          if i=='vkerns' then vk = glyph.vkerns end
626       end
627       return vw, tsb, vk
628    end
629
630    local sort = table.sort
631    local function add_fl_table(dest, tg, unitable, glyphmax, asc_des, units)
632       for i = 0, glyphmax-1 do
633          local gv = tg[i]
634          if gv then
635             if gv.altuni then
636                for _,at in pairs(gv.altuni) do
637                   local bu, vsel = at.unicode, at.variant
638                   if vsel then
639                      if vsel>=0xE0100 then vsel = vsel - 0xE0100 end
640                      dest = dest or {}; dest[bu] = dest[bu] or {}
641                      local uniq_flag = true
642                      for i,_ in pairs(dest[bu]) do
643                         if i==vs then uniq_flag = false; break end
644                      end
645                      if uniq_flag then
646                         dest[bu][vsel] = unitable[gv.name]
647                      end
648                   end
649                end
650             end
651             -- vertical metric
652             local vw, tsb, vk = glyph_vmetric(gv)
653             local gi = unitable[gv.name]
654             if vw and vw~=asc_des then
655                -- We do not use tsidebearing, since (1) fontloader does not read VORG table
656                -- and (2) 'tsidebearing' doea not appear in the returned table by fontloader.fields.
657                -- Hence, we assume that vertical origin == ascender
658                -- (see capsule_glyph_tate in ltj-setwidth.lua)
659                dest = dest or {}; dest[gi] = dest[gi] or {}
660                dest[gi].vwidth = vw/units
661             end
662             -- vertical kern
663             if vk then
664                dest = dest or {};
665                local dest_vk = dest.vkerns or {}; dest.vkerns = dest_vk
666                for _,v in pairs(vk) do
667                   local vl = v.lookup
668                   if type(vl)=='table' then
669                      for _,vlt in pairs(vl) do
670                         dest_vk[vlt] = dest_vk[vlt] or {}
671                         dest_vk[vlt][gi] = dest_vk[vlt][gi] or {}
672                         dest_vk[vlt][gi][unitable[v.char]] = v.off
673                      end
674                   else
675                      dest_vk[vl] = dest_vk[vl] or {}
676                      dest_vk[vl][gi] = dest_vk[vl][gi] or {}
677                      dest_vk[vl][gi][unitable[v.char]] = v.off
678                   end
679                end
680             end
681          end
682       end
683       return dest
684    end
685    prepare_fl_data = function (dest, id)
686       local fl = fontloader.open(id.filename)
687       local unicodes = id.resources.unicodes
688       if fl.glyphs then
689          dest = add_fl_table(dest, fl.glyphs, id.resources.unicodes, fl.glyphmax,
690                              fl.ascent + fl.descent, fl.units_per_em)
691       end
692       if fl.subfonts then
693          for _,v in pairs(fl.subfonts) do
694             dest = add_fl_table(dest, v.glyphs, id.resources.unicodes, v.glyphmax,
695                                 fl.ascent + fl.descent, fl.units_per_em)
696          end
697       end
698       fontloader.close(fl)
699       return dest
700    end
701    -- supply vkern table
702    supply_vkern_table = function(id, bname)
703       local bx = font_extra_basename[bname].vkerns
704       local lookuphash =  id.resources.lookuphash
705       local desc = id.shared.rawdata.descriptions
706       if bx then
707          for i,v in pairs(bx) do
708             lookuphash[i] = lookuphash[i] or v
709             for j,w in pairs(v) do
710                desc[j].kerns = desc[j].kerns or {}
711                desc[j].kerns[i] = w
712             end
713          end
714       end
715    end
716 end
717
718 -- 縦書き用字形への変換テーブル
719 local prepare_vert_data
720 do
721    -- local function add_feature_table(tname, src, dest)
722    --    for i,v in pairs(src) do
723    --       if type(v.slookups)=='table' then
724    --          local s = v.slookups[tname]
725    --          if s  then
726    --             dest = dest or {}
727    --             dest[i] = dest[i]  or {}
728    --             dest[i].vert = dest[i].vert or s
729    --          end
730    --       end
731    --    end
732    --    return dest
733    -- end
734    -- prepare_vert_data = function (dest, id)
735    --    local a = id.resources.sequences
736    --    if a then
737    --       local s = id.shared.rawdata.descriptions
738    --       for i,v in pairs(a) do
739    --          if v.features.vert or v.features.vrt2 then
740    --             dest= add_feature_table(v.subtables[1], s, dest)
741    --          end
742    --       end
743    --    end
744    --    return dest
745    -- end
746    -- -- 縦書き用字形への変換
747    -- function get_vert_glyph(n, chr)
748    --    local fn = font_extra_info[n]
749    --    return (fn and fn[chr] and fn[chr].vert) or chr
750    -- end
751 end
752
753 --
754 do
755    local cache_ver = 6
756    local checksum = file.checksum
757
758    local function prepare_extra_data_base(id)
759       if not id then return end
760       local bname = file.nameonly(id.filename or '')
761       if not font_extra_basename[bname] then
762          -- if the cache is present, read it
763          local newsum = checksum(id.filename) -- MD5 checksum of the fontfile
764          local v = "extra_" .. string.lower(file.nameonly(id.filename))
765          local dat = ltjb.load_cache(
766             v,
767             function (t) return (t.version~=cache_ver) or (t.chksum~=newsum) end
768          )
769          -- if the cache is not found or outdated, save the cache
770          if dat then
771             font_extra_basename[bname] = dat[1] or {}
772          else
773             local dat = nil
774             dat = prepare_fl_data(dat, id)
775             font_extra_basename[bname] = dat or {}
776             ltjb.save_cache( v,
777                              {
778                                 chksum = checksum(id.filename),
779                                 version = cache_ver,
780                                 dat,
781                              })
782          end
783          return bname
784       end
785    end
786    local function prepare_extra_data_font(id, res)
787       if type(res)=='table' and res.shared then
788          font_extra_info[id] = font_extra_basename[file.nameonly(res.filename)]
789       end
790    end
791     luatexbase.add_to_callback(
792        'luaotfload.patch_font',
793        function (tfmdata)
794           -- these function is executed one time per one fontfile
795           local bname = prepare_extra_data_base(tfmdata)
796           if bname then supply_vkern_table(tfmdata, bname) end
797           return tfmdata
798        end,
799        'ltj.prepare_extra_data', 1)
800    luatexbase.add_to_callback(
801       'luatexja.define_font',
802       function (res, name, size, id)
803          prepare_extra_data_font(id, res)
804       end,
805       'ltj.prepare_extra_data', 1)
806
807    local nulltable = {} -- dummy
808    ltjr.vert_addfunc = function (n) font_extra_info[n] = nulltable end
809
810    local identifiers = fonts.hashes.identifiers
811    for i=1,font.nextid()-1 do
812       if identifiers[i] then
813          prepare_extra_data_base(identifiers[i])
814          prepare_extra_data_font(i,identifiers[i])
815       end
816    end
817 end
818
819
820 ------------------------------------------------------------------------
821 -- calculate vadvance
822 ------------------------------------------------------------------------
823 do
824    local function acc_feature(table_vadv, table_vorg, subtables, ft,  already_vert)
825       for char_num,v in pairs(ft.shared.rawdata.descriptions) do
826          if v.slookups then
827             for sn, sv in pairs(v.slookups) do
828                if subtables[sn] and type(sv)=='table' then
829                   if sv[4]~=0 then
830                      table_vadv[char_num]
831                         = (table_vadv[char_num] or 0) + sv[4]
832                   end
833                   if sv[2]~=0 and not already_vert then
834                      table_vorg[char_num]
835                         = (table_vorg[char_num] or 0) + sv[2]
836                   end
837                end
838             end
839          end
840       end
841    end
842
843 luatexbase.add_to_callback(
844    "luatexja.define_jfont",
845    function (fmtable, fnum)
846       local vadv = {}; fmtable.v_advance = vadv
847       local vorg = {}; fmtable.v_origin = vorg
848       local ft = font_getfont(fnum)
849       local subtables = {}
850       if ft.specification then
851          for feat_name,v in pairs(ft.specification.features.normal) do
852             if v==true then
853                for _,i in pairs(ft.resources.sequences) do
854                   if i.order[1]== feat_name and i.type == 'gpos_single' then
855                      for _,st in pairs(i.subtables) do
856                         subtables[st] = true
857                      end
858                   end
859                end
860             end
861          end
862          acc_feature(vadv, vorg, subtables, ft,
863                      ft.specification.features.normal.vrt2 or ft.specification.features.normal.vert)
864          for i,v in pairs(vadv) do
865             vadv[i]=vadv[i]/ft.units_per_em*fmtable.size
866          end
867          for i,v in pairs(vorg) do
868             vorg[i]=vorg[i]/ft.units_per_em*fmtable.size
869          end
870       end
871       return fmtable
872    end, 1, 'ltj.v_advance'
873 )
874 end
875 ------------------------------------------------------------------------
876 -- MISC
877 ------------------------------------------------------------------------
878 do
879    local get_dir_count = ltjd.get_dir_count
880    local is_ucs_in_japanese_char = ltjc.is_ucs_in_japanese_char_direct
881    local tex_set_attr = tex.setattribute
882    local font = font
883    -- EXT: italic correction
884    function append_italic()
885       local p = to_direct(tex.nest[tex.nest.ptr].tail)
886       if p and getid(p)==id_glyph then
887          local f = getfont(p)
888          local g = node_new(id_kern)
889          setfield(g, 'subtype', 1)
890          set_attr(g, attr_icflag, ITALIC)
891          if is_ucs_in_japanese_char(p) then
892             f = has_attr(p, (get_dir_count()==dir_tate) and attr_curtfnt or attr_curjfnt)
893             local j = font_metric_table[f]
894             setfield(g, 'kern', j.char_type[find_char_class(getchar(p), j)].italic)
895          else
896             local h = font_getfont(f) or font.fonts[f]
897             if h then
898                setfield(g, 'kern', h.characters[getchar(p)].italic)
899             else
900                tex_set_attr(attr_icflag, 0)
901                return node_free(g)
902             end
903          end
904          node_write(g)
905          tex_set_attr(attr_icflag, 0)
906       end
907    end
908 end