OSDN Git Service

Added the table of non-Kanji characters of JIS X 0208:1990.
[luatex-ja/luatexja.git] / src / ltj-jfmglue.lua
1 --
2 -- luatexja/jfmglue.lua
3 --
4 luatexbase.provides_module({
5   name = 'luatexja.jfmglue',
6   date = '2012/04/25',
7   version = '0.4',
8   description = 'Insertion process of JFM glues and kanjiskip',
9 })
10 module('luatexja.jfmglue', package.seeall)
11 local err, warn, info, log = luatexbase.errwarinf(_NAME)
12 local node = node
13
14 luatexja.load_module('base');      local ltjb = luatexja.base
15 luatexja.load_module('stack');     local ltjs = luatexja.stack
16 luatexja.load_module('jfont');     local ltjf = luatexja.jfont
17 luatexja.load_module('pretreat');  local ltjp = luatexja.pretreat
18
19 local has_attr = node.has_attribute
20 local set_attr = node.set_attribute
21 local round = tex.round
22 local uniq_id = 0 -- unique id 
23
24 local id_glyph = node.id('glyph')
25 local id_hlist = node.id('hlist')
26 local id_vlist = node.id('vlist')
27 local id_rule = node.id('rule')
28 local id_ins = node.id('ins')
29 local id_mark = node.id('mark')
30 local id_adjust = node.id('adjust')
31 local id_disc = node.id('disc')
32 local id_whatsit = node.id('whatsit')
33 local id_math = node.id('math')
34 local id_glue = node.id('glue')
35 local id_kern = node.id('kern')
36 local id_penalty = node.id('penalty')
37
38 local id_glue_spec = node.id('glue_spec')
39 local id_jglyph = node.id('glyph') + 256      -- Japanese character
40 local id_box_like = node.id('hlist') + 256    -- vbox, shifted hbox
41 local id_pbox = node.id('hlist') + 512        -- already processed nodes (by \unhbox)
42 local id_pbox_w = node.id('hlist') + 513      -- cluster which consists of a whatsit
43 local sid_user = node.subtype('user_defined')
44
45 local sid_start_link = node.subtype('pdf_start_link')
46 local sid_start_thread = node.subtype('pdf_start_thread')
47 local sid_end_link = node.subtype('pdf_end_link')
48 local sid_end_thread = node.subtype('pdf_end_thread')
49
50 local ITALIC = 1
51 local PACKED = 2
52 local KINSOKU = 3
53 local FROM_JFM = 4
54 local LINE_END = 5
55 local KANJI_SKIP = 6
56 local XKANJI_SKIP = 7
57 local PROCESSED = 8
58 local IC_PROCESSED = 9
59 local BOXBDD = 15
60
61 local kanji_skip
62 local xkanji_skip
63
64 local attr_jchar_class = luatexbase.attributes['ltj@charclass']
65 local attr_orig_char = luatexbase.attributes['ltj@origchar']
66 local attr_curjfnt = luatexbase.attributes['ltj@curjfnt']
67 local attr_icflag = luatexbase.attributes['ltj@icflag']
68 local attr_autospc = luatexbase.attributes['ltj@autospc']
69 local attr_autoxspc = luatexbase.attributes['ltj@autoxspc']
70 local attr_uniqid = luatexbase.attributes['ltj@uniqid']
71 local max_dimen = 1073741823
72
73 local box_stack_level
74 local par_indented -- is the paragraph indented?
75
76 -------------------- Helper functions
77
78 local function copy_attr(new, old) 
79   -- 仕様が決まるまで off にしておく
80 end
81
82 -- This function is called only for acquiring `special' characters.
83 local function fast_find_char_class(c,m)
84    return m.chars[c] or 0
85 end
86
87 local spec_zero_glue = node.new(id_glue_spec)
88    spec_zero_glue.width = 0; spec_zero_glue.stretch_order = 0; spec_zero_glue.stretch = 0
89    spec_zero_glue.shrink_order = 0; spec_zero_glue.shrink = 0
90
91 local function get_zero_spec()
92    return node.copy(spec_zero_glue)
93 end
94
95 local function skip_table_to_spec(n)
96    local g = node.new(id_glue_spec)
97    local st = ltjs.get_skip_table(n, box_stack_level)
98    g.width = st.width; g.stretch = st.stretch; g.shrink = st.shrink
99    g.stretch_order = st.stretch_order; g.shrink_order = st.shrink_order
100    return g
101 end
102
103 -- penalty 値の計算
104 local function add_penalty(p,e)
105    if p.penalty>=10000 then
106       if e<=-10000 then p.penalty = 0 end
107    elseif p.penalty<=-10000 then
108       if e>=10000 then p.penalty = 0 end
109    else
110       p.penalty = p.penalty + e
111       if p.penalty>=10000 then p.penalty = 10000
112       elseif p.penalty<=-10000 then p.penalty = -10000 end
113    end
114    return
115 end
116
117 -- 「異なる JFM」の間の調整方法
118 diffmet_rule = math.two_average
119 function math.two_add(a,b) return a+b end
120 function math.two_average(a,b) return (a+b)*0.5 end
121
122 -------------------- idea
123 -- 2 node の間に glue/kern/penalty を挿入する.
124 -- 基本方針: char node q と char node p の間
125
126 --  Np: 「p を核とする塊」
127 --   first: 最初の node,nuc: p,last: 最後の node
128 --   id: 核 node の種類
129 --  Nq: 「q を核とする塊」
130 --   実際の glue は Np.last, Nq.first の間に挿入される
131 --  Bp: Np.last, Nq.first の間の penalty node 達の配列
132
133 -- Np, Nq, Bp, widow_Bp について
134 -- Np, Nq は別々のテーブル.
135 -- 1回のループごとに Nq = Np, Np = (new table) となるのは効率が悪いので,
136 -- Np <-> Nq 入れ替え,その後 Np をクリアすることでテーブルを再利用.
137 -- 同様の関係は Bp, widow_Bp にも.
138
139
140 -- 核の定義:
141 --  node x が non-char node のときは,x のみ
142 --  x が char_node のときは,
143 --  - x が \accent の第二引数だったとき
144 --    [kern2 kern y kern2] x の 3 node が核に加わる
145 --  - x の直後に \/ 由来 kern があったとき
146 --    その \/ 由来の kern が核に加わる
147 -- p, q の走査で無視するもの:
148 --  ins, mark, adjust, whatsit, penalty
149 --
150 -- Nq.last .. + .. Bp.first .... Bp[last] .... * .. Np.first
151 -- +: kern from LINEEND はここに入る
152 -- *: jfm glue はここに入る
153
154 local head -- the head of current list
155 local last -- the last node of current list
156 local lp   -- 外側での list 走査時のカーソル
157
158 local Np, Nq, Bp
159 local widow_Bp, widow_Np -- \jcharwidowpenalty 挿入位置管理用
160
161 local ihb_flag -- JFM グルー挿入抑止用 flag
162                -- on: \inhibitglue 指定時,hlist の周囲
163
164 -------------------- hlist 内の文字の検索
165
166 local first_char, last_char, find_first_char
167
168 local function check_box(box_ptr, box_end)
169    local p = box_ptr; local found_visible_node = false
170    if not p then 
171       find_first_char = false; first_char = nil; last_char = nil
172       return true
173    end
174    while p and p~=box_end do
175       local pid = p.id
176       if pid==id_kern then
177          if p.subtype==2 then
178             p = node.next(node.next(node.next(p))); pid = p.id
179          elseif has_attr(p, attr_icflag)==IC_PROCESSED then
180             p = node.next(p); pid = p.id
181          end
182       end
183       if pid==id_glyph then
184          repeat 
185             if find_first_char then 
186                first_char = p; find_first_char = false
187             end
188             last_char = p; found_visible_node = true; p=node.next(p)
189             if (not p) or p==box_end then return found_visible_node end
190          until p.id~=id_glyph
191          pid = p.id
192       end
193       if pid==id_hlist then
194          if has_attr(p, attr_icflag)==PACKED then
195             for q in node.traverse_id(id_glyph, p.head) do
196                if find_first_char then
197                   first_char = q; find_first_char = false
198                end
199                last_char = q; found_visible_node = true; break
200             end
201          else
202             if p.shift==0 then
203                if check_box(p.head, nil) then found_visible_node = true end
204             else if find_first_char then 
205                   find_first_char = false
206                else 
207                   last_char = nil
208                end
209             end
210          end
211       elseif not (pid==id_ins   or pid==id_mark
212                   or pid==id_adjust or pid==id_whatsit
213                   or pid==id_penalty) then
214          found_visible_node = true
215          if find_first_char then 
216             find_first_char = false
217          else 
218             last_char = nil
219          end
220       end
221       p = node.next(p)
222    end
223    return found_visible_node
224 end 
225
226 function check_box_high(Nx, box_ptr, box_end)
227    first_char = nil;  last_char = nil;  find_first_char = true
228    if check_box(box_ptr, box_end) then
229       if first_char then
230          if first_char.font == has_attr(first_char, attr_curjfnt) then 
231             set_np_xspc_jachar(Nx, first_char)
232          else
233             set_np_xspc_alchar(Nx, first_char.char,first_char, ligature_head)
234          end
235       end
236    end
237    return last_char
238 end
239
240 -------------------- Np の計算と情報取得
241
242 luatexbase.create_callback("luatexja.jfmglue.whatsit_getinfo", "data", 
243                            function (Np, lp, Nq, box_stack_level) 
244                               if Np.nuc then return Np 
245                               else 
246                                  return Np  -- your code
247                               end
248                            end)
249 luatexbase.create_callback("luatexja.jfmglue.whatsit_after", "data", 
250                            function (stat, Nq, Np, box_stack_level) return false end)
251
252 -- calc next Np
253 local function set_attr_icflag_processed(p)
254    if (has_attr(p, attr_icflag) or 0)<= ITALIC then 
255       set_attr(p, attr_uniqid, uniq_id) 
256       set_attr(p, attr_icflag, PROCESSED) 
257    end
258 end
259
260 local function check_next_ickern()
261    if lp.id == id_kern and has_attr(lp, attr_icflag)==ITALIC then
262       set_attr(lp, attr_icflag, IC_PROCESSED) 
263       set_attr(lp, attr_uniqid, uniq_id) 
264       Np.last = lp; lp = node.next(lp)
265    else Np.last = Np.nuc end
266 end
267
268 local function calc_np_pbox()
269    local uid = has_attr(lp, attr_uniqid)
270    Np.first = Np.first or lp; Np.id = id_pbox
271    lpa = KINSOKU -- dummy=
272    while lp~=last and lpa>=PACKED and lpa~=BOXBDD
273       and has_attr(lp, attr_uniqid) == uid do
274       Np.nuc = lp; set_attr(lp, attr_uniqid, uniq_id) 
275       lp = node.next(lp); lpa = has_attr(lp, attr_icflag) or 0
276    end
277    return check_next_ickern()
278 end
279
280
281 local calc_np_auxtable = {
282    [id_glyph] = function() 
283                    Np.first = Np.first or lp
284                    if lp.font == has_attr(lp, attr_curjfnt) then 
285                       Np.id = id_jglyph 
286                    else 
287                       Np.id = id_glyph 
288                    end
289                    Np.nuc = lp; set_attr_icflag_processed(lp)
290                    lp = node.next(lp); check_next_ickern(); return true
291                 end,
292    [id_hlist] = function() 
293                    Np.first = Np.first or lp; Np.last = lp; Np.nuc = lp; 
294                    set_attr_icflag_processed(lp)
295                    if lp.shift~=0 then 
296                       Np.id = id_box_like
297                    else 
298                       Np.id = id_hlist 
299                    end
300                    lp = node.next(lp); return true
301                 end,
302    [id_vlist] = function()
303                    Np.first = Np.first or lp; Np.nuc = lp; Np.last = lp;
304                    Np.id = id_box_like; set_attr_icflag_processed(lp); 
305                    lp = node.next(lp); return true
306                 end,
307    [id_rule] = function()
308                   Np.first = Np.first or lp; Np.nuc = lp; Np.last = lp;
309                   Np.id = id_box_like; set_attr_icflag_processed(lp); 
310                   lp = node.next(lp); return true
311                end,
312    [id_ins] = function() 
313                  set_attr_icflag_processed(lp); lp = node.next(lp)
314                  return false
315               end,
316    [id_mark] = function() 
317                   set_attr_icflag_processed(lp); lp = node.next(lp)
318                   return false
319                end,
320    [id_adjust] = function() 
321                     set_attr_icflag_processed(lp); lp = node.next(lp)
322                     return false
323                  end,
324    [id_disc] = function()
325                   Np.first = Np.first or lp; 
326                   Np.nuc = lp; set_attr_icflag_processed(lp); 
327                   Np.last = lp; Np.id = id_disc; lp = node.next(lp); return true
328                end,
329    [id_whatsit] = function() 
330                   if lp.subtype==sid_user then
331                      if lp.user_id==30111 then
332                         local lq = node.next(lp)
333                         head = node.remove(head, lp); node.free(lp); lp = lq; ihb_flag = true
334                      else
335                         set_attr_icflag_processed(lp)
336                         luatexbase.call_callback("luatexja.jfmglue.whatsit_getinfo"
337                                                  , Np, lp, Nq, box_stack_level)
338                         lp = node.next(lp)
339                         if Np.nuc then 
340                            Np.id = id_pbox_w; Np.first = Np.nuc; Np.last = Np.nuc; return true
341                         end
342                      end
343                   else
344                      -- we do special treatment for these whatsit nodes.
345                      if lp.subtype == sid_start_link or lp.subtype == sid_start_thread then
346                         Np.first = lp 
347                      elseif lp.subtype == sid_end_link or lp.subtype == sid_end_thread then
348                         Nq.last = lp; Np.first = nil
349                      end
350                      set_attr_icflag_processed(lp); lp = node.next(lp)
351                   end
352                   return false
353                   end,
354    [id_math] = function()
355                   Np.first = Np.first or lp; Np.nuc = lp; 
356                   set_attr_icflag_processed(lp); lp  = node.next(lp) 
357                   while lp.id~=id_math do 
358                      set_attr_icflag_processed(lp); lp  = node.next(lp) 
359                   end
360                   set_attr_icflag_processed(lp); 
361                   Np.last = lp; Np.id = id_math; lp = node.next(lp); 
362                   return true
363                end,
364    [id_glue] = function()
365                   Np.first = Np.first or lp; Np.nuc = lp; set_attr_icflag_processed(lp); 
366                   Np.last = lp; Np.id = id_glue; lp = node.next(lp); return true
367                end,
368    [id_kern] = function() 
369                   Np.first = Np.first or lp
370                   if lp.subtype==2 then
371                      set_attr_icflag_processed(lp); lp = node.next(lp)
372                      set_attr_icflag_processed(lp); lp = node.next(lp)
373                      set_attr_icflag_processed(lp); lp = node.next(lp)
374                      set_attr_icflag_processed(lp); Np.nuc = lp
375                      if lp.font == has_attr(lp, attr_curjfnt) then 
376                         Np.id = id_jglyph 
377                      else
378                         Np.id = id_glyph 
379                      end
380                      lp = node.next(lp); check_next_ickern(); 
381                   else
382                      Np.id = id_kern; set_attr_icflag_processed(lp);
383                      Np.last = lp; lp = node.next(lp)
384                   end
385                   return true
386                end,
387    [id_penalty] = function()
388                      Bp[#Bp+1] = lp; set_attr_icflag_processed(lp); 
389                      lp = node.next(lp); return false
390                   end,
391    [13] = function()
392                   Np.first = Np.first or lp; Np.nuc = lp; Np.last = lp;
393                   Np.id = id_box_like; set_attr_icflag_processed(lp); 
394                   lp = node.next(lp); return true
395                end,
396 }
397
398 local function calc_np()
399    -- We assume lp = node.next(Np.last)
400    local Nr = Nq
401    for k in pairs(Nr) do Nr[k] = nil end; Nq = Np; Np = Nr
402    for k in pairs(Bp) do Bp[k] = nil end
403    ihb_flag = false 
404    while lp ~= last do
405       local lpa = has_attr(lp, attr_icflag) or 0
406       if lpa>=PACKED then
407          if lpa == BOXBDD then
408             local lq = node.next(lp)
409             head = node.remove(head, lp); node.free(lp); lp = lq
410          else calc_np_pbox(); return 
411          end -- id_pbox
412       elseif calc_np_auxtable[lp.id]() then return end
413    end
414    Np = nil; return
415 end
416
417
418
419
420 -- extract informations from Np
421 -- We think that "Np is a Japanese character" if Np.met~=nil,
422 --            "Np is an alphabetic character" if Np.pre~=nil,
423 --            "Np is not a character" otherwise.
424
425 -- 和文文字のデータを取得
426 function set_np_xspc_jachar(Nx, x)
427    local z = ltjf.font_metric_table[x.font]
428    local c = has_attr(x, attr_orig_char) or 0
429    local cls = ltjf.find_char_class(x.char, z) or 0
430    if cls==0 and c ~= x.char then cls = ltjf.find_char_class(-c, z) end
431    local m = ltjf.metrics[z.jfm]
432    set_attr(x, attr_jchar_class, cls)
433    Nx.class = cls
434    Nx.char = c
435    Nx.size= z.size
436    Nx.met = m
437    Nx.var = z.var
438    Nx.pre = ltjs.get_penalty_table('pre', c, 0, box_stack_level)
439    Nx.post = ltjs.get_penalty_table('post', c, 0, box_stack_level)
440    z = fast_find_char_class('lineend', m)
441    local y = m.size_cache[Nx.size].char_type[Nx.class]
442    Nx.lend = y.kern[z] or 0
443    y = ltjs.get_penalty_table('xsp', c, 3, box_stack_level)
444    Nx.xspc_before = (y%2==1)
445    Nx.xspc_after  = (y>=2)
446    Nx.auto_kspc = (has_attr(x, attr_autospc)==1)
447    Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
448 end
449
450 -- 欧文文字のデータを取得
451 local ligature_head = 1
452 local ligature_tail = 2
453 function set_np_xspc_alchar(Nx, c,x, lig)
454    if c~=-1 then
455       if lig == ligature_head then
456          while x.components and x.subtype and math.floor(x.subtype*0.5)%2==1 do
457             x = x.components; c = x.char
458          end
459       else
460          while x.components and x.subtype and math.floor(x.subtype*0.5)%2==1 do
461             x = node.tail(x.components); c = x.char
462          end
463       end
464       Nx.pre = ltjs.get_penalty_table('pre', c, 0, box_stack_level)
465       Nx.post = ltjs.get_penalty_table('post', c, 0, box_stack_level)
466       Nx.char = 'jcharbdd'
467    else
468       Nx.pre = 0; Nx.post = 0; Nx.char = -1
469    end
470    Nx.met = nil
471    local y = ltjs.get_penalty_table('xsp', c, 3, box_stack_level)
472    Nx.xspc_before = (y%2==1)
473    Nx.xspc_after  = (y>=2)
474    Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
475 end
476
477 -- Np の情報取得メインルーチン
478 local function extract_np()
479    local x, i = Np.nuc, Np.id;
480    if i ==  id_jglyph then return set_np_xspc_jachar(Np, x)
481    elseif i == id_glyph then return set_np_xspc_alchar(Np, x.char, x, ligature_head)
482    elseif i == id_hlist then Np.last_char = check_box_high(Np, x.head, nil)
483    elseif i == id_pbox then Np.last_char = check_box_high(Np, Np.first, node.next(Np.last))
484    elseif i == id_disc then Np.last_char = check_box_high(Np, x.replace, nil)
485    elseif i == id_math then return set_np_xspc_alchar(Np, -1, x)
486    end
487 end
488
489 -- change the information for the next loop
490 -- (will be done if Nx is an alphabetic character or a hlist)
491 function after_hlist(Nx)
492    if Nx.last_char then
493       if Nx.last_char.font == has_attr(Nx.last_char, attr_curjfnt) then 
494          set_np_xspc_jachar(Nx, Nx.last_char);
495       else
496          set_np_xspc_alchar(Nx, Nx.last_char.char,Nx.last_char, ligature_tail)
497       end
498    else
499       Nx.pre = nil; Nx.met = nil
500    end
501 end
502
503 local function after_alchar(Nx)
504    local x = Nx.nuc
505    return set_np_xspc_alchar(Nx, x.char,x, ligature_tail)
506 end
507
508
509 -------------------- 最下層の処理
510
511 local function lineend_fix(g)
512    if g and g.id==id_kern then 
513       Nq.lend = 0
514    elseif Nq.lend~=0 then
515       if not g then
516          g = node.new(id_kern); copy_attr(g, Nq.nuc); 
517          g.subtype = 1; g.kern = -Nq.lend;
518      set_attr(g, attr_icflag, LINEEND)
519      set_attr(g, attr_uniqid, uniq_id) 
520       elseif g.id==id_kern then
521          g.kern = g.kern - Nq.lend
522       else
523          g.spec.width = g.spec.width - Nq.lend
524       end
525    end
526    return g
527 end
528
529 -- change penalties (or create a new penalty, if needed)
530 local function handle_penalty_normal(post, pre, g)
531    local a = (pre or 0) + (post or 0)
532    if #Bp == 0 then
533       if (a~=0 and not(g and g.id==id_kern)) or Nq.lend~=0 then
534          local p = node.new(id_penalty); copy_attr(p, Nq.nuc)
535          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
536          p.penalty = a
537          head = node.insert_before(head, Np.first, p)
538          Bp[#Bp+1]=p; 
539      set_attr(p, attr_icflag, KINSOKU)
540      set_attr(p, attr_uniqid, uniq_id) 
541       end
542    else for i, v in pairs(Bp) do add_penalty(v,a) end
543    end
544 end
545
546 local function handle_penalty_always(post, pre, g)
547    local a = (pre or 0) + (post or 0)
548    if #Bp == 0 then
549       if not (g and g.id==id_glue) or Nq.lend~=0 then
550          local p = node.new(id_penalty); copy_attr(p, Nq.nuc)
551          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
552          p.penalty = a
553          head = node.insert_before(head, Np.first, p)
554          Bp[#Bp+1]=p
555      set_attr(p, attr_icflag, KINSOKU)
556      set_attr(p, attr_uniqid, uniq_id) 
557       end
558    else for i, v in pairs(Bp) do add_penalty(v,a) end
559    end
560 end
561
562 local function handle_penalty_suppress(post, pre, g)
563    local a = (pre or 0) + (post or 0)
564    if #Bp == 0 then
565       if g and g.id==id_glue then
566          local p = node.new(id_penalty); copy_attr(p, Nq.nuc)
567          p.penalty = 10000; head = node.insert_before(head, Np.first, p)
568          Bp[#Bp+1]=p
569      set_attr(p, attr_icflag, KINSOKU)
570      set_attr(p, attr_uniqid, uniq_id) 
571       end
572    else for i, v in pairs(Bp) do add_penalty(v,a) end
573    end
574 end
575
576 -- 和文文字間の JFM glue を node 化
577 local function new_jfm_glue(Nn, bc, ac)
578 -- bc, ac: char classes
579    local g = nil
580    local z = Nn.met.size_cache[Nn.size].char_type[bc]
581    if z.glue[ac] then
582       local h = node.new(id_glue_spec)
583       h.width   = z.glue[ac][1]
584       h.stretch = z.glue[ac][2]
585       h.shrink  = z.glue[ac][3]
586       h.stretch_order=0; h.shrink_order=0
587       g = node.new(id_glue); copy_attr(g, Nn.nuc)
588       g.subtype = 0; g.spec = h
589       set_attr(g, attr_icflag, FROM_JFM); set_attr(g, attr_uniqid, uniq_id)
590    elseif z.kern[ac] then
591       g = node.new(id_kern); copy_attr(g, Nn.nuc)
592       g.subtype = 1; g.kern = z.kern[ac]
593       set_attr(g, attr_icflag, FROM_JFM); set_attr(g, attr_uniqid, uniq_id)
594    end
595    return g
596 end
597
598 -- Nq.last (kern w) .... (glue/kern g) Np.first
599 local function real_insert(w, g)
600    if w~=0 then
601       local h = node.new(id_kern); copy_attr(h, Nq.nuc)
602       set_attr(h, attr_icflag, LINE_END)
603       set_attr(h, attr_uniqid, uniq_id) 
604       h.kern = w; h.subtype = 1
605       head = node.insert_after(head, Nq.last, h)
606    end
607    if g then
608       head = node.insert_before(head, Np.first, g)
609       Np.first = g
610    end
611 end
612
613 -------------------- 和文文字間空白量の決定
614
615 -- get kanjiskip
616 local function get_kanji_skip_from_jfm(Nn)
617    local i = Nn.met.size_cache[Nn.size].kanjiskip
618    if i then
619       return { i[1], i[2], i[3] }
620    else return nil
621    end
622 end
623 local function get_kanjiskip()
624    local g = node.new(id_glue); copy_attr(g, Nq.nuc)
625    if Np.auto_kspc or Nq.auto_kspc then
626       if kanji_skip.width == max_dimen then
627          local gx = node.new(id_glue_spec);
628          gx.stretch_order = 0; gx.shrink_order = 0
629          local bk = get_kanji_skip_from_jfm(Nq)
630          local ak
631          if (Np.met==Nq.met) and (Nq.size==Np.size) and (Nq.var==Np.var) then
632             ak = nil
633          else
634             ak = get_kanji_skip_from_jfm(Np)
635          end
636          if bk then
637             if ak then
638                gx.width = round(diffmet_rule(bk[1], ak[1]))
639                gx.stretch = round(diffmet_rule(bk[2], ak[2]))
640                gx.shrink = -round(diffmet_rule(-bk[3], -ak[3]))
641             else
642                gx.width = bk[1]; gx.stretch = bk[2]; gx.shrink = bk[3]
643             end
644          elseif ak then
645             gx.width = ak[1]; gx.stretch = ak[2]; gx.shrink = ak[3]
646          else node.free(gx); gx = get_zero_spec() -- fallback
647          end
648          g.spec = gx
649       else g.spec=node.copy(kanji_skip); node.free(gx) end
650    else
651       g.spec =  get_zero_spec(); node.free(gx)
652    end
653    set_attr(g, attr_icflag, KANJI_SKIP)
654    set_attr(g, attr_uniqid, uniq_id) 
655    return g
656 end
657
658 local function calc_ja_ja_aux(gb,ga)
659    if not gb then 
660       return ga
661    else
662       if not ga then return gb end
663       local k = node.type(gb.id) .. node.type(ga.id)
664       if k == 'glueglue' then 
665          -- 両方とも glue.
666          gb.spec.width   = round(diffmet_rule(gb.spec.width, ga.spec.width))
667          gb.spec.stretch = round(diffmet_rule(gb.spec.stretch,ga.spec.shrink))
668          gb.spec.shrink  = -round(diffmet_rule(-gb.spec.shrink, -ga.spec.shrink))
669          node.free(ga)
670          return gb
671       elseif k == 'kernkern' then
672          -- 両方とも kern.
673          gb.kern = round(diffmet_rule(gb.kern, ga.kern))
674          node.free(ga)
675          return gb
676       elseif k == 'kernglue' then 
677          -- gb: kern, ga: glue
678          ga.spec.width   = round(diffmet_rule(gb.kern,ga.spec.width))
679          ga.spec.stretch = round(diffmet_rule(ga.spec.stretch, 0))
680          ga.spec.shrink  = -round(diffmet_rule(-ga.spec.shrink, 0))
681          node.free(gb)
682          return ga
683       else
684          -- gb: glue, ga: kern
685          gb.spec.width   = round(diffmet_rule(ga.kern, gb.spec.width))
686          gb.spec.stretch = round(diffmet_rule(gb.spec.stretch, 0))
687          gb.spec.shrink  = -round(diffmet_rule(-gb.spec.shrink, 0))
688          node.free(ga)
689          return gb
690       end
691    end
692 end
693
694 local function calc_ja_ja_glue()
695    if  ihb_flag then return nil
696    elseif (Nq.size==Np.size) and (Nq.met==Np.met) and (Nq.var==Np.var) then
697       return new_jfm_glue(Nq, Nq.class, Np.class)
698    else
699       return calc_ja_ja_aux(new_jfm_glue(Nq, Nq.class, fast_find_char_class('diffmet',Nq.met)),
700                             new_jfm_glue(Np, fast_find_char_class('diffmet',Np.met), Np.class))
701    end
702 end
703
704 -------------------- 和欧文間空白量の決定
705
706 -- get xkanjiskip
707 local function get_xkanji_skip_from_jfm(Nn)
708    local i = Nn.met.size_cache[Nn.size].xkanjiskip
709    if i then
710       return i and { i[1], i[2], i[3] }
711    else return nil
712    end
713 end
714 local function get_xkanjiskip(Nn)
715    local g = node.new(id_glue); copy_attr(g, Nn.nuc)
716    if Nq.xspc_after and Np.xspc_before and (Nq.auto_xspc or Np.auto_xspc) then
717       if xkanji_skip.width == max_dimen then
718          local gx = node.new(id_glue_spec);
719          gx.stretch_order = 0; gx.shrink_order = 0
720          local bk = get_xkanji_skip_from_jfm(Nn)
721          if bk then
722             gx.width = bk[1]; gx.stretch = bk[2]; gx.shrink = bk[3]
723          else node.free(gx); gx = get_zero_spec() -- fallback
724          end
725          g.spec = gx
726       else g.spec=node.copy(xkanji_skip) end
727    else
728       g.spec = get_zero_spec()
729    end
730    set_attr(g, attr_icflag, XKANJI_SKIP)
731    set_attr(g, attr_uniqid, uniq_id) 
732    return g
733 end
734
735
736 -------------------- 隣接した「塊」間の処理
737
738 local function get_OA_skip()
739    if not ihb_flag then
740       return new_jfm_glue(Np, fast_find_char_class(((Nq.id == id_math and -1) or 'jcharbdd'), Np.met), Np.class)
741    else return nil
742    end
743 end
744 local function get_OB_skip()
745    if not ihb_flag then
746       return new_jfm_glue(Nq, Nq.class, fast_find_char_class(((Np.id == id_math and -1) or'jcharbdd'), Nq.met))
747    else return nil
748    end
749 end
750
751 -- (anything) .. jachar
752 local function handle_np_jachar()
753    if Nq.id==id_jglyph or ((Nq.id==id_pbox or Nq.id==id_pbox_w) and Nq.met) then 
754       local g = lineend_fix(calc_ja_ja_glue() or get_kanjiskip()) -- M->K
755       handle_penalty_normal(Nq.post, Np.pre, g); real_insert(Nq.lend, g)
756    elseif Nq.met then  -- Nq.id==id_hlist
757       local g = get_OA_skip() or get_kanjiskip() -- O_A->K
758       handle_penalty_normal(0, Np.pre, g); real_insert(0, g)
759    elseif Nq.pre then 
760       local g = get_OA_skip() or get_xkanjiskip(Np) -- O_A->X
761       if Nq.id==id_hlist then Nq.post = 0 end
762       handle_penalty_normal(Nq.post, Np.pre, g); real_insert(0, g)
763    else
764       local g = get_OA_skip() -- O_A
765       if Nq.id==id_glue then handle_penalty_normal(0, Np.pre, g)
766       elseif Nq.id==id_kern then handle_penalty_suppress(0, Np.pre, g)
767       else handle_penalty_always(0, Np.pre, g)
768       end
769       real_insert(0, g)
770    end
771    -- \jcharwidowpenalty 挿入予定箇所更新
772    if mode and ltjs.get_penalty_table('kcat', Np.char, 0, box_stack_level)%2~=1 then
773       widow_Np.first = Np.first; 
774       local Bpr = widow_Bp; widow_Bp = Bp; Bp = Bpr
775    end
776 end
777
778 -- jachar .. (anything)
779 local function handle_nq_jachar()
780     if Np.pre then 
781       if Np.id==id_hlist then Np.pre = 0 end
782       local g = lineend_fix(get_OB_skip() or get_xkanjiskip(Nq)) -- O_B->X
783       handle_penalty_normal(Nq.post, Np.pre, g); real_insert(Nq.lend, g)
784    else
785       local g = lineend_fix(get_OB_skip()) -- O_B
786       if Np.id==id_glue then handle_penalty_normal(Nq.post, 0, g)
787       elseif Np.id==id_kern then handle_penalty_suppress(Nq.post, 0, g)
788       else handle_penalty_always(Nq.post, 0, g)
789       end
790       real_insert(Nq.lend, g)
791    end
792 end
793
794 -- (anything) .. (和文文字で始まる hlist)
795 local function handle_np_ja_hlist()
796    if Nq.id==id_jglyph or ((Nq.id==id_pbox or Nq.id == id_pbox_w) and Nq.met) then 
797       local g = lineend_fix(get_OB_skip() or get_kanjiskip()) -- O_B->K
798       handle_penalty_normal(Nq.post, 0, g); real_insert(Nq.lend, g)
799    elseif Nq.met then  -- Nq.id==id_hlist
800       local g = get_kanjiskip() -- K
801       handle_penalty_suppress(0, 0, g); real_insert(0, g)
802    elseif Nq.pre then 
803       local g = get_xkanjiskip(Np) -- X
804       handle_penalty_suppress(0, 0, g); real_insert(0, g)
805    end
806 end
807
808 -- (和文文字で終わる hlist) .. (anything)
809 local function handle_nq_ja_hlist()
810    if Np.pre then 
811       local g = get_xkanjiskip(Nq) -- X
812       handle_penalty_suppress(0, 0, g); real_insert(0, g)
813    end
814 end
815
816 -- Nq が前側のクラスタとなることによる修正
817 local function adjust_nq()
818    if Nq.id==id_glyph then after_alchar(Nq)
819    elseif Nq.id==id_hlist or Nq.id==id_pbox or Nq.id==id_disc then after_hlist(Nq)
820    elseif Nq.id == id_pbox_w then 
821       luatexbase.call_callback("luatexja.jfmglue.whatsit_after",
822                                false, Nq, Np, box_stack_level)
823    end
824 end
825
826 -------------------- 開始・終了時の処理
827
828 -- リスト末尾の処理
829 local function handle_list_tail()
830    adjust_nq(); Np = Nq
831    if mode then
832       -- the current list is to be line-breaked:
833       if Np.id == id_jglyph or (Np.id==id_pbox and Np.met) then 
834          if Np.lend~=0 then
835             g = node.new(id_kern); g.subtype = 0; g.kern = Np.lend
836             copy_attr(g, Np.nuc); set_attr(g, attr_icflag, BOXBDD)
837             node.insert_after(head, Np.last, g)
838          end
839       end
840       -- Insert \jcharwidowpenalty
841       Bp = widow_Bp; Np = widow_Np; Nq.lend = 0
842       if Np.first then
843          handle_penalty_normal(0,
844                                ltjs.get_penalty_table('jwp', 0, 0, box_stack_level))
845       end
846    else
847       -- the current list is the contents of a hbox
848       if Np.id == id_jglyph or (Np.id==id_pbox and Np.met) then 
849          local g = new_jfm_glue(Np, Np.class, fast_find_char_class('boxbdd',Np.met))
850          if g then
851             set_attr(g, attr_icflag, BOXBDD)
852             head = node.insert_after(head, Np.last, g)
853          end
854       end
855    end
856 end
857
858 -- リスト先頭の処理
859 local function handle_list_head()
860    if Np.id ==  id_jglyph or (Np.id==id_pbox and Np.met) then 
861       if not ihb_flag then
862          local g
863          if par_indented then
864             g = new_jfm_glue(Np, fast_find_char_class('parbdd',Np.met), Np.class)
865          else
866             g = new_jfm_glue(Np, fast_find_char_class('boxbdd',Np.met), Np.class)
867          end
868          if g then
869             set_attr(g, attr_icflag, BOXBDD)
870             if g.id==id_glue and #Bp==0 then
871                local h = node.new(id_penalty); copy_attr(h, Np.nuc)
872                h.penalty = 10000; set_attr(h, attr_icflag, BOXBDD)
873             end
874             head = node.insert_before(head, Np.first, g)
875          end
876       end
877    end
878 end
879
880 -- initialize
881 local function init_var()
882    uniq_id = uniq_id +1
883    if uniq_id == 0x7FFFFFF then uniq_id = 0 end
884    lp = head; Bp = {}; widow_Bp = {}; widow_Np = {first = nil}
885    par_indented = false 
886    box_stack_level = ltjp.box_stack_level
887    kanji_skip=skip_table_to_spec('kanjiskip')
888    xkanji_skip=skip_table_to_spec('xkanjiskip')
889    Np = {
890       auto_kspc=nil, auto_xspc=nil, char=nil, class=nil, 
891       first=nil, id=nil, last=nil, lend=0, met=nil, nuc=nil, 
892       post=nil, pre=nil, var=nil, xspc_after=nil, xspc_before=nil, 
893    }
894    Nq = {
895       auto_kspc=nil, auto_xspc=nil, char=nil, class=nil, 
896       first=nil, id=nil, last=nil, lend=0, met=nil, nuc=nil, 
897       post=nil, pre=nil, var=nil, xspc_after=nil, xspc_before=nil, 
898    }
899    if mode then 
900       -- the current list is to be line-breaked:
901       -- hbox from \parindent is skipped.
902       while lp and ((lp.id==id_whatsit and lp.subtype~=sid_user) 
903                  or ((lp.id==id_hlist) and (lp.subtype==3))) do
904          if (lp.id==id_hlist) and (lp.subtype==3) then par_indented = true end
905          lp=node.next(lp) end
906      last=node.tail(head)
907    else 
908       -- the current list is the contents of a hbox:
909       -- insert a sentinelEG
910       last=node.tail(head); local g = node.new(id_kern)
911       node.insert_after(head, last, g); last = g
912    end
913 end
914
915 local function cleanup()
916    -- adjust attr_icflag for avoiding error
917    tex.attribute[attr_icflag] = -(0x7FFFFFFF)
918    node.free(kanji_skip); node.free(xkanji_skip)
919    if mode then
920       local h = node.next(head)
921       if h.id == id_penalty and h.penalty == 10000 then
922          h = h.next
923          if h.id == id_glue and h.subtype == 15 and not h.next then
924             return false
925          end
926       end
927       return head
928    else
929       head = node.remove(head, last); node.free(last);-- remove the sentinel
930       return head
931    end
932 end
933 -------------------- 外部から呼ばれる関数
934
935 -- main interface
936 function main(ahead, amode)
937    if not ahead then return ahead end
938    head = ahead; mode = amode; init_var(); calc_np()
939    if Np then 
940       extract_np(); handle_list_head()
941    else
942       return cleanup()
943    end
944    calc_np()
945    while Np do
946       extract_np(); adjust_nq()
947       -- 挿入部
948       if Np.id == id_jglyph then 
949          handle_np_jachar()
950       elseif Np.met then 
951          if Np.id==id_hlist then handle_np_ja_hlist()
952          else handle_np_jachar() end
953       elseif Nq.met then 
954          if Nq.id==id_hlist then handle_nq_ja_hlist()
955          else handle_nq_jachar() end
956       end
957       calc_np()
958    end
959    handle_list_tail()
960    return cleanup()
961 end
962
963 -- \inhibitglue
964
965 function create_inhibitglue_node()
966    local tn = node.new(id_whatsit, sid_user)
967    tn.user_id=30111; tn.type=100; tn.value=1
968    node.write(tn)
969 end
970
971 -- Node for indicating beginning of a paragraph
972 -- (for ltjsclasses)
973 function create_beginpar_node()
974    local tn = node.new(id_whatsit, sid_user)
975    tn.user_id=30114; tn.type=100; tn.value=1
976    node.write(tn)
977 end
978
979 local function whatsit_callback(Np, lp, Nq, bsl)
980    if Np and Np.nuc then return Np 
981    elseif Np and lp.user_id == 30114 then
982       Np.first = lp; Np.nuc = lp; Np.last = lp
983       Np.char = 'parbdd'
984       Np.met = nil
985       Np.pre = 0; Np.post = 0
986       Np.xspc_before = false
987       Np.xspc_after  = false
988       Np.auto_xspc = false
989       return Np
990    end
991 end
992 local function whatsit_after_callback(s, Nq, Np, bsl)
993    if not s and Nq.nuc.user_id == 30114 then
994       local x, y = node.prev(Nq.nuc), Nq.nuc
995       Nq.first, Nq.nuc, Nq.last = x, x, x
996       head = node.remove(head, y)
997    end
998    return s
999 end
1000
1001 luatexbase.add_to_callback("luatexja.jfmglue.whatsit_getinfo", whatsit_callback,
1002                            "luatexja.beginpar.np_info", 1)
1003 luatexbase.add_to_callback("luatexja.jfmglue.whatsit_after", whatsit_after_callback,
1004                            "luatexja.beginpar.np_info_after", 1)
1005