src/ltj-jfmglue.lua

   1 --
   2 -- luatexja/ltj-jfmglue.lua
   3 --
   4 luatexbase.provides_module({
   5   name = 'luatexja.jfmglue',
   6   date = '2018/08/11',
   7   description = 'Insertion process of JFM glues, [x]kanjiskip and others',
   8 })
   9 luatexja.jfmglue = luatexja.jfmglue or {}
  10
  11 luatexja.load_module('base');      local ltjb = luatexja.base
  12 luatexja.load_module('stack');     local ltjs = luatexja.stack
  13 luatexja.load_module('jfont');     local ltjf = luatexja.jfont
  14 luatexja.load_module('direction'); local ltjd = luatexja.direction
  15 luatexja.load_module('setwidth');      local ltjw = luatexja.setwidth
  16 local pairs = pairs
  17
  18 --local to_node = node.direct.tonode
  19 --local to_direct = node.direct.todirect
  20
  21 local setfield = node.direct.setfield
  22 local setglue = luatexja.setglue
  23 local getfield = node.direct.getfield
  24 local getid = node.direct.getid
  25 local getfont = node.direct.getfont
  26 local getlist = node.direct.getlist
  27 local getchar = node.direct.getchar
  28 local getsubtype = node.direct.getsubtype
  29 local if_lang_ja
  30 do
  31     local lang_ja = luatexja.lang_ja
  32     local getlang = node.direct.getlang
  33     if_lang_ja = getlang
  34       and function (n) return getlang(n)==lang_ja end
  35       or  function (n) return getfield(n,'lang')==lang_ja end
  36 end
  37
  38 local has_attr = node.direct.has_attribute
  39 local set_attr = node.direct.set_attribute
  40 local insert_before = node.direct.insert_before
  41 local insert_after = node.direct.insert_after
  42 local node_next = node.direct.getnext
  43 local ltjd_make_dir_whatsit = ltjd.make_dir_whatsit
  44 local ltjf_font_metric_table = ltjf.font_metric_table
  45 local ltjf_find_char_class = ltjf.find_char_class
  46 local node_new = node.direct.new
  47 local node_copy = node.direct.copy
  48 local node_tail = node.direct.tail
  49 local node_free = node.direct.free
  50 local node_remove = node.direct.remove
  51
  52 local id_glyph = node.id('glyph')
  53 local id_hlist = node.id('hlist')
  54 local id_vlist = node.id('vlist')
  55 local id_rule = node.id('rule')
  56 local id_ins = node.id('ins')
  57 local id_mark = node.id('mark')
  58 local id_adjust = node.id('adjust')
  59 local id_disc = node.id('disc')
  60 local id_whatsit = node.id('whatsit')
  61 local id_math = node.id('math')
  62 local id_glue = node.id('glue')
  63 local id_kern = node.id('kern')
  64 local id_penalty = node.id('penalty')
  65
  66 local id_jglyph    = 512 -- Japanese character
  67 local id_box_like  = 256 -- vbox, shifted hbox
  68 local id_pbox      = 257 -- already processed nodes (by \unhbox)
  69 local id_pbox_w    = 258 -- cluster which consists of a whatsit
  70 local sid_user = node.subtype('user_defined')
  71
  72 local ITALIC       = luatexja.icflag_table.ITALIC
  73 local PACKED       = luatexja.icflag_table.PACKED
  74 local KINSOKU      = luatexja.icflag_table.KINSOKU
  75 local FROM_JFM     = luatexja.icflag_table.FROM_JFM
  76 local PROCESSED    = luatexja.icflag_table.PROCESSED
  77 local IC_PROCESSED = luatexja.icflag_table.IC_PROCESSED
  78 local BOXBDD       = luatexja.icflag_table.BOXBDD
  79 local PROCESSED_BEGIN_FLAG = luatexja.icflag_table.PROCESSED_BEGIN_FLAG
  80
  81 local attr_icflag = luatexbase.attributes['ltj@icflag']
  82 local kanji_skip
  83 local xkanji_skip
  84 local table_current_stack
  85 local list_dir
  86 local capsule_glyph
  87 local tex_dir
  88 local attr_ablshift
  89 local set_np_xspc_jachar, set_np_xspc_alchar
  90 local set_np_xspc_jachar_hbox
  91
  92 local ltjs_orig_char_table = ltjs.orig_char_table
  93
  94 local function get_attr_icflag(p)
  95    return (has_attr(p, attr_icflag) or 0)%PROCESSED_BEGIN_FLAG
  96 end
  97
  98 -------------------- Helper functions
  99
 100 -- This function is called only for acquiring `special' characters.
 101 local function fast_find_char_class(c,m)
 102    return m.chars[c] or 0
 103 end
 104
 105 -- 文字クラスの決定
 106 local slow_find_char_class
 107 do
 108    local start_time_measure = ltjb.start_time_measure
 109    local stop_time_measure = ltjb.stop_time_measure
 110    slow_find_char_class = function (c, m, oc)
 111       local cls = ltjf_find_char_class(oc, m)
 112       if oc~=c and c and cls==0 then
 113          return ltjf_find_char_class(c, m)
 114       else
 115          return cls
 116       end
 117    end
 118 end
 119
 120 local function skip_table_to_glue(n)
 121    local g, st = node_new(id_glue), ltjs.fast_get_stack_skip(n)
 122    setglue(g, st.width, st.stretch, st.shrink, st.stretch_order, st.shrink_order)
 123    return g, (st.width==1073741823)
 124 end
 125
 126
 127 -- penalty 値の計算
 128 local add_penalty
 129 do
 130 local setpenalty = node.direct.setpenalty or function(n, a) setfield(n,'penalty',a) end
 131 local getpenalty = node.direct.getpenalty or function(n) return getfield(n,'penalty') end
 132 function add_penalty(p,e)
 133    local pp = getpenalty(p)
 134    if (pp>-10000) and (pp<10000) then
 135       if e>=10000 then       setpenalty(p, 10000)
 136       elseif e<=-10000 then  setpenalty(p, -10000)
 137       else
 138          pp = pp + e
 139          if pp>=10000 then      setpenalty(p, 10000)
 140          elseif pp<=-10000 then setpenalty(p, -10000)
 141          else                   setpenalty(p, pp) end
 142       end
 143    end
 144 end
 145 end
 146
 147 -- 「異なる JFM」の間の調整方法
 148 luatexja.jfmglue.diffmet_rule = math.two_paverage
 149 function math.two_add(a,b) return a+b end
 150 function math.two_average(a,b) return (a+b)*0.5 end
 151 function math.two_paverage(a,b) return (a+b)/2 end
 152 function math.two_pleft(a,b) return a end
 153 function math.two_pright(a,b) return b end
 154
 155 local head -- the head of current list
 156
 157 local Np, Nq, Bp
 158 local widow_Bp, widow_Np -- \jcharwidowpenalty 挿入位置管理用
 159
 160 local non_ihb_flag -- JFM グルー挿入抑止用 flag
 161 -- false: \inhibitglue 指定時 true: それ以外
 162
 163 -------------------- hlist 内の文字の検索
 164
 165 local first_char, last_char, find_first_char
 166 local check_box_high
 167 do
 168 local ltjd_glyph_from_packed = ltjd.glyph_from_packed
 169 local function check_box(box_ptr, box_end)
 170    local p = box_ptr; local found_visible_node = false
 171    if not p then
 172       find_first_char = false; last_char = nil
 173       return true
 174    end
 175    while p and p~=box_end do
 176       local pid = getid(p)
 177       if pid==id_kern and getsubtype(p)==2 then
 178          p = node_next(node_next(node_next(p))); pid = getid(p) -- p must be glyph_node
 179        end
 180       if pid==id_glyph then
 181          repeat
 182             if find_first_char then
 183                first_char = p; find_first_char = false
 184             end
 185             last_char = p; found_visible_node = true; p=node_next(p)
 186             if (not p) or p==box_end then
 187                return found_visible_node
 188             end
 189          until getid(p)~=id_glyph
 190          pid = getid(p) -- p must be non-nil
 191       end
 192       if pid==id_kern then
 193          local pa = get_attr_icflag(p)
 194          if pa==IC_PROCESSED then
 195             -- do nothing
 196          elseif getsubtype(p)==2 then
 197             p = node_next(node_next(p));
 198             -- Note that another node_next will be executed outside this if-statement.
 199          else
 200             found_visible_node = true
 201             find_first_char = false; last_char = nil
 202          end
 203       elseif pid==id_hlist then
 204          if PACKED == get_attr_icflag(p) then
 205             local s = ltjd_glyph_from_packed(p)
 206             if find_first_char then
 207                first_char = s; find_first_char = false
 208             end
 209             last_char = s; found_visible_node = true
 210          else
 211             if getfield(p, 'shift')==0 then
 212                last_char = nil
 213                if check_box(getlist(p), nil) then found_visible_node = true end
 214                find_first_char = false
 215             else
 216                find_first_char = false; last_char = nil
 217             end
 218          end
 219       elseif pid==id_math then
 220          if find_first_char then
 221             first_char = p; find_first_char = false
 222          end
 223          last_char = p; found_visible_node = true
 224       elseif pid==id_rule and get_attr_icflag(p)==PACKED then
 225          -- do nothing
 226       elseif not (pid==id_ins   or pid==id_mark
 227                   or pid==id_adjust or pid==id_whatsit
 228                   or pid==id_penalty) then
 229          found_visible_node = true
 230          find_first_char = false; last_char = nil
 231       end
 232       p = node_next(p)
 233    end
 234    return found_visible_node
 235 end
 236
 237 check_box_high = function (Nx, box_ptr, box_end)
 238    first_char = nil;  last_char = nil;  find_first_char = true
 239    if check_box(box_ptr, box_end) then
 240       local first_char = first_char
 241       if first_char then
 242          if getid(first_char)==id_glyph then
 243             if if_lang_ja(first_char) then
 244                set_np_xspc_jachar_hbox(Nx, first_char)
 245             else
 246                set_np_xspc_alchar(Nx, getchar(first_char),first_char, 1)
 247             end
 248          else -- math_node
 249             set_np_xspc_alchar(Nx, -1,first_char)
 250          end
 251       end
 252    end
 253    return last_char
 254 end
 255 end
 256 -------------------- Np の計算と情報取得
 257
 258 luatexbase.create_callback("luatexja.jfmglue.whatsit_getinfo", "data",
 259                            function (Np, lp, Nq)
 260                               if Np.nuc then return Np
 261                               else
 262                                  return Np  -- your code
 263                               end
 264                            end)
 265 luatexbase.create_callback("luatexja.jfmglue.whatsit_after", "data",
 266                            function (stat, Nq, Np) return false end)
 267
 268 -- calc next Np
 269 local calc_np
 270 do
 271
 272 local traverse = node.direct.traverse
 273 local function check_next_ickern(lp)
 274    local lx = Np.nuc
 275    while lp and getid(lp) == id_kern and ( getsubtype(lp)==0 or
 276      getsubtype(lp)==3 or ITALIC == get_attr_icflag(lp)) do
 277      set_attr(lp, attr_icflag, IC_PROCESSED);
 278      lx, lp = lp, node_next(lp)
 279    end
 280    Np.last = lx; return lp
 281 end
 282
 283 local function calc_np_pbox(lp, last)
 284    local first, nc = (not Np.first), nil
 285    --local lpa = get_attr_icflag(lp)==PACKED and PACKED or KINSOKU -- KINSOKU: dummy
 286    local lpa = get_attr_icflag(lp)
 287    Np.first = Np.first or lp; Np.id = id_pbox
 288    set_attr(lp, attr_icflag, get_attr_icflag(lp));
 289    while lp ~=last and (lpa>=PACKED) and (lpa<BOXBDD) do
 290       local lpi = getid(lp)
 291       if lpa==PACKED then
 292          if lpi==id_rule then lp = node_next(lp) end
 293          nc, lp = lp, node_next(lp)
 294       elseif lpi==id_hlist or lpi==id_vlist then
 295          head, lp, nc = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm pbox')
 296          Np.first = first and nc or Np.first
 297       else
 298          nc, lp = lp, node_next(lp)
 299       end
 300       first, lpa = false, (lp and has_attr(lp, attr_icflag) or 0)
 301      -- get_attr_icflag() ではいけない！
 302    end
 303    Np.nuc = nc
 304    lp = check_next_ickern(lp)
 305    Np.last_char = check_box_high(Np, Np.first, lp)
 306    return lp
 307 end
 308
 309 local ltjw_apply_ashift_math = ltjw.apply_ashift_math
 310 local ltjw_apply_ashift_disc = ltjw.apply_ashift_disc
 311 local min, max = math.min, math.max
 312 local function calc_np_aux_glyph_common(lp, acc_flag)
 313    Np.nuc = lp
 314    Np.first= (Np.first or lp)
 315    if if_lang_ja(lp) then
 316       Np.id = id_jglyph
 317       local m, mc, cls = set_np_xspc_jachar(Np, lp)
 318       local npi, npf
 319       lp, head, npi, npf = capsule_glyph(lp, m, mc[cls], head, tex_dir)
 320       Np.first = (Np.first~=Np.nuc) and Np.first or npf or npi
 321       Np.nuc = npi
 322       return true, check_next_ickern(lp);
 323    else
 324       Np.id = id_glyph
 325       set_np_xspc_alchar(Np, getchar(lp), lp, 1)
 326       -- loop
 327       local first_glyph, last_glyph = lp
 328       set_attr(lp, attr_icflag, PROCESSED); Np.last = lp
 329       local y_adjust = has_attr(lp,attr_ablshift) or 0
 330       local node_depth = getfield(lp, 'depth') + min(y_adjust, 0)
 331       local adj_depth = (y_adjust>0) and (getfield(lp, 'depth') + y_adjust) or 0
 332       setfield(lp, 'yoffset', getfield(lp, 'yoffset') - y_adjust)
 333       lp = node_next(lp)
 334       for lx in traverse(lp) do
 335          local lai = get_attr_icflag(lx)
 336          if lx==last or  lai>=PACKED then
 337             lp=lx; break
 338          else
 339             local lid = getid(lx)
 340             if lid==id_glyph and not if_lang_ja(lx) then
 341                -- 欧文文字
 342                last_glyph = lx; set_attr(lx, attr_icflag, PROCESSED); Np.last = lx
 343                y_adjust = has_attr(lx,attr_ablshift) or 0
 344                node_depth = max(getfield(lx, 'depth') + min(y_adjust, 0), node_depth)
 345                adj_depth = (y_adjust>0) and max(getfield(lx, 'depth') + y_adjust, adj_depth) or adj_depth
 346                setfield(lx, 'yoffset', getfield(lx, 'yoffset') - y_adjust)
 347             elseif lid==id_kern then
 348                local ls = getsubtype(lx)
 349                if ls==2 then -- アクセント用の kern
 350                   set_attr(lx, attr_icflag, PROCESSED)
 351                   lx = node_next(lx) -- lx: アクセント本体
 352                   if getid(lx)==id_glyph then
 353                      setfield(lx, 'yoffset', getfield(lx, 'yoffset') - (has_attr(lx,attr_ablshift) or 0))
 354                   else -- アクセントは上下にシフトされている
 355                      setfield(lx, 'shift', getfield(lx, 'shift') + (has_attr(lx,attr_ablshift) or 0))
 356                   end
 357                   lx = node_next(node_next(lx))
 358                elseif ls==0  then
 359                   Np.last = lx
 360                elseif (ls==3) or (lai==ITALIC) then
 361                   Np.last = lx; set_attr(lx, attr_icflag, IC_PROCESSED)
 362                else
 363                   lp=lx; break
 364                end
 365             else
 366                lp=lx; break
 367             end
 368          end
 369       end
 370       local r
 371       if adj_depth>node_depth then
 372             r = node_new(id_rule,3)
 373             setfield(r, 'width', 0); setfield(r, 'height', 0)
 374             setfield(r, 'depth',adj_depth); setfield(r, 'dir', tex_dir)
 375             set_attr(r, attr_icflag, PROCESSED)
 376       end
 377       if last_glyph then
 378          Np.last_char = last_glyph
 379          if r then insert_after(head, first_glyph, r) end
 380       else
 381          local npn = Np.nuc
 382          Np.last_char = npn
 383          if r then
 384             local nf, nc = getfont(npn), getchar(npn)
 385             local ct = (font.getfont(nf) or font.fonts[nf] ).characters[nc]
 386             if not ct then -- variation selector
 387                node_free(r)
 388             elseif (ct.left_protruding or 0) == 0 then
 389                head = insert_before(head, npn, r)
 390                Np.first = acc_flag and Np.first or ((Np.first==npn) and r or npn)
 391             elseif (ct.right_protruding or 0) == 0 then
 392                insert_after(head, npn, r); Np.last, lp = r, r
 393             else
 394                ltjb.package_warning_no_line(
 395                   'luatexja',
 396                   'Check depth of glyph node ' .. tostring(npn) .. '(font=' .. nf
 397                      .. ', char=' .. nc .. '),    because its \\lpcode is ' .. tostring(ct.left_protruding)
 398                      .. ' and its \\rpcode is ' .. tostring(ct.right_protruding)
 399                ); node_free(r)
 400             end
 401          end
 402       end
 403       return true, lp
 404    end
 405 end
 406 local calc_np_auxtable
 407 do
 408 local node_end_of_math = node.direct.end_of_math
 409 local dir_tate = luatexja.dir_table.dir_tate
 410 local sid_start_link = node.subtype('pdf_start_link')
 411 local sid_start_thread = node.subtype('pdf_start_thread')
 412 local sid_end_link = node.subtype('pdf_end_link')
 413 local sid_end_thread = node.subtype('pdf_end_thread')
 414 calc_np_auxtable = {
 415    [id_glyph] = calc_np_aux_glyph_common,
 416    [id_hlist] = function(lp)
 417       local op, flag
 418       head, lp, op, flag = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm hlist')
 419       set_attr(op, attr_icflag, PROCESSED)
 420       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 421       if (flag or getfield(op, 'shift')~=0) then
 422          Np.id = id_box_like
 423       else
 424          Np.id = id_hlist
 425          Np.last_char = check_box_high(Np, getlist(op), nil)
 426       end
 427       return true, lp
 428    end,
 429    [id_vlist] =  function(lp)
 430       local op
 431       head, lp, op = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm:' .. getid(lp))
 432       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 433       Np.id = id_box_like;
 434       return true, lp
 435    end,
 436    box_like = function(lp)
 437       Np.first = Np.first or lp; Np.last = lp; Np.nuc = lp;
 438       Np.id = id_box_like;
 439       return true, node_next(lp)
 440    end,
 441    [id_whatsit] = function(lp)
 442       local lps = getsubtype(lp)
 443       if lps==sid_user then
 444          if getfield(lp, 'user_id')==luatexja.userid_table.IHB then
 445             local lq = node_next(lp);
 446             head = node_remove(head, lp); node_free(lp); non_ihb_flag = false
 447             return false, lq;
 448          else
 449             set_attr(lp, attr_icflag, PROCESSED)
 450             luatexbase.call_callback("luatexja.jfmglue.whatsit_getinfo",
 451                                      Np, lp, Nq)
 452             if Np.nuc then
 453                Np.id = id_pbox_w; Np.first = Np.nuc; Np.last = Np.nuc;
 454                return true, node_next(lp)
 455             else
 456                return false, node_next(lp)
 457             end
 458          end
 459       else
 460          -- we do special treatment for these whatsit nodes.
 461          if lps == sid_start_link or lps == sid_start_thread then
 462             Np.first = lp
 463          elseif lps == sid_end_link or lps == sid_end_thread then
 464             Np.first, Nq.last = nil, lp;
 465          end
 466          set_attr(lp, attr_icflag, PROCESSED)
 467          return false, node_next(lp)
 468       end
 469    end,
 470    [id_math] = function(lp)
 471       Np.first, Np.nuc = (Np.first or lp), lp;
 472       set_attr(lp, attr_icflag, PROCESSED)
 473       set_np_xspc_alchar(Np, -1, lp)
 474       local end_math  = node_end_of_math(lp)
 475       ltjw_apply_ashift_math(lp, end_math, attr_ablshift)
 476       set_attr(end_math, attr_icflag, PROCESSED)
 477       Np.last, Np.id = end_math, id_math;
 478       return true, node_next(end_math);
 479    end,
 480    [id_glue] = function(lp)
 481       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 482       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 483       return true, node_next(lp)
 484    end,
 485    [id_disc] = function(lp)
 486       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 487       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 488       ltjw_apply_ashift_disc(lp, (list_dir==dir_tate), tex_dir)
 489       Np.last_char = check_box_high(Np, getfield(lp, 'replace'), nil)
 490       return true, node_next(lp)
 491    end,
 492    [id_kern] = function(lp)
 493       if getsubtype(lp)==2 then
 494          Np.first = Np.first or lp
 495          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 496          if getid(lp)==id_glyph then -- アクセント本体
 497             setfield(lp, 'yoffset', getfield(lp, 'yoffset') - (has_attr(lp,attr_ablshift) or 0))
 498          else -- アクセントは上下にシフトされている
 499             setfield(lp, 'shift', getfield(lp, 'shift') + (has_attr(lp,attr_ablshift) or 0))
 500          end
 501          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 502          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 503          set_attr(lp, attr_icflag, PROCESSED);
 504          return calc_np_aux_glyph_common(lp, true)
 505       else
 506          Np.first = Np.first or lp
 507          Np.id = id_kern; set_attr(lp, attr_icflag, PROCESSED)
 508          Np.last = lp; return true, node_next(lp)
 509       end
 510    end,
 511    [id_penalty] = function(lp)
 512       Bp[#Bp+1] = lp; set_attr(lp, attr_icflag, PROCESSED)
 513       return false, node_next(lp)
 514    end,
 515 }
 516 end
 517 calc_np_auxtable[id_rule]   = calc_np_auxtable.box_like
 518 calc_np_auxtable[15]        = calc_np_auxtable.box_like
 519
 520 local function calc_np_aux_skip (lp)
 521    set_attr(lp, attr_icflag, PROCESSED)
 522    return false, node_next(lp)
 523 end
 524
 525 function calc_np(last, lp)
 526    local k
 527    -- We assume lp = node_next(Np.last)
 528    Np, Nq, non_ihb_flag = Nq, Np, true
 529    -- We clear `predefined' entries of Np before pairs() loop,
 530    -- because using only pairs() loop is slower.
 531    Np.post, Np.pre, Np.xspc = nil, nil, nil
 532    Np.first, Np.id, Np.last, Np.met, Np.class= nil, nil, nil, nil
 533    Np.auto_kspc, Np.auto_xspc, Np.char, Np.nuc = nil, nil, nil, nil
 534    for k in pairs(Np) do Np[k] = nil end
 535
 536    for k = 1,#Bp do Bp[k] = nil end
 537    while lp ~= last  do
 538       local lpa = has_attr(lp, attr_icflag) or 0
 539       -- unbox 由来ノードの検出
 540       if lpa>=PACKED then
 541          if lpa%PROCESSED_BEGIN_FLAG == BOXBDD then
 542             local lq = node_next(lp)
 543             head = node_remove(head, lp); node_free(lp); lp = lq
 544          else
 545             return calc_np_pbox(lp, last)
 546          end -- id_pbox
 547       else
 548          k, lp = (calc_np_auxtable[getid(lp)] or calc_np_aux_skip)(lp)
 549          if k then return lp end
 550       end
 551    end
 552    Np=nil
 553 end
 554 end
 555
 556 -- extract informations from Np
 557 -- We think that "Np is a Japanese character" if Np.met~=nil,
 558 --            "Np is an alphabetic character" if Np.pre~=nil,
 559 --            "Np is not a character" otherwise.
 560 local after_hlist = nil -- global
 561 local after_alchar, extract_np
 562 do
 563   local PRE  = luatexja.stack_table_index.PRE
 564   local POST = luatexja.stack_table_index.POST
 565   local KCAT = luatexja.stack_table_index.KCAT
 566   local XSP  = luatexja.stack_table_index.XSP
 567   local dir_tate = luatexja.dir_table.dir_tate
 568
 569 -- 和文文字のデータを取得
 570    local attr_jchar_class = luatexbase.attributes['ltj@charclass']
 571    local attr_jchar_code = luatexbase.attributes['ltj@charcode']
 572    local attr_autospc = luatexbase.attributes['ltj@autospc']
 573    local attr_autoxspc = luatexbase.attributes['ltj@autoxspc']
 574    local getcomponents = node.direct.getcomponents
 575    --local ltjf_get_vert_glyph = ltjf.get_vert_glyph
 576    function set_np_xspc_jachar(Nx, x)
 577       local m = ltjf_font_metric_table[getfont(x)]
 578       local c, c_glyph = (not getcomponents(x) and ltjs_orig_char_table[x]), getchar(x)
 579       if c and c~=c_glyph then set_attr(x, attr_jchar_code, c) end
 580       c = c or c_glyph
 581       local cls = slow_find_char_class(c, m, c_glyph)
 582       Nx.met, Nx.class, Nx.char = m, cls, c;
 583       local mc = m.char_type; Nx.char_type = mc
 584       if cls~=0 then set_attr(x, attr_jchar_class, cls) end
 585       Nx.pre  = table_current_stack[PRE + c]  or 0
 586       Nx.post = table_current_stack[POST + c] or 0
 587       Nx.xspc = table_current_stack[XSP  + c] or 3
 588       Nx.kcat = table_current_stack[KCAT + c] or 0
 589       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 590       return m, mc, cls
 591    end
 592    function set_np_xspc_jachar_hbox(Nx, x)
 593       local m = ltjf_font_metric_table[getfont(x)]
 594       local c = has_attr(x, attr_jchar_code) or getchar(x)
 595       Nx.met, Nx.char  = m, c; Nx.class = has_attr(x, attr_jchar_class) or 0;
 596       local mc = m.char_type; Nx.char_type = mc
 597       Nx.pre  = table_current_stack[PRE + c]  or 0
 598       Nx.post = table_current_stack[POST + c] or 0
 599       Nx.xspc = table_current_stack[XSP  + c] or 3
 600       Nx.kcat = table_current_stack[KCAT + c] or 0
 601       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 602    end
 603
 604 -- 欧文文字のデータを取得
 605    local floor = math.floor
 606    local nullfunc = function(n) return n end
 607    function set_np_xspc_alchar(Nx, c,x, lig)
 608       if c~=-1 then
 609          local f = (lig ==1) and nullfunc or node_tail
 610          local xc, xs = getcomponents(x), getsubtype(x)
 611          while xc and xs and xs%4>=2 do
 612             x = f(xc);
 613             if getid(x)==id_disc then x, xc, xs = nil, getfield(x,'replace'), 2
 614             else xc, xs = getcomponents(x), getsubtype(x) end
 615          end
 616          c = x and getchar(x) or c
 617          Nx.pre  = table_current_stack[PRE + c]  or 0
 618          Nx.post = table_current_stack[POST + c] or 0
 619       else
 620          Nx.pre, Nx.post = 0, 0
 621       end
 622       Nx.met = nil
 623       Nx.xspc = table_current_stack[XSP  + c] or 3
 624       Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
 625    end
 626    local set_np_xspc_alchar = set_np_xspc_alchar
 627
 628    -- change the information for the next loop
 629    -- (will be done if Nx is an alphabetic character or a hlist)
 630    after_hlist = function (Nx)
 631       local s = Nx.last_char
 632       if s then
 633          if getid(s)==id_glyph then
 634             if if_lang_ja(s) then
 635                set_np_xspc_jachar_hbox(Nx, s)
 636             else
 637                set_np_xspc_alchar(Nx, getchar(s), s, 2)
 638             end
 639          else
 640             set_np_xspc_alchar(Nx, -1, s)
 641          end
 642       else
 643          Nx.pre, Nx.met = nil, nil
 644       end
 645    end
 646
 647    after_alchar = function (Nx)
 648       local x = Nx.last_char
 649       return set_np_xspc_alchar(Nx, getchar(x), x, 2)
 650    end
 651
 652 end
 653
 654 -------------------- 最下層の処理
 655
 656 luatexbase.create_callback('luatexja.adjust_jfmglue', 'simple', function(n) return n end)
 657
 658 -- change penalties (or create a new penalty, if needed)
 659 local function handle_penalty_normal(post, pre, g)
 660    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 661    local a = (pre or 0) + (post or 0)
 662    if #Bp == 0 then
 663       if (a~=0 and not(g and getid(g)==id_kern)) then
 664          local p = node_new(id_penalty)
 665          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 666          setfield(p, 'penalty', a)
 667          head = insert_before(head, Np.first, p)
 668          Bp[1]=p;
 669          set_attr(p, attr_icflag, KINSOKU)
 670       end
 671    else for _, v in pairs(Bp) do add_penalty(v,a) end
 672    end
 673 end
 674
 675 local function handle_penalty_always(post, pre, g)
 676    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 677    local a = (pre or 0) + (post or 0)
 678    if #Bp == 0 then
 679       if not (g and getid(g)==id_glue) or a~=0 then
 680          local p = node_new(id_penalty)
 681          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 682          setfield(p, 'penalty', a)
 683          head = insert_before(head, Np.first, p)
 684          Bp[1]=p
 685          set_attr(p, attr_icflag, KINSOKU)
 686       end
 687    else for _, v in pairs(Bp) do add_penalty(v,a) end
 688    end
 689 end
 690
 691 local function handle_penalty_suppress(post, pre, g)
 692    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 693    if #Bp == 0 then
 694       if g and getid(g)==id_glue then
 695          local p = node_new(id_penalty)
 696          setfield(p, 'penalty', 10000); head = insert_before(head, Np.first, p)
 697          Bp[1]=p
 698          set_attr(p, attr_icflag, KINSOKU)
 699       end
 700    else
 701       local a = (pre or 0) + (post or 0)
 702       for _, v in pairs(Bp) do add_penalty(v,a) end
 703    end
 704 end
 705
 706 local function handle_penalty_jwp()
 707    local a = table_current_stack[luatexja.stack_table_index.JWP]
 708    if #widow_Bp == 0 then
 709       if a~=0 then
 710          local p = node_new(id_penalty)
 711          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 712          setfield(p, 'penalty', a)
 713          head = insert_before(head, widow_Np.first, p)
 714          widow_Bp[1]=p;
 715          set_attr(p, attr_icflag, KINSOKU)
 716       end
 717    else for _, v in pairs(widow_Bp) do add_penalty(v,a) end
 718    end
 719 end
 720
 721 -- 和文文字間の JFM glue を node 化
 722 local function new_jfm_glue(mc, bc, ac)
 723 -- bc, ac: char classes
 724    local g = mc[bc][ac]
 725    if g then
 726        if g[1] then
 727            return node_copy(g[1]), g.ratio, false, false, false
 728        else
 729          local f = node_new(id_glue)
 730          set_attr(f, attr_icflag, g.priority)
 731          setglue(f, g.width, g.stretch, g.shrink)
 732          return f, g.ratio, g.kanjiskip_natural, g.kanjiskip_stretch, g.kanjiskip_shrink
 733       end
 734    end
 735    return false, 0
 736 end
 737
 738 -- Nq.last (kern w) .... (glue/kern g) Np.first
 739 local function real_insert(g)
 740    if g then
 741       head  = insert_before(head, Np.first, g)
 742       Np.first = g
 743    end
 744 end
 745
 746
 747 -------------------- 和文文字間空白量の決定
 748 local calc_ja_ja_aux
 749 do
 750    local round = tex.round
 751    local bg_ag = 2*id_glue - id_glue
 752    local bg_ak = 2*id_glue - id_kern
 753    local bk_ag = 2*id_kern - id_glue
 754    local bk_ak = 2*id_kern - id_kern
 755
 756    local function blend_diffmet(b, a, rb, ra)
 757       return round(luatexja.jfmglue.diffmet_rule((1-rb)*b+rb*a, (1-ra)*b+ra*a))
 758    end
 759    calc_ja_ja_aux = function (gb, ga, db, da)
 760       if luatexja.jfmglue.diffmet_rule ~= math.two_pleft and diffmet_rule ~= math.two_pright
 761           and luatexja.jfmglue.diffmet_rule ~= math.two_paverage then
 762          db, da = 0, 1
 763       end
 764       if not gb then
 765          if ga then
 766             gb = node_new(id_kern, 1); setfield(gb, 'kern', 0)
 767          else return nil end
 768       elseif not ga then
 769          ga = node_new(id_kern, 1); setfield(ga, 'kern', 0)
 770       end
 771
 772       local k = 2*getid(gb) - getid(ga)
 773       if k == bg_ag then
 774          -- 両方とも glue．
 775          setglue(gb, blend_diffmet(
 776                         getfield(gb, 'width'), getfield(ga, 'width'), db, da),
 777                      blend_diffmet(
 778                         getfield(gb, 'stretch'), getfield(ga, 'stretch'), db, da),
 779                      -blend_diffmet(
 780                      -getfield(gb, 'shrink'), -getfield(ga, 'shrink'), db, da))
 781          node_free(ga)
 782          return gb
 783       elseif k == bk_ak then
 784          -- 両方とも kern．
 785          setfield(gb, 'kern', blend_diffmet(
 786                      getfield(gb, 'kern'), getfield(ga, 'kern'), db, da))
 787          node_free(ga)
 788          return gb
 789       elseif k == bk_ag then
 790          -- gb: kern, ga: glue
 791          setglue(ga, blend_diffmet(
 792                         getfield(gb, 'kern'), getfield(ga, 'width'), db, da),
 793                      blend_diffmet(
 794                         0, getfield(ga, 'stretch'), db, da),
 795                      -blend_diffmet(
 796                         0, -getfield(ga, 'shrink'), db, da))
 797          node_free(gb)
 798          return ga, 0, 0, 0
 799       else
 800          -- gb: glue, ga: kern
 801          setglue(gb, blend_diffmet(
 802                         getfield(gb, 'width'), getfield(ga, 'kern'), db, da),
 803                      blend_diffmet(
 804                         getfield(gb, 'stretch'), 0, db, da),
 805                      -blend_diffmet(
 806                         -getfield(gb, 'shrink'), 0, db, da))
 807          node_free(ga)
 808          return gb
 809       end
 810    end
 811 end
 812
 813 local null_skip_table = {0, 0, 0}
 814 -- get kanjiskip
 815 local get_kanjiskip, kanjiskip_jfm_flag
 816 local get_kanjiskip_low
 817 local calc_ja_ja_glue
 818 do
 819    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 820    local KANJI_SKIP_JFM   = luatexja.icflag_table.KANJI_SKIP_JFM
 821
 822    get_kanjiskip_low = function(flag, qm, bn, bp, bh)
 823       if flag or (qm.with_kanjiskip and (bn or bp or bh)) then
 824          if kanjiskip_jfm_flag then
 825             local g = node_new(id_glue);
 826             local bk = qm.kanjiskip or null_skip_table
 827             setglue(g, bn and (bn*bk[1]) or 0,
 828                        bp and (bp*bk[2]) or 0,
 829                        bh and (bh*bk[3]) or 0, 0, 0)
 830             set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 831             return g
 832          elseif flag then
 833             return node_copy(kanji_skip)
 834          else
 835             local g = node_new(id_glue);
 836             setglue(g,
 837                bn and (bn*getfield(kanji_skip, 'width')) or 0,
 838                bp and (bp*getfield(kanji_skip, 'stretch')) or 0,
 839                bh and (bh*getfield(kanji_skip, 'shrink')) or 0,
 840                0, 0)
 841             set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 842             return g
 843          end
 844       end
 845    end
 846
 847    get_kanjiskip = function()
 848       if Np.auto_kspc==0 or Nq.auto_kspc==0 then
 849         return nil
 850       elseif Np.auto_kspc or Nq.auto_kspc then
 851          local pm, qm = Np.met, Nq.met
 852          if (pm.char_type==qm.char_type) and (qm.var==pm.var) then
 853              return get_kanjiskip_low(true, qm, 1, 1, 1)
 854          else
 855             local gb = get_kanjiskip_low(true, qm, 1, 1, 1)
 856             local ga = get_kanjiskip_low(true, pm, 1, 1, 1)
 857             return calc_ja_ja_aux(gb, ga, 0, 1)
 858          end
 859       else
 860          local g = node_new(id_glue)
 861          set_attr(g, attr_icflag, kanjiskip_jfm_flag and KANJI_SKIP_JFM or KANJI_SKIP)
 862          return g
 863       end
 864    end
 865
 866    calc_ja_ja_glue = function ()
 867       local qm, pm = Nq.met, Np.met
 868       local qmc, pmc = qm.char_type, pm.char_type
 869       if (qmc==pmc) and (qm.var==pm.var) then
 870          local g, _, kn, kp, kh = new_jfm_glue(qmc, Nq.class, Np.class)
 871          return g, (Np.auto_kspc or Nq.auto_kspc) and get_kanjiskip_low(false, qm, kn, kp, kh)
 872       else
 873          local npn, nqn = Np.nuc, Nq.nuc
 874          local gb, db, bn, bp, bh
 875             = new_jfm_glue(qmc, Nq.class,
 876                            slow_find_char_class(Np.char,
 877                                                 qm, getchar(npn)))
 878          local ga, da, an, ap, ah
 879             = new_jfm_glue(pmc,
 880                            slow_find_char_class(Nq.char,
 881                                                 pm, getchar(nqn)),
 882                                                  Np.class)
 883          local g = calc_ja_ja_aux(gb, ga, db, da)
 884          local k
 885          if (pmc==qmc) and (qm.var==pm.var) then
 886             gb = get_kanjiskip_low(false, qm, bn, bp, bh)
 887             ga = get_kanjiskip_low(false, pm, an, ap, ah)
 888             k = calc_ja_ja_aux(gb, ga, db, da)
 889          end
 890          return g, k
 891       end
 892    end
 893 end
 894
 895 -------------------- 和欧文間空白量の決定
 896
 897 -- get xkanjiskip
 898 local get_xkanjiskip, xkanjiskip_jfm_flag
 899 local get_xkanjiskip_normal, get_xkanjiskip_jfm
 900 local get_xkanjiskip_low
 901 do
 902    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 903    local XKANJI_SKIP_JFM   = luatexja.icflag_table.XKANJI_SKIP_JFM
 904
 905    get_xkanjiskip_low = function(flag, qm, bn, bp, bh)
 906       if flag or (qm.with_kanjiskip and (bn or bp or bh)) then
 907          if xkanjiskip_jfm_flag then
 908             local g = node_new(id_glue);
 909             local bk = qm.xkanjiskip or null_skip_table
 910             setglue(g, bn and bk[1] or 0,
 911                        bp and bk[2] or 0,
 912                        bh and bk[3] or 0, 0, 0)
 913             set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 914             return g
 915          elseif flag then
 916             return node_copy(xkanji_skip)
 917          else
 918             local g = node_new(id_glue);
 919             setglue(g,
 920                bn and (bn*getfield(xkanji_skip, 'width')) or 0,
 921                bp and (bp*getfield(xkanji_skip, 'stretch')) or 0,
 922                bh and (bh*getfield(xkanji_skip, 'shrink')) or 0,
 923                0, 0)
 924             set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 925             return g
 926          end
 927       end
 928    end
 929
 930    get_xkanjiskip = function(Nn)
 931       if Np.auto_xspc==0 or Nq.auto_xspc==0 then
 932         return nil
 933       elseif (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 934          return get_xkanjiskip_low(true, Nn.met, 1, 1, 1)
 935       else
 936          local g = node_new(id_glue)
 937          set_attr(g, attr_icflag, xkanjiskip_jfm_flag and XKANJI_SKIP_JFM or XKANJI_SKIP)
 938          return g
 939       end
 940    end
 941 end
 942
 943 -------------------- 隣接した「塊」間の処理
 944
 945 local function combine_spc(name)
 946    return (Np[name] or Nq[name]) and ((Np[name]~=0) and (Nq[name]~=0))
 947 end
 948
 949 -- NA, NB: alchar or math
 950 local function get_NA_skip()
 951    local pm = Np.met
 952    local g, _, kn, kp, kh = new_jfm_glue(
 953       pm.char_type,
 954       fast_find_char_class(
 955         (Nq.id == id_math and -1 or (Nq.xspc>=2 and 'alchar' or 'nox_alchar')), pm),
 956       Np.class)
 957    local k = ((Nq.xspc>=2) and (Np.xspc%2==1) and combine_spc('auto_xspc'))
 958        and get_xkanjiskip_low(false, pm, kn, kp, kh)
 959    return g, k
 960 end
 961 local function get_NB_skip()
 962    local qm = Nq.met
 963    local g, _, kn, kp, kh = new_jfm_glue(
 964       qm.char_type, Nq.class,
 965       fast_find_char_class(
 966         (Np.id == id_math and -1 or (Np.xspc%2==1 and 'alchar' or 'nox_alchar')), qm)
 967     )
 968    local k = ((Nq.xspc>=2) and (Np.xspc%2==1) and combine_spc('auto_xspc'))
 969          and get_xkanjiskip_low(false, qm, kn, kp, kh)
 970    return g, k
 971 end
 972
 973 local function get_OA_skip(is_kanji)
 974    local pm = Np.met
 975    local g, _, kn, kp, kh = new_jfm_glue(
 976       pm.char_type,
 977       fast_find_char_class(
 978         (((Nq.id==id_glue)or(Nq.id==id_kern)) and 'glue' or 'jcharbdd'), pm),
 979       Np.class)
 980    local k
 981    if is_kanji==0 then
 982       k = combine_spc('auto_kspc') and get_kanjiskip_low(false, pm, kn, kp, kh)
 983    end
 984    return g, k
 985 end
 986 local function get_OB_skip(is_kanji)
 987    local qm = Nq.met
 988    local g, _, kn, kp, kh = new_jfm_glue(
 989       qm.char_type, Nq.class,
 990       fast_find_char_class(
 991         (((Np.id==id_glue)or(Np.id==id_kern)) and 'glue' or 'jcharbdd'), qm))
 992    local k
 993    if is_kanji==0 then
 994       k = combine_spc('auto_kspc') and get_kanjiskip_low(false, qm, kn, kp, kh)
 995    end
 996    return g, k
 997 end
 998
 999 -- (anything) .. jachar
1000 local function handle_np_jachar(mode)
1001    local qid = Nq.id
1002    if qid==id_jglyph or ((qid==id_pbox or qid==id_pbox_w) and Nq.met) then
1003       local g, k
1004       if non_ihb_flag then g, k = calc_ja_ja_glue() end -- M->K
1005       if not g then g = get_kanjiskip() end
1006       handle_penalty_normal(Nq.post, Np.pre, g);
1007       real_insert(g); real_insert(k)
1008    elseif Nq.met then  -- qid==id_hlist
1009       local g, k
1010       if non_ihb_flag then g, k = get_OA_skip(0) end -- O_A->K
1011       if not g then g = get_kanjiskip() end
1012       handle_penalty_normal(0, Np.pre, g); real_insert(g); real_insert(k)
1013    elseif Nq.pre then
1014       local g, k
1015       if non_ihb_flag then g, k = get_NA_skip() end -- N_A->X
1016       if not g then g = get_xkanjiskip(Np) end
1017       handle_penalty_normal((qid==id_hlist and 0 or Nq.post), Np.pre, g);
1018       real_insert(g); real_insert(k)
1019    else
1020       local g = non_ihb_flag and (get_OA_skip()) -- O_A
1021       if qid==id_glue then handle_penalty_normal(0, Np.pre, g)
1022       elseif qid==id_kern then handle_penalty_suppress(0, Np.pre, g)
1023       else handle_penalty_always(0, Np.pre, g)
1024       end
1025       real_insert(g)
1026    end
1027    if mode and Np.kcat%2~=1 then
1028       widow_Np.first, widow_Bp, Bp = Np.first, Bp, widow_Bp
1029    end
1030 end
1031
1032
1033 -- jachar .. (anything)
1034 local function handle_nq_jachar()
1035     if Np.pre then
1036       local g = non_ihb_flag and get_NB_skip() or get_xkanjiskip(Nq) -- N_B->X
1037       handle_penalty_normal(Nq.post, (Np.id==id_hlist and 0 or Np.pre), g); real_insert(g)
1038    else
1039       local g =non_ihb_flag and  (get_OB_skip()) -- O_B
1040       if Np.id==id_glue then handle_penalty_normal(Nq.post, 0, g)
1041       elseif Np.id==id_kern then handle_penalty_suppress(Nq.post, 0, g)
1042       else handle_penalty_always(Nq.post, 0, g)
1043       end
1044       real_insert(g)
1045    end
1046 end
1047
1048 -- (anything) .. (和文文字で始まる hlist)
1049 local function handle_np_ja_hlist()
1050    local qid = Nq.id
1051    if qid==id_jglyph or ((qid==id_pbox or qid == id_pbox_w) and Nq.met) then
1052       local g = non_ihb_flag and get_OB_skip(0) or get_kanjiskip() -- O_B->K
1053       handle_penalty_normal(Nq.post, 0, g); real_insert(g)
1054    elseif Nq.met then  -- Nq.id==id_hlist
1055       local g = get_kanjiskip() -- K
1056       handle_penalty_suppress(0, 0, g); real_insert(g)
1057    elseif Nq.pre then
1058       local g = get_xkanjiskip(Np) -- X
1059       handle_penalty_suppress(0, 0, g); real_insert(g)
1060    end
1061 end
1062
1063 -- (和文文字で終わる hlist) .. (anything)
1064 local function handle_nq_ja_hlist()
1065    if Np.pre then
1066       local g = get_xkanjiskip(Nq) -- X
1067       handle_penalty_suppress(0, 0, g); real_insert(g)
1068    end
1069 end
1070
1071
1072 -- Nq が前側のクラスタとなることによる修正
1073 local adjust_nq
1074 do
1075    local adjust_nq_aux = {
1076       [id_glyph] = function() after_alchar(Nq) end, -- after_alchar(Nq)
1077       [id_hlist]  = function() after_hlist(Nq) end,
1078       [id_pbox]  = function() after_hlist(Nq) end,
1079       [id_disc]  = function() after_hlist(Nq) end,
1080       [id_pbox_w]  = function()
1081                         luatexbase.call_callback("luatexja.jfmglue.whatsit_after",
1082                                                  false, Nq, Np)
1083                      end,
1084    }
1085
1086    adjust_nq=function()
1087       local x = adjust_nq_aux[Nq.id]
1088       if x then x()  end
1089    end
1090 end
1091
1092
1093 -------------------- 開始・終了時の処理
1094 do
1095 local node_prev = node.direct.getprev
1096 -- リスト末尾の処理
1097 local function handle_list_tail(mode, last)
1098    adjust_nq()
1099    if mode then
1100       -- the current list is to be line-breaked.
1101       -- Insert \jcharwidowpenalty
1102       if widow_Np.first then handle_penalty_jwp() end
1103    else
1104       Np=Nq
1105       -- the current list is the contents of a hbox
1106       local npi, pm = Np.id, Np.met
1107       if npi == id_jglyph or (npi==id_pbox and pm) then
1108          local g = new_jfm_glue(pm.char_type, Np.class, fast_find_char_class('boxbdd', pm))
1109          if g then
1110             set_attr(g, attr_icflag, BOXBDD)
1111             head = insert_after(head, Np.last, g)
1112          end
1113       end
1114    end
1115 end
1116
1117 -- リスト先頭の処理
1118 local function handle_list_head(par_indented)
1119    local npi, pm = Np.id, Np.met
1120    if npi ==  id_jglyph or (npi==id_pbox and pm) then
1121       if non_ihb_flag then
1122          local g = new_jfm_glue(pm.char_type, fast_find_char_class(par_indented, pm), Np.class)
1123          if g then
1124             set_attr(g, attr_icflag, BOXBDD)
1125             if getid(g)==id_glue and #Bp==0 then
1126                local h = node_new(id_penalty)
1127                setfield(h, 'penalty', 10000); set_attr(h, attr_icflag, BOXBDD)
1128             end
1129             head = insert_before(head, Np.first, g)
1130          end
1131       end
1132    end
1133 end
1134
1135 -- initialize
1136 -- return value: (the initial cursor lp), (last node)
1137 local init_var
1138 do
1139    local id_local = node.id('local_par')
1140    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
1141    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
1142    local KSK  = luatexja.stack_table_index.KSK
1143    local XSK  = luatexja.stack_table_index.XSK
1144    local dir_yoko = luatexja.dir_table.dir_yoko
1145    local dir_tate = luatexja.dir_table.dir_tate
1146    local attr_yablshift = luatexbase.attributes['ltj@yablshift']
1147    local attr_tablshift = luatexbase.attributes['ltj@tablshift']
1148    local table_pool = {
1149       {}, {}, {first=nil},
1150       { auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
1151         first=nil, id=nil, last=nil, met=nil, nuc=nil,
1152         post=nil, pre=nil, xspc=nil, },
1153       { auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
1154         first=nil, id=nil, last=nil, met=nil, nuc=nil,
1155         post=nil, pre=nil, xspc=nil, },
1156    }
1157    init_var = function (mode,dir)
1158       -- 1073741823: max_dimen
1159       Bp, widow_Bp, widow_Np, Np, Nq
1160          = table_pool[1], table_pool[2], table_pool[3], table_pool[4], table_pool[5]
1161       for i=1,5 do for j,_ in pairs(table_pool[i]) do table_pool[i][j]=nil end end
1162       table_current_stack = ltjs.table_current_stack
1163
1164       list_dir, tex_dir = (ltjs.list_dir or dir_yoko), (dir or 'TLT')
1165       local is_dir_tate = list_dir==dir_tate
1166       capsule_glyph = is_dir_tate and ltjw.capsule_glyph_tate or ltjw.capsule_glyph_yoko
1167       attr_ablshift = is_dir_tate and attr_tablshift or attr_yablshift
1168       local TEMP = node_new(id_glue)
1169       -- TEMP is a dummy node, which will be freed at the end of the callback.
1170       -- ithout this node, set_attr(kanji_skip, ...) somehow creates an "orphaned"  attribute list.
1171
1172       do
1173           kanji_skip, kanjiskip_jfm_flag = skip_table_to_glue(KSK)
1174           set_attr(kanji_skip, attr_icflag, KANJI_SKIP)
1175       end
1176
1177       do
1178           xkanji_skip, xkanjiskip_jfm_flag = skip_table_to_glue(XSK)
1179           set_attr(xkanji_skip, attr_icflag, XKANJI_SKIP)
1180       end
1181
1182       if mode then
1183          -- the current list is to be line-breaked:
1184          -- hbox from \parindent is skipped.
1185          local lp, par_indented, lpi, lps  = head, 'boxbdd', getid(head), getsubtype(head)
1186          while lp and
1187             ((lpi==id_whatsit and lps~=sid_user)
1188                or ((lpi==id_hlist) and (lps==3))
1189                or (lpi==id_local)) do
1190             if (lpi==id_hlist) and (lps==3) then
1191                Np.char, par_indented = 'parbdd', 'parbdd'
1192                Np.width = getfield(lp, 'width')
1193             end
1194             lp=node_next(lp); lpi, lps = getid(lp), getsubtype(lp) end
1195          return lp, node_tail(head), par_indented, TEMP
1196       else
1197          return head, nil, 'boxbdd', TEMP
1198       end
1199    end
1200 end
1201
1202 local ensure_tex_attr = ltjb.ensure_tex_attr
1203 local function cleanup(mode, TEMP)
1204    -- luatexja.ext_show_node_list(to_node(head), '> ', print)
1205    -- adjust attr_icflag for avoiding error
1206    if tex.getattribute(attr_icflag)~=0 then ensure_tex_attr(attr_icflag, 0) end
1207    node_free(kanji_skip);
1208    node_free(xkanji_skip); node_free(TEMP)
1209
1210    if mode then
1211       local h = node_next(head)
1212       if getid(h) == id_penalty and getfield(h, 'penalty') == 10000 then
1213          h = node_next(h)
1214          if getid(h) == id_glue and getsubtype(h) == 15 and not node_next(h) then
1215             return false
1216          end
1217       end
1218    end
1219    return head
1220 end
1221 -------------------- 外部から呼ばれる関数
1222
1223 -- main interface
1224 function luatexja.jfmglue.main(ahead, mode, dir)
1225    if not ahead then return ahead end
1226    --luatexja.ext_show_node_list(to_node(ahead ), '>B ', print)
1227    --print()
1228    head = ahead;
1229    local lp, last, par_indented, TEMP = init_var(mode,dir)
1230    lp = calc_np(last, lp)
1231    if Np then
1232       handle_list_head(par_indented)
1233       lp = calc_np(last,lp);
1234       while Np do
1235          adjust_nq();
1236          local pid, pm = Np.id, Np.met
1237          -- 挿入部
1238          if pid == id_jglyph then
1239             handle_np_jachar(mode)
1240          elseif pm then
1241             if pid==id_hlist then handle_np_ja_hlist()
1242             else handle_np_jachar() end
1243          elseif Nq.met then
1244             if Nq.id==id_hlist then handle_nq_ja_hlist()
1245             else handle_nq_jachar() end
1246          end
1247          lp = calc_np(last,lp)
1248       end
1249       handle_list_tail(mode, last)
1250    end
1251    --luatexja.ext_show_node_list(to_node(ahead ), '>A ', print)
1252    --print()
1253    return cleanup(mode, TEMP)
1254 end
1255 end
1256
1257 do
1258    local IHB  = luatexja.userid_table.IHB
1259    local BPAR = luatexja.userid_table.BPAR
1260    local BOXB = luatexja.userid_table.BOXB
1261    local node_prev = node.direct.getprev
1262    local node_write = node.direct.write
1263
1264    -- \inhibitglue
1265    function luatexja.jfmglue.create_inhibitglue_node()
1266       local tn = node_new(id_whatsit, sid_user)
1267       setfield(tn, 'user_id', IHB)
1268       setfield(tn, 'type', 100)
1269       setfield(tn, 'value', 1)
1270       node_write(tn)
1271    end
1272
1273    -- Node for indicating beginning of a paragraph
1274    -- (for ltjsclasses)
1275    function luatexja.jfmglue.create_beginpar_node()
1276       local tn = node_new(id_whatsit, sid_user)
1277       setfield(tn, 'user_id', BPAR)
1278       setfield(tn, 'type', 100)
1279       setfield(tn, 'value', 1)
1280       node_write(tn)
1281    end
1282
1283    -- Node for indicating a head/end of a box
1284    function luatexja.jfmglue.create_boxbdd_node()
1285       local tn = node_new(id_whatsit, sid_user)
1286       setfield(tn, 'user_id', BOXB)
1287       setfield(tn, 'type', 100)
1288       setfield(tn, 'value', 1)
1289       node_write(tn)
1290    end
1291
1292    local function whatsit_callback(Np, lp, Nq)
1293       if Np and Np.nuc then return Np
1294       elseif Np and getfield(lp, 'user_id') == BPAR then
1295          Np.first = lp; Np.nuc = lp; Np.last = lp
1296          return Np
1297       elseif Np and getfield(lp, 'user_id') == BOXB then
1298          Np.first = lp; Np.nuc = lp; Np.last = lp
1299          if Nq then
1300             if Nq.met then
1301                Np.class = fast_find_char_class('boxbdd', Nq.met)
1302             end
1303             Np.met = Nq.met; Np.pre = 0; Np.post = 0; Np.xspc = 0
1304             Np.auto_xspc, Np.auto_kspc = 0, 0
1305          end
1306          return Np
1307       else
1308          return Np
1309       end
1310    end
1311
1312     local function whatsit_after_callback(s, Nq, Np)
1313        if not s and getfield(Nq.nuc, 'user_id') == BPAR then
1314          local x, y = node_prev(Nq.nuc), Nq.nuc
1315          Nq.first, Nq.nuc, Nq.last = x, x, x
1316          if Np then
1317             if Np.met then
1318                Nq.class = fast_find_char_class('parbdd', Np.met)
1319             end
1320             Nq.met = Np.met; Nq.pre = 0; Nq.post = 0; Nq.xspc = 0
1321             Nq.auto_xspc, Nq.auto_kspc = 0, 0
1322          end
1323          head = node_remove(head, y)
1324          node_free(y)
1325        elseif not s and getfield(Nq.nuc, 'user_id') == BOXB then
1326          local x, y = node_prev(Nq.nuc), Nq.nuc
1327          Nq.first, Nq.nuc, Nq.last = x, x, x
1328          if Np then
1329             if Np.met then
1330                Nq.class = fast_find_char_class('boxbdd', Np.met)
1331             end
1332             Nq.met = Np.met; Nq.pre = 0; Nq.post = 0; Nq.xspc = 0
1333             Nq.auto_xspc, Nq.auto_kspc = 0, 0
1334          end
1335          head = node_remove(head, y)
1336          node_free(y)
1337       end
1338       return s
1339    end
1340
1341    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_getinfo", whatsit_callback,
1342                               "luatexja.beginpar.np_info", 1)
1343    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_after", whatsit_after_callback,
1344                               "luatexja.beginpar.np_info_after", 1)
1345
1346 end
1347
1348 luatexja.jfmglue.after_hlist = after_hlist
1349 luatexja.jfmglue.check_box_high = check_box_high