src/ltj-jfmglue.lua

   1 --
   2 -- luatexja/ltj-jfmglue.lua
   3 --
   4 luatexbase.provides_module({
   5   name = 'luatexja.jfmglue',
   6   date = '2017/05/05',
   7   description = 'Insertion process of JFM glues and kanjiskip',
   8 })
   9 module('luatexja.jfmglue', package.seeall)
  10 local err, warn, info, log = luatexbase .errwarinf(_NAME)
  11
  12 luatexja.load_module('base');      local ltjb = luatexja.base
  13 luatexja.load_module('stack');     local ltjs = luatexja.stack
  14 luatexja.load_module('jfont');     local ltjf = luatexja.jfont
  15 luatexja.load_module('direction'); local ltjd = luatexja.direction
  16 luatexja.load_module('setwidth');      local ltjw = luatexja.setwidth
  17 local pairs = pairs
  18
  19 local nullfunc = function(n) return n end
  20 local to_node = node.direct.tonode
  21 local to_direct = node.direct.todirect
  22
  23 local setfield = node.direct.setfield
  24 local setglue = luatexja.setglue
  25 local getfield = node.direct.getfield
  26 local getid = node.direct.getid
  27 local getfont = node.direct.getfont
  28 local getlist = node.direct.getlist
  29 local getchar = node.direct.getchar
  30 local getsubtype = node.direct.getsubtype
  31 local if_lang_ja
  32 do
  33     local lang_ja = luatexja.lang_ja
  34     local getlang = node.direct.getlang
  35     if_lang_ja = getlang
  36       and function (n) return getlang(n)==lang_ja end
  37       or  function (n) return getfield(n,'lang')==lang_ja end
  38 end
  39
  40 local has_attr = node.direct.has_attribute
  41 local set_attr = node.direct.set_attribute
  42 local insert_before = node.direct.insert_before
  43 local insert_after = node.direct.insert_after
  44 local node_next = node.direct.getnext
  45 local ltjd_make_dir_whatsit = ltjd.make_dir_whatsit
  46 local ltjf_font_metric_table = ltjf.font_metric_table
  47 local ltjf_find_char_class = ltjf.find_char_class
  48 local node_new = node.direct.new
  49 local node_copy = node.direct.copy
  50 local node_tail = node.direct.tail
  51 local node_free = node.direct.free
  52 local node_remove = node.direct.remove
  53
  54 local id_glyph = node.id('glyph')
  55 local id_hlist = node.id('hlist')
  56 local id_vlist = node.id('vlist')
  57 local id_rule = node.id('rule')
  58 local id_ins = node.id('ins')
  59 local id_mark = node.id('mark')
  60 local id_adjust = node.id('adjust')
  61 local id_disc = node.id('disc')
  62 local id_whatsit = node.id('whatsit')
  63 local id_math = node.id('math')
  64 local id_glue = node.id('glue')
  65 local id_kern = node.id('kern')
  66 local id_penalty = node.id('penalty')
  67
  68 local id_jglyph    = 512 -- Japanese character
  69 local id_box_like  = 256 -- vbox, shifted hbox
  70 local id_pbox      = 257 -- already processed nodes (by \unhbox)
  71 local id_pbox_w    = 258 -- cluster which consists of a whatsit
  72 local sid_user = node.subtype('user_defined')
  73
  74 local ITALIC       = luatexja.icflag_table.ITALIC
  75 local PACKED       = luatexja.icflag_table.PACKED
  76 local KINSOKU      = luatexja.icflag_table.KINSOKU
  77 local FROM_JFM     = luatexja.icflag_table.FROM_JFM
  78 local PROCESSED    = luatexja.icflag_table.PROCESSED
  79 local IC_PROCESSED = luatexja.icflag_table.IC_PROCESSED
  80 local BOXBDD       = luatexja.icflag_table.BOXBDD
  81 local PROCESSED_BEGIN_FLAG = luatexja.icflag_table.PROCESSED_BEGIN_FLAG
  82
  83 local attr_icflag = luatexbase.attributes['ltj@icflag']
  84 local kanji_skip
  85 local xkanji_skip
  86 local table_current_stack
  87 local list_dir
  88 local capsule_glyph
  89 local tex_dir
  90 local attr_ablshift
  91 local set_np_xspc_jachar
  92 local set_np_xspc_jachar_hbox
  93
  94 local ltjs_orig_char_table = ltjs.orig_char_table
  95
  96 local function get_attr_icflag(p)
  97    return (has_attr(p, attr_icflag) or 0)%PROCESSED_BEGIN_FLAG
  98 end
  99
 100 -------------------- Helper functions
 101
 102 -- This function is called only for acquiring `special' characters.
 103 local function fast_find_char_class(c,m)
 104    return m.chars[c] or 0
 105 end
 106
 107 -- 文字クラスの決定
 108 local slow_find_char_class
 109 do
 110    local start_time_measure = ltjb.start_time_measure
 111    local stop_time_measure = ltjb.stop_time_measure
 112    slow_find_char_class = function (c, m, oc)
 113       local cls = ltjf_find_char_class(oc, m)
 114       if oc~=c and c and cls==0 then
 115          return ltjf_find_char_class(c, m)
 116       else
 117          return cls
 118       end
 119    end
 120 end
 121
 122 local function skip_table_to_glue(n)
 123    local g, st = node_new(id_glue), ltjs.fast_get_stack_skip(n)
 124    setglue(g, st.width, st.stretch, st.shrink, st.stretch_order, st.shrink_order)
 125    return g, (st.width==1073741823)
 126 end
 127
 128
 129 -- penalty 値の計算
 130 local function add_penalty(p,e)
 131    local pp = getfield(p, 'penalty')
 132    if pp>=10000 then
 133       if e<=-10000 then setfield(p, 'penalty', 0) end
 134    elseif pp<=-10000 then
 135       if e>=10000 then  setfield(p, 'penalty', 0) end
 136    else
 137       pp = pp + e
 138       if pp>=10000 then      setfield(p, 'penalty', 10000)
 139       elseif pp<=-10000 then setfield(p, 'penalty', -10000)
 140       else                   setfield(p, 'penalty', pp) end
 141    end
 142 end
 143
 144 -- 「異なる JFM」の間の調整方法
 145 diffmet_rule = math.two_paverage
 146 function math.two_add(a,b) return a+b end
 147 function math.two_average(a,b) return (a+b)*0.5 end
 148 function math.two_paverage(a,b) return (a+b)/2 end
 149 function math.two_pleft(a,b) return a end
 150 function math.two_pright(a,b) return b end
 151
 152 local head -- the head of current list
 153
 154 local Np, Nq, Bp
 155 local widow_Bp, widow_Np -- \jcharwidowpenalty 挿入位置管理用
 156
 157 local non_ihb_flag -- JFM グルー挿入抑止用 flag
 158 -- false: \inhibitglue 指定時 true: それ以外
 159
 160 -------------------- hlist 内の文字の検索
 161
 162 local first_char, last_char, find_first_char
 163 do
 164 local ltjd_glyph_from_packed = ltjd.glyph_from_packed
 165 local function check_box(box_ptr, box_end)
 166    local p = box_ptr; local found_visible_node = false
 167    if not p then
 168       find_first_char = false; last_char = nil
 169       return true
 170    end
 171    while p and p~=box_end do
 172       local pid = getid(p)
 173       if pid==id_kern and getsubtype(p)==2 then
 174          p = node_next(node_next(node_next(p))); pid = getid(p) -- p must be glyph_node
 175        end
 176       if pid==id_glyph then
 177          repeat
 178             if find_first_char then
 179                first_char = p; find_first_char = false
 180             end
 181             last_char = p; found_visible_node = true; p=node_next(p)
 182             if (not p) or p==box_end then
 183                return found_visible_node
 184             end
 185          until getid(p)~=id_glyph
 186          pid = getid(p) -- p must be non-nil
 187       end
 188       if pid==id_kern then
 189          local pa = get_attr_icflag(p)
 190          if pa==IC_PROCESSED then
 191             -- do nothing
 192          elseif getsubtype(p)==2 then
 193             p = node_next(node_next(p));
 194             -- Note that another node_next will be executed outside this if-statement.
 195          else
 196             found_visible_node = true
 197             find_first_char = false; last_char = nil
 198          end
 199       elseif pid==id_hlist then
 200          if PACKED == get_attr_icflag(p) then
 201             local s = ltjd_glyph_from_packed(p)
 202             if find_first_char then
 203                first_char = s; find_first_char = false
 204             end
 205             last_char = s; found_visible_node = true
 206          else
 207             if getfield(p, 'shift')==0 then
 208                last_char = nil
 209                if check_box(getlist(p), nil) then found_visible_node = true end
 210                find_first_char = false
 211             else
 212                find_first_char = false; last_char = nil
 213             end
 214          end
 215       elseif pid==id_math then
 216          if find_first_char then
 217             first_char = p; find_first_char = false
 218          end
 219          last_char = p; found_visible_node = true
 220       elseif pid==id_rule and get_attr_icflag(p)==PACKED then
 221          -- do nothing
 222       elseif not (pid==id_ins   or pid==id_mark
 223                   or pid==id_adjust or pid==id_whatsit
 224                   or pid==id_penalty) then
 225          found_visible_node = true
 226          find_first_char = false; last_char = nil
 227       end
 228       p = node_next(p)
 229    end
 230    return found_visible_node
 231 end
 232
 233 function check_box_high(Nx, box_ptr, box_end)
 234    first_char = nil;  last_char = nil;  find_first_char = true
 235    if check_box(box_ptr, box_end) then
 236       local first_char = first_char
 237       if first_char then
 238          if getid(first_char)==id_glyph then
 239             if if_lang_ja(first_char) then
 240                set_np_xspc_jachar_hbox(Nx, first_char)
 241             else
 242                set_np_xspc_alchar(Nx, getchar(first_char),first_char, 1)
 243             end
 244          else -- math_node
 245             set_np_xspc_alchar(Nx, -1,first_char)
 246          end
 247       end
 248    end
 249    return last_char
 250 end
 251 end
 252 -------------------- Np の計算と情報取得
 253
 254 luatexbase.create_callback("luatexja.jfmglue.whatsit_getinfo", "data",
 255                            function (Np, lp, Nq)
 256                               if Np.nuc then return Np
 257                               else
 258                                  return Np  -- your code
 259                               end
 260                            end)
 261 luatexbase.create_callback("luatexja.jfmglue.whatsit_after", "data",
 262                            function (stat, Nq, Np) return false end)
 263
 264 -- calc next Np
 265 local calc_np
 266 do
 267
 268 local traverse = node.direct.traverse
 269 local function check_next_ickern(lp)
 270   if lp and getid(lp) == id_kern and ( getsubtype(lp)==3 or ITALIC == get_attr_icflag(lp)) then
 271       set_attr(lp, attr_icflag, IC_PROCESSED);
 272       Np.last = lp; return node_next(lp)
 273    else
 274       Np.last = Np.nuc; return lp
 275    end
 276 end
 277
 278 local function calc_np_pbox(lp, last)
 279    local first, lpa, nc = (not Np.first), KINSOKU, nil
 280    Np.first = Np.first or lp; Np.id = id_pbox
 281    set_attr(lp, attr_icflag, get_attr_icflag(lp));
 282    while lp ~=last and (lpa>=PACKED) and (lpa<BOXBDD) do
 283       local lpi = getid(lp)
 284       if lpi==id_hlist or lpi==id_vlist then
 285          head, lp, nc = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm pbox')
 286          Np.first = first and nc or Np.first
 287       elseif (lpi==id_rule) and (lpa==PACKED) then
 288          lp = node_next(lp)
 289          nc, lp = lp, node_next(lp)
 290       else
 291          nc, lp = lp, node_next(lp)
 292       end
 293       first, lpa = false, (lp and has_attr(lp, attr_icflag) or 0)
 294      -- get_attr_icflag() ではいけない！
 295    end
 296    Np.nuc = nc
 297    lp = check_next_ickern(lp)
 298    Np.last_char = check_box_high(Np, Np.first, lp)
 299    return lp
 300 end
 301
 302 local ltjw_apply_ashift_math = ltjw.apply_ashift_math
 303 local ltjw_apply_ashift_disc = ltjw.apply_ashift_disc
 304 local min, max = math.min, math.max
 305 local function calc_np_aux_glyph_common(lp, acc_flag)
 306    Np.nuc = lp
 307    Np.first= (Np.first or lp)
 308    if if_lang_ja(lp) then
 309       Np.id = id_jglyph
 310       local m, mc, cls = set_np_xspc_jachar(Np, lp)
 311       local npi, npf
 312       lp, head, npi, npf = capsule_glyph(lp, m, mc[cls], head, tex_dir)
 313       Np.first = (Np.first~=Np.nuc) and Np.first or npf or npi
 314       Np.nuc = npi
 315       return true, check_next_ickern(lp);
 316    else
 317       Np.id = id_glyph
 318       set_np_xspc_alchar(Np, getchar(lp), lp, 1)
 319       -- loop
 320       local first_glyph, last_glyph = lp
 321       set_attr(lp, attr_icflag, PROCESSED); Np.last = lp
 322       local y_adjust = has_attr(lp,attr_ablshift) or 0
 323       local node_depth = getfield(lp, 'depth') + min(y_adjust, 0)
 324       local adj_depth = (y_adjust>0) and (getfield(lp, 'depth') + y_adjust) or 0
 325       setfield(lp, 'yoffset', getfield(lp, 'yoffset') - y_adjust)
 326       lp = node_next(lp)
 327       for lx in traverse(lp) do
 328          local lai = get_attr_icflag(lx)
 329          if lx==last or  lai>=PACKED then
 330             lp=lx; break
 331          else
 332             local lid = getid(lx)
 333             if lid==id_glyph and not if_lang_ja(lx) then
 334                -- 欧文文字
 335                last_glyph = lx; set_attr(lx, attr_icflag, PROCESSED); Np.last = lx
 336                y_adjust = has_attr(lx,attr_ablshift) or 0
 337                node_depth = max(getfield(lx, 'depth') + min(y_adjust, 0), node_depth)
 338                adj_depth = (y_adjust>0) and max(getfield(lx, 'depth') + y_adjust, adj_depth) or adj_depth
 339                setfield(lx, 'yoffset', getfield(lx, 'yoffset') - y_adjust)
 340             elseif lid==id_kern then
 341                local ls = getsubtype(lx)
 342                if ls==2 then -- アクセント用の kern
 343                   set_attr(lx, attr_icflag, PROCESSED)
 344                   lx = node_next(lx) -- lx: アクセント本体
 345                   if getid(lx)==id_glyph then
 346                      setfield(lx, 'yoffset', getfield(lx, 'yoffset') - (has_attr(lx,attr_ablshift) or 0))
 347                   else -- アクセントは上下にシフトされている
 348                      setfield(lx, 'shift', getfield(lx, 'shift') + (has_attr(lx,attr_ablshift) or 0))
 349                   end
 350                   lx = node_next(node_next(lx))
 351                elseif ls==0  then
 352                   Np.last = lx
 353                elseif (ls==3) or (lai==ITALIC) then
 354                   Np.last = lx; set_attr(lx, attr_icflag, IC_PROCESSED)
 355                else
 356                   lp=lx; break
 357                end
 358             else
 359                lp=lx; break
 360             end
 361          end
 362       end
 363       local r
 364       if adj_depth>node_depth then
 365             r = node_new(id_rule,3)
 366             setfield(r, 'width', 0); setfield(r, 'height', 0)
 367             setfield(r, 'depth',adj_depth); setfield(r, 'dir', tex_dir)
 368             set_attr(r, attr_icflag, PROCESSED)
 369       end
 370       if last_glyph then
 371          Np.last_char = last_glyph
 372          if r then insert_after(head, first_glyph, r) end
 373       else
 374          local npn = Np.nuc
 375          Np.last_char = npn
 376          if r then
 377             local nf, nc = getfont(npn), getchar(npn)
 378             local ct = (font.getfont(nf) or font.fonts[nf] ).characters[nc]
 379             if not ct then -- variation selector
 380                node_free(r)
 381             elseif (ct.left_protruding or 0) == 0 then
 382                head = insert_before(head, npn, r)
 383                Np.first = acc_flag and Np.first or ((Np.first==npn) and r or npn)
 384             elseif (ct.right_protruding or 0) == 0 then
 385                insert_after(head, npn, r); Np.last, lp = r, r
 386             else
 387                ltjb.package_warning_no_line(
 388                   'luatexja',
 389                   'Check depth of glyph node ' .. tostring(npn) .. '(font=' .. nf
 390                      .. ', char=' .. nc .. '),    because its \\lpcode is ' .. tostring(ct.left_protruding)
 391                      .. ' and its \\rpcode is ' .. tostring(ct.right_protruding)
 392                ); node_free(r)
 393             end
 394          end
 395       end
 396       return true, lp
 397    end
 398 end
 399 local calc_np_auxtable
 400 do
 401 local node_end_of_math = node.direct.end_of_math
 402 local dir_tate = luatexja.dir_table.dir_tate
 403 local sid_start_link = node.subtype('pdf_start_link')
 404 local sid_start_thread = node.subtype('pdf_start_thread')
 405 local sid_end_link = node.subtype('pdf_end_link')
 406 local sid_end_thread = node.subtype('pdf_end_thread')
 407 calc_np_auxtable = {
 408    [id_glyph] = calc_np_aux_glyph_common,
 409    [id_hlist] = function(lp)
 410       local op, flag
 411       head, lp, op, flag = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm hlist')
 412       set_attr(op, attr_icflag, PROCESSED)
 413       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 414       if (flag or getfield(op, 'shift')~=0) then
 415          Np.id = id_box_like
 416       else
 417          Np.id = id_hlist
 418          Np.last_char = check_box_high(Np, getlist(op), nil)
 419       end
 420       return true, lp
 421    end,
 422    [id_vlist] =  function(lp)
 423       local op
 424       head, lp, op = ltjd_make_dir_whatsit(head, lp, list_dir, 'jfm:' .. getid(lp))
 425       Np.first = Np.first or op; Np.last = op; Np.nuc = op;
 426       Np.id = id_box_like;
 427       return true, lp
 428    end,
 429    box_like = function(lp)
 430       Np.first = Np.first or lp; Np.last = lp; Np.nuc = lp;
 431       Np.id = id_box_like;
 432       return true, node_next(lp)
 433    end,
 434    [id_whatsit] = function(lp)
 435       local lps = getsubtype(lp)
 436       if lps==sid_user then
 437          if getfield(lp, 'user_id')==luatexja.userid_table.IHB then
 438             local lq = node_next(lp);
 439             head = node_remove(head, lp); node_free(lp); non_ihb_flag = false
 440             return false, lq;
 441          else
 442             set_attr(lp, attr_icflag, PROCESSED)
 443             luatexbase.call_callback("luatexja.jfmglue.whatsit_getinfo",
 444                                      Np, lp, Nq)
 445             if Np.nuc then
 446                Np.id = id_pbox_w; Np.first = Np.nuc; Np.last = Np.nuc;
 447                return true, node_next(lp)
 448             else
 449                return false, node_next(lp)
 450             end
 451          end
 452       else
 453          -- we do special treatment for these whatsit nodes.
 454          if lps == sid_start_link or lps == sid_start_thread then
 455             Np.first = lp
 456          elseif lps == sid_end_link or lps == sid_end_thread then
 457             Np.first, Nq.last = nil, lp;
 458          end
 459          set_attr(lp, attr_icflag, PROCESSED)
 460          return false, node_next(lp)
 461       end
 462    end,
 463    [id_math] = function(lp)
 464       Np.first, Np.nuc = (Np.first or lp), lp;
 465       set_attr(lp, attr_icflag, PROCESSED)
 466       set_np_xspc_alchar(Np, -1, lp)
 467       local end_math  = node_end_of_math(lp)
 468       ltjw_apply_ashift_math(lp, end_math, attr_ablshift)
 469       set_attr(end_math, attr_icflag, PROCESSED)
 470       Np.last, Np.id = end_math, id_math;
 471       return true, node_next(end_math);
 472    end,
 473    [id_glue] = function(lp)
 474       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 475       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 476       return true, node_next(lp)
 477    end,
 478    [id_disc] = function(lp)
 479       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 480       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 481       ltjw_apply_ashift_disc(lp, (list_dir==dir_tate), tex_dir)
 482       Np.last_char = check_box_high(Np, getfield(lp, 'replace'), nil)
 483       return true, node_next(lp)
 484    end,
 485    [id_kern] = function(lp)
 486       if getsubtype(lp)==2 then
 487          Np.first = Np.first or lp
 488          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 489          if getid(lp)==id_glyph then -- アクセント本体
 490             setfield(lp, 'yoffset', getfield(lp, 'yoffset') - (has_attr(lp,attr_ablshift) or 0))
 491          else -- アクセントは上下にシフトされている
 492             setfield(lp, 'shift', getfield(lp, 'shift') + (has_attr(lp,attr_ablshift) or 0))
 493          end
 494          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 495          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 496          set_attr(lp, attr_icflag, PROCESSED);
 497          return calc_np_aux_glyph_common(lp, true)
 498       else
 499          Np.first = Np.first or lp
 500          Np.id = id_kern; set_attr(lp, attr_icflag, PROCESSED)
 501          Np.last = lp; return true, node_next(lp)
 502       end
 503    end,
 504    [id_penalty] = function(lp)
 505       Bp[#Bp+1] = lp; set_attr(lp, attr_icflag, PROCESSED)
 506       return false, node_next(lp)
 507    end,
 508 }
 509 end
 510 calc_np_auxtable[id_rule]   = calc_np_auxtable.box_like
 511 calc_np_auxtable[15]        = calc_np_auxtable.box_like
 512
 513 local function calc_np_aux_skip (lp)
 514    set_attr(lp, attr_icflag, PROCESSED)
 515    return false, node_next(lp)
 516 end
 517
 518 function calc_np(last, lp)
 519    local k
 520    -- We assume lp = node_next(Np.last)
 521    Np, Nq, non_ihb_flag = Nq, Np, true
 522    -- We clear `predefined' entries of Np before pairs() loop,
 523    -- because using only pairs() loop is slower.
 524    Np.post, Np.pre, Np.xspc = nil, nil, nil
 525    Np.first, Np.id, Np.last, Np.met, Np.class= nil, nil, nil, nil
 526    Np.auto_kspc, Np.auto_xspc, Np.char, Np.nuc = nil, nil, nil, nil
 527    for k in pairs(Np) do Np[k] = nil end
 528
 529    for k = 1,#Bp do Bp[k] = nil end
 530    while lp ~= last  do
 531       local lpa = has_attr(lp, attr_icflag) or 0
 532       -- unbox 由来ノードの検出
 533       if lpa>=PACKED then
 534          if lpa%PROCESSED_BEGIN_FLAG == BOXBDD then
 535             local lq = node_next(lp)
 536             head = node_remove(head, lp); node_free(lp); lp = lq
 537          else
 538             return calc_np_pbox(lp, last)
 539          end -- id_pbox
 540       else
 541          k, lp = (calc_np_auxtable[getid(lp)] or calc_np_aux_skip)(lp)
 542          if k then return lp end
 543       end
 544    end
 545    Np=nil
 546 end
 547 end
 548
 549 -- extract informations from Np
 550 -- We think that "Np is a Japanese character" if Np.met~=nil,
 551 --            "Np is an alphabetic character" if Np.pre~=nil,
 552 --            "Np is not a character" otherwise.
 553 after_hlist = nil -- global
 554 local after_alchar, extract_np
 555 do
 556   local PRE  = luatexja.stack_table_index.PRE
 557   local POST = luatexja.stack_table_index.POST
 558   local KCAT = luatexja.stack_table_index.KCAT
 559   local XSP  = luatexja.stack_table_index.XSP
 560   local dir_tate = luatexja.dir_table.dir_tate
 561
 562 -- 和文文字のデータを取得
 563    local attr_jchar_class = luatexbase.attributes['ltj@charclass']
 564    local attr_jchar_code = luatexbase.attributes['ltj@charcode']
 565    local attr_autospc = luatexbase.attributes['ltj@autospc']
 566    local attr_autoxspc = luatexbase.attributes['ltj@autoxspc']
 567    --local ltjf_get_vert_glyph = ltjf.get_vert_glyph
 568    function set_np_xspc_jachar(Nx, x)
 569       local m = ltjf_font_metric_table[getfont(x)]
 570       local c, c_glyph = ltjs_orig_char_table[x], getchar(x)
 571       c = c or c_glyph
 572       local cls = slow_find_char_class(c, m, c_glyph)
 573       Nx.met, Nx.class, Nx.char = m, cls, c;
 574       local mc = m.char_type; Nx.char_type = mc
 575       if cls~=0 then set_attr(x, attr_jchar_class, cls) end
 576       if c~=c_glyph then set_attr(x, attr_jchar_code, c) end
 577       Nx.pre  = table_current_stack[PRE + c]  or 0
 578       Nx.post = table_current_stack[POST + c] or 0
 579       Nx.xspc = table_current_stack[XSP  + c] or 3
 580       Nx.kcat = table_current_stack[KCAT + c] or 0
 581       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 582       return m, mc, cls
 583    end
 584    function set_np_xspc_jachar_hbox(Nx, x)
 585       local m = ltjf_font_metric_table[getfont(x)]
 586       local c = has_attr(x, attr_jchar_code) or getchar(x)
 587       Nx.met, Nx.char  = m, c; Nx.class = has_attr(x, attr_jchar_class) or 0;
 588       local mc = m.char_type; Nx.char_type = mc
 589       Nx.pre  = table_current_stack[PRE + c]  or 0
 590       Nx.post = table_current_stack[POST + c] or 0
 591       Nx.xspc = table_current_stack[XSP  + c] or 3
 592       Nx.kcat = table_current_stack[KCAT + c] or 0
 593       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 594    end
 595
 596 -- 欧文文字のデータを取得
 597    local floor = math.floor
 598    function set_np_xspc_alchar(Nx, c,x, lig)
 599       if c~=-1 then
 600          local f = (lig ==1) and nullfunc or node_tail
 601          local xc, xs = getfield(x, 'components'), getsubtype(x)
 602          while xc and xs and xs%4>=2 do
 603             x = f(xc); xc, xs = getfield(x, 'components'), getsubtype(x)
 604          end
 605          c = getchar(x)
 606          Nx.pre  = table_current_stack[PRE + c]  or 0
 607          Nx.post = table_current_stack[POST + c] or 0
 608       else
 609          Nx.pre, Nx.post = 0, 0
 610       end
 611       Nx.met = nil
 612       Nx.xspc = table_current_stack[XSP  + c] or 3
 613       Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
 614    end
 615    local set_np_xspc_alchar = set_np_xspc_alchar
 616
 617    -- change the information for the next loop
 618    -- (will be done if Nx is an alphabetic character or a hlist)
 619    after_hlist = function (Nx)
 620       local s = Nx.last_char
 621       if s then
 622          if getid(s)==id_glyph then
 623             if if_lang_ja(s) then
 624                set_np_xspc_jachar_hbox(Nx, s)
 625             else
 626                set_np_xspc_alchar(Nx, getchar(s), s, 2)
 627             end
 628          else
 629             set_np_xspc_alchar(Nx, -1, s)
 630          end
 631       else
 632          Nx.pre, Nx.met = nil, nil
 633       end
 634    end
 635
 636    after_alchar = function (Nx)
 637       local x = Nx.last_char
 638       return set_np_xspc_alchar(Nx, getchar(x), x, 2)
 639    end
 640
 641 end
 642
 643 -------------------- 最下層の処理
 644
 645 luatexbase.create_callback('luatexja.adjust_jfmglue', 'simple', nullfunc)
 646
 647 -- change penalties (or create a new penalty, if needed)
 648 local function handle_penalty_normal(post, pre, g)
 649    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 650    local a = (pre or 0) + (post or 0)
 651    if #Bp == 0 then
 652       if (a~=0 and not(g and getid(g)==id_kern)) then
 653          local p = node_new(id_penalty)
 654          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 655          setfield(p, 'penalty', a)
 656          head = insert_before(head, Np.first, p)
 657          Bp[1]=p;
 658          set_attr(p, attr_icflag, KINSOKU)
 659       end
 660    else for _, v in pairs(Bp) do add_penalty(v,a) end
 661    end
 662 end
 663
 664 local function handle_penalty_always(post, pre, g)
 665    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 666    local a = (pre or 0) + (post or 0)
 667    if #Bp == 0 then
 668       if not (g and getid(g)==id_glue) or a~=0 then
 669          local p = node_new(id_penalty)
 670          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 671          setfield(p, 'penalty', a)
 672          head = insert_before(head, Np.first, p)
 673          Bp[1]=p
 674          set_attr(p, attr_icflag, KINSOKU)
 675       end
 676    else for _, v in pairs(Bp) do add_penalty(v,a) end
 677    end
 678 end
 679
 680 local function handle_penalty_suppress(post, pre, g)
 681    luatexbase.call_callback('luatexja.adjust_jfmglue', head, Nq, Np, Bp)
 682    if #Bp == 0 then
 683       if g and getid(g)==id_glue then
 684          local p = node_new(id_penalty)
 685          setfield(p, 'penalty', 10000); head = insert_before(head, Np.first, p)
 686          Bp[1]=p
 687          set_attr(p, attr_icflag, KINSOKU)
 688       end
 689    else
 690       local a = (pre or 0) + (post or 0)
 691       for _, v in pairs(Bp) do add_penalty(v,a) end
 692    end
 693 end
 694
 695 local function handle_penalty_jwp()
 696    local a = table_current_stack[luatexja.stack_table_index.JWP]
 697    if #widow_Bp == 0 then
 698       if a~=0 then
 699          local p = node_new(id_penalty)
 700          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 701          setfield(p, 'penalty', a)
 702          head = insert_before(head, widow_Np.first, p)
 703          widow_Bp[1]=p;
 704          set_attr(p, attr_icflag, KINSOKU)
 705       end
 706    else for _, v in pairs(widow_Bp) do add_penalty(v,a) end
 707    end
 708 end
 709
 710 -- 和文文字間の JFM glue を node 化
 711 local function new_jfm_glue(mc, bc, ac)
 712 -- bc, ac: char classes
 713    local g = mc[bc][ac]
 714    if g then
 715        if g[1] then
 716            return node_copy(g[1]), g.ratio, false, false, false
 717        else
 718          local f = node_new(id_glue)
 719          set_attr(f, attr_icflag, g.priority)
 720          setglue(f, g.width, g.stretch, g.shrink)
 721          return f, g.ratio, g.kanjiskip_natural, g.kanjiskip_stretch, g.kanjiskip_shrink
 722       end
 723    end
 724    return false, 0
 725 end
 726
 727 -- Nq.last (kern w) .... (glue/kern g) Np.first
 728 local function real_insert(g)
 729    if g then
 730       head  = insert_before(head, Np.first, g)
 731       Np.first = g
 732    end
 733 end
 734
 735
 736 -------------------- 和文文字間空白量の決定
 737 local calc_ja_ja_aux
 738 do
 739    local round = tex.round
 740    local bg_ag = 2*id_glue - id_glue
 741    local bg_ak = 2*id_glue - id_kern
 742    local bk_ag = 2*id_kern - id_glue
 743    local bk_ak = 2*id_kern - id_kern
 744
 745    local function blend_diffmet(b, a, rb, ra)
 746       return round(diffmet_rule((1-rb)*b+rb*a, (1-ra)*b+ra*a))
 747    end
 748    calc_ja_ja_aux = function (gb, ga, db, da)
 749       if diffmet_rule ~= math.two_pleft and diffmet_rule ~= math.two_pright
 750           and diffmet_rule ~= math.two_paverage then
 751          db, da = 0, 1
 752       end
 753       if not gb then
 754          if ga then
 755             gb = node_new(id_kern, 1); setfield(gb, 'kern', 0)
 756          else return nil end
 757       elseif not ga then
 758          ga = node_new(id_kern, 1); setfield(ga, 'kern', 0)
 759       end
 760
 761       local k = 2*getid(gb) - getid(ga)
 762       if k == bg_ag then
 763          -- 両方とも glue．
 764          setglue(gb, blend_diffmet(
 765                         getfield(gb, 'width'), getfield(ga, 'width'), db, da),
 766                      blend_diffmet(
 767                         getfield(gb, 'stretch'), getfield(ga, 'stretch'), db, da),
 768                      -blend_diffmet(
 769                      -getfield(gb, 'shrink'), -getfield(ga, 'shrink'), db, da))
 770          node_free(ga)
 771          return gb
 772       elseif k == bk_ak then
 773          -- 両方とも kern．
 774          setfield(gb, 'kern', blend_diffmet(
 775                      getfield(gb, 'kern'), getfield(ga, 'kern'), db, da))
 776          node_free(ga)
 777          return gb
 778       elseif k == bk_ag then
 779          -- gb: kern, ga: glue
 780          setglue(ga, blend_diffmet(
 781                         getfield(gb, 'kern'), getfield(ga, 'width'), db, da),
 782                      blend_diffmet(
 783                         0, getfield(ga, 'stretch'), db, da),
 784                      -blend_diffmet(
 785                         0, -getfield(ga, 'shrink'), db, da))
 786          node_free(gb)
 787          return ga, 0, 0, 0
 788       else
 789          -- gb: glue, ga: kern
 790          setglue(gb, blend_diffmet(
 791                         getfield(gb, 'width'), getfield(ga, 'kern'), db, da),
 792                      blend_diffmet(
 793                         getfield(gb, 'stretch'), 0, db, da),
 794                      -blend_diffmet(
 795                         -getfield(gb, 'shrink'), 0, db, da))
 796          node_free(ga)
 797          return gb
 798       end
 799    end
 800 end
 801
 802 local null_skip_table = {0, 0, 0}
 803 -- get kanjiskip
 804 local get_kanjiskip, kanjiskip_jfm_flag
 805 local calc_ja_ja_glue
 806 do
 807    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 808    local KANJI_SKIP_JFM   = luatexja.icflag_table.KANJI_SKIP_JFM
 809
 810    get_kanjiskip_low = function(flag, qm, bn, bp, bh)
 811       if flag or (qm.with_kanjiskip and (bn or bp or bh)) then
 812          if kanjiskip_jfm_flag then
 813             local g = node_new(id_glue);
 814             local bk = qm.kanjiskip or null_skip_table
 815             setglue(g, bn and (bn*bk[1]) or 0,
 816                        bp and (bp*bk[2]) or 0,
 817                        bh and (bh*bk[3]) or 0, 0, 0)
 818             set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 819             return g
 820          elseif flag then
 821             return node_copy(kanji_skip)
 822          else
 823             local g = node_new(id_glue);
 824             setglue(g,
 825                bn and (bn*getfield(kanji_skip, 'width')) or 0,
 826                bp and (bp*getfield(kanji_skip, 'stretch')) or 0,
 827                bh and (bh*getfield(kanji_skip, 'shrink')) or 0,
 828                0, 0)
 829             set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 830             return g
 831          end
 832       end
 833    end
 834
 835    get_kanjiskip = function()
 836       if Np.auto_kspc==0 or Nq.auto_kspc==0 then
 837         return nil
 838       elseif Np.auto_kspc or Nq.auto_kspc then
 839          local pm, qm = Np.met, Nq.met
 840          if (pm.char_type==qm.char_type) and (qm.var==pm.var) then
 841              return get_kanjiskip_low(true, qm, 1, 1, 1)
 842          else
 843             local gb = get_kanjiskip_low(true, qm, 1, 1, 1)
 844             local ga = get_kanjiskip_low(true, pm, 1, 1, 1)
 845             return calc_ja_ja_aux(gb, ga, 0, 1)
 846          end
 847       else
 848          local g = node_new(id_glue)
 849          set_attr(g, attr_icflag, kanjiskip_jfm_flag and KANJI_SKIP_JFM or KANJI_SKIP)
 850          return g
 851       end
 852    end
 853
 854    calc_ja_ja_glue = function ()
 855       local qm, pm = Nq.met, Np.met
 856       local qmc, pmc = qm.char_type, pm.char_type
 857       if (qmc==pmc) and (qm.var==pm.var) then
 858          local g, _, kn, kp, kh = new_jfm_glue(qmc, Nq.class, Np.class)
 859          return g, (Np.auto_kspc or Nq.auto_kspc) and get_kanjiskip_low(false, qm, kn, kp, kh)
 860       else
 861          local npn, nqn = Np.nuc, Nq.nuc
 862          local gb, db, bn, bp, bh
 863             = new_jfm_glue(qmc, Nq.class,
 864                            slow_find_char_class(Np.char,
 865                                                 qm, getchar(npn)))
 866          local ga, da, an, ap, ah
 867             = new_jfm_glue(pmc,
 868                            slow_find_char_class(Nq.char,
 869                                                 pm, getchar(nqn)),
 870                                                  Np.class)
 871          local g = calc_ja_ja_aux(gb, ga, db, da)
 872          local k
 873          if (pmc==qmc) and (qm.var==pm.var) then
 874             gb = get_kanjiskip_low(false, qm, bn, bp, bh)
 875             ga = get_kanjiskip_low(false, pm, an, ap, ah)
 876             k = calc_ja_ja_aux(gb, ga, db, da)
 877          end
 878          return g, k
 879       end
 880    end
 881 end
 882
 883 -------------------- 和欧文間空白量の決定
 884
 885 -- get xkanjiskip
 886 local get_xkanjiskip, xkanjiskip_jfm_flag
 887 local get_xkanjiskip_normal, get_xkanjiskip_jfm
 888 do
 889    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 890    local XKANJI_SKIP_JFM   = luatexja.icflag_table.XKANJI_SKIP_JFM
 891
 892    get_xkanjiskip_low = function(flag, qm, bn, bp, bh)
 893       if flag or (qm.with_kanjiskip and (bn or bp or bh)) then
 894          if xkanjiskip_jfm_flag then
 895             local g = node_new(id_glue);
 896             local bk = qm.xkanjiskip or null_skip_table
 897             setglue(g, bn and bk[1] or 0,
 898                        bp and bk[2] or 0,
 899                        bh and bk[3] or 0, 0, 0)
 900             set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 901             return g
 902          elseif flag then
 903             return node_copy(xkanji_skip)
 904          else
 905             local g = node_new(id_glue);
 906             setglue(g,
 907                bn and (bn*getfield(xkanji_skip, 'width')) or 0,
 908                bp and (bp*getfield(xkanji_skip, 'stretch')) or 0,
 909                bh and (bh*getfield(xkanji_skip, 'shrink')) or 0,
 910                0, 0)
 911             set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 912             return g
 913          end
 914       end
 915    end
 916
 917    get_xkanjiskip = function(Nn)
 918       if Np.auto_xspc==0 or Nq.auto_xspc==0 then
 919         return nil
 920       elseif (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 921          return get_xkanjiskip_low(true, Nn.met, 1, 1, 1)
 922       else
 923          local g = node_new(id_glue)
 924          set_attr(g, attr_icflag, xkanjiskip_jfm_flag and XKANJI_SKIP_JFM or XKANJI_SKIP)
 925          return g
 926       end
 927    end
 928 end
 929
 930 -------------------- 隣接した「塊」間の処理
 931
 932 local function combine_spc(name)
 933    return (Np[name] or Nq[name]) and ((Np[name]~=0) and (Nq[name]~=0))
 934 end
 935
 936 local function get_OA_skip(is_kanji)
 937    local pm = Np.met
 938    local g, _, kn, kp, kh = new_jfm_glue(
 939       pm.char_type,
 940       fast_find_char_class((Nq.id == id_math and -1 or 'jcharbdd'), pm),
 941       Np.class)
 942    local k
 943    if is_kanji==0 then
 944       k = combine_spc('auto_kspc') and get_kanjiskip_low(false, pm, kn, kp, kh)
 945    elseif is_kanji==1 then
 946       k = ((Nq.xspc>=2) and (Np.xspc%2==1) and combine_spc('auto_xspc'))
 947          and get_xkanjiskip_low(false, pm, kn, kp, kh)
 948    end
 949    return g, k
 950 end
 951 local function get_OB_skip(is_kanji)
 952    local qm = Nq.met
 953    local g, _, kn, kp, kh = new_jfm_glue(
 954       qm.char_type, Nq.class,
 955       fast_find_char_class((Np.id == id_math and -1 or'jcharbdd'), qm))
 956    local k
 957    if is_kanji==0 then
 958       k = combine_spc('auto_kspc') and get_kanjiskip_low(false, qm, kn, kp, kh)
 959    elseif is_kanji==1 then
 960       k = ((Nq.xspc>=2) and (Np.xspc%2==1) and combine_spc('auto_xspc'))
 961          and get_xkanjiskip_low(false, qm, kn, kp, kh)
 962    end
 963    return g, k
 964 end
 965
 966 -- (anything) .. jachar
 967 local function handle_np_jachar(mode)
 968    local qid = Nq.id
 969    if qid==id_jglyph or ((qid==id_pbox or qid==id_pbox_w) and Nq.met) then
 970       local g, k
 971       if non_ihb_flag then g, k = calc_ja_ja_glue() end -- M->K
 972       if not g then g = get_kanjiskip() end
 973       handle_penalty_normal(Nq.post, Np.pre, g);
 974       real_insert(g); real_insert(k)
 975    elseif Nq.met then  -- qid==id_hlist
 976       local g, k
 977       if non_ihb_flag then g, k = get_OA_skip(0) end -- O_A->K
 978       if not g then g = get_kanjiskip() end
 979       handle_penalty_normal(0, Np.pre, g); real_insert(g); real_insert(k)
 980    elseif Nq.pre then
 981       local g, k
 982       if non_ihb_flag then g, k = get_OA_skip(1) end -- O_A->X
 983       if not g then g = get_xkanjiskip(Np) end
 984       handle_penalty_normal((qid==id_hlist and 0 or Nq.post), Np.pre, g);
 985       real_insert(g); real_insert(k)
 986    else
 987       local g = non_ihb_flag and (get_OA_skip()) -- O_A
 988       if qid==id_glue then handle_penalty_normal(0, Np.pre, g)
 989       elseif qid==id_kern then handle_penalty_suppress(0, Np.pre, g)
 990       else handle_penalty_always(0, Np.pre, g)
 991       end
 992       real_insert(g)
 993    end
 994    if mode and Np.kcat%2~=1 then
 995       widow_Np.first, widow_Bp, Bp = Np.first, Bp, widow_Bp
 996    end
 997 end
 998
 999
1000 -- jachar .. (anything)
1001 local function handle_nq_jachar()
1002     if Np.pre then
1003       local g = non_ihb_flag and get_OB_skip(1) or get_xkanjiskip(Nq) -- O_B->X
1004       handle_penalty_normal(Nq.post, (Np.id==id_hlist and 0 or Np.pre), g); real_insert(g)
1005    else
1006       local g =non_ihb_flag and  (get_OB_skip()) -- O_B
1007       if Np.id==id_glue then handle_penalty_normal(Nq.post, 0, g)
1008       elseif Np.id==id_kern then handle_penalty_suppress(Nq.post, 0, g)
1009       else handle_penalty_always(Nq.post, 0, g)
1010       end
1011       real_insert(g)
1012    end
1013 end
1014
1015 -- (anything) .. (和文文字で始まる hlist)
1016 local function handle_np_ja_hlist()
1017    local qid = Nq.id
1018    if qid==id_jglyph or ((qid==id_pbox or qid == id_pbox_w) and Nq.met) then
1019       local g = non_ihb_flag and get_OB_skip(0) or get_kanjiskip() -- O_B->K
1020       handle_penalty_normal(Nq.post, 0, g); real_insert(g)
1021    elseif Nq.met then  -- Nq.id==id_hlist
1022       local g = get_kanjiskip() -- K
1023       handle_penalty_suppress(0, 0, g); real_insert(g)
1024    elseif Nq.pre then
1025       local g = get_xkanjiskip(Np) -- X
1026       handle_penalty_suppress(0, 0, g); real_insert(g)
1027    end
1028 end
1029
1030 -- (和文文字で終わる hlist) .. (anything)
1031 local function handle_nq_ja_hlist()
1032    if Np.pre then
1033       local g = get_xkanjiskip(Nq) -- X
1034       handle_penalty_suppress(0, 0, g); real_insert(g)
1035    end
1036 end
1037
1038
1039 -- Nq が前側のクラスタとなることによる修正
1040 do
1041    local adjust_nq_aux = {
1042       [id_glyph] = function() after_alchar(Nq) end, -- after_alchar(Nq)
1043       [id_hlist]  = function() after_hlist(Nq) end,
1044       [id_pbox]  = function() after_hlist(Nq) end,
1045       [id_disc]  = function() after_hlist(Nq) end,
1046       [id_pbox_w]  = function()
1047                         luatexbase.call_callback("luatexja.jfmglue.whatsit_after",
1048                                                  false, Nq, Np)
1049                      end,
1050    }
1051
1052    function adjust_nq()
1053       local x = adjust_nq_aux[Nq.id]
1054       if x then x()  end
1055    end
1056 end
1057
1058
1059 -------------------- 開始・終了時の処理
1060 do
1061 local node_prev = node.direct.getprev
1062 -- リスト末尾の処理
1063 local function handle_list_tail(mode, last)
1064    adjust_nq()
1065    if mode then
1066       -- the current list is to be line-breaked.
1067       -- Insert \jcharwidowpenalty
1068       if widow_Np.first then handle_penalty_jwp() end
1069    else
1070       Np=Nq
1071       -- the current list is the contents of a hbox
1072       local npi, pm = Np.id, Np.met
1073       if npi == id_jglyph or (npi==id_pbox and pm) then
1074          local g = new_jfm_glue(pm.char_type, Np.class, fast_find_char_class('boxbdd', pm))
1075          if g then
1076             set_attr(g, attr_icflag, BOXBDD)
1077             head = insert_after(head, Np.last, g)
1078          end
1079       end
1080    end
1081 end
1082
1083 -- リスト先頭の処理
1084 local function handle_list_head(par_indented)
1085    local npi, pm = Np.id, Np.met
1086    if npi ==  id_jglyph or (npi==id_pbox and pm) then
1087       if non_ihb_flag then
1088          local g = new_jfm_glue(pm.char_type, fast_find_char_class(par_indented, pm), Np.class)
1089          if g then
1090             set_attr(g, attr_icflag, BOXBDD)
1091             if getid(g)==id_glue and #Bp==0 then
1092                local h = node_new(id_penalty)
1093                setfield(h, 'penalty', 10000); set_attr(h, attr_icflag, BOXBDD)
1094             end
1095             head = insert_before(head, Np.first, g)
1096          end
1097       end
1098    end
1099 end
1100
1101 -- initialize
1102 -- return value: (the initial cursor lp), (last node)
1103 local init_var
1104 do
1105    local id_local = node.id('local_par')
1106    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
1107    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
1108    local KSK  = luatexja.stack_table_index.KSK
1109    local XSK  = luatexja.stack_table_index.XSK
1110    local dir_yoko = luatexja.dir_table.dir_yoko
1111    local dir_tate = luatexja.dir_table.dir_tate
1112    local attr_yablshift = luatexbase.attributes['ltj@yablshift']
1113    local attr_tablshift = luatexbase.attributes['ltj@tablshift']
1114    local table_pool = {
1115       {}, {}, {first=nil},
1116       { auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
1117         first=nil, id=nil, last=nil, met=nil, nuc=nil,
1118         post=nil, pre=nil, xspc=nil, },
1119       { auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
1120         first=nil, id=nil, last=nil, met=nil, nuc=nil,
1121         post=nil, pre=nil, xspc=nil, },
1122    }
1123    init_var = function (mode,dir)
1124       -- 1073741823: max_dimen
1125       Bp, widow_Bp, widow_Np, Np, Nq
1126          = table_pool[1], table_pool[2], table_pool[3], table_pool[4], table_pool[5]
1127       for i=1,5 do for j,_ in pairs(table_pool[i]) do table_pool[i][j]=nil end end
1128       table_current_stack = ltjs.table_current_stack
1129
1130       list_dir, tex_dir = (ltjs.list_dir or dir_yoko), (dir or 'TLT')
1131       local is_dir_tate = list_dir==dir_tate
1132       capsule_glyph = is_dir_tate and ltjw.capsule_glyph_tate or ltjw.capsule_glyph_yoko
1133       attr_ablshift = is_dir_tate and attr_tablshift or attr_yablshift
1134       local TEMP = node_new(id_glue)
1135       -- TEMP is a dummy node, which will be freed at the end of the callback.
1136       -- ithout this node, set_attr(kanji_skip, ...) somehow creates an "orphaned"  attribute list.
1137
1138       do
1139           kanji_skip, kanjiskip_jfm_flag = skip_table_to_glue(KSK)
1140           set_attr(kanji_skip, attr_icflag, KANJI_SKIP)
1141       end
1142
1143       do
1144           xkanji_skip, xkanjiskip_jfm_flag = skip_table_to_glue(XSK)
1145           set_attr(xkanji_skip, attr_icflag, XKANJI_SKIP)
1146       end
1147
1148       if mode then
1149          -- the current list is to be line-breaked:
1150          -- hbox from \parindent is skipped.
1151          local lp, par_indented, lpi, lps  = head, 'boxbdd', getid(head), getsubtype(head)
1152          while lp and
1153             ((lpi==id_whatsit and lps~=sid_user)
1154                or ((lpi==id_hlist) and (lps==3))
1155                or (lpi==id_local)) do
1156             if (lpi==id_hlist) and (lps==3) then
1157                Np.char, par_indented = 'parbdd', 'parbdd'
1158                Np.width = getfield(lp, 'width')
1159             end
1160             lp=node_next(lp); lpi, lps = getid(lp), getsubtype(lp) end
1161          return lp, node_tail(head), par_indented, TEMP
1162       else
1163          return head, nil, 'boxbdd', TEMP
1164       end
1165    end
1166 end
1167
1168 local ensure_tex_attr = ltjb.ensure_tex_attr
1169 local function cleanup(mode, TEMP)
1170    -- luatexja.ext_show_node_list(to_node(head), '> ', print)
1171    -- adjust attr_icflag for avoiding error
1172    if tex.getattribute(attr_icflag)~=0 then ensure_tex_attr(attr_icflag, 0) end
1173    node_free(kanji_skip);
1174    node_free(xkanji_skip); node_free(TEMP)
1175
1176    if mode then
1177       local h = node_next(head)
1178       if getid(h) == id_penalty and getfield(h, 'penalty') == 10000 then
1179          h = node_next(h)
1180          if getid(h) == id_glue and getsubtype(h) == 15 and not node_next(h) then
1181             return false
1182          end
1183       end
1184    end
1185    return head
1186 end
1187 -------------------- 外部から呼ばれる関数
1188
1189 -- main interface
1190 function main(ahead, mode, dir)
1191    if not ahead then return ahead end
1192    --luatexja.ext_show_node_list(to_node(ahead ), '>B ', print)
1193    --print()
1194    head = ahead;
1195    local lp, last, par_indented, TEMP = init_var(mode,dir)
1196    lp = calc_np(last, lp)
1197    if Np then
1198       handle_list_head(par_indented)
1199       lp = calc_np(last,lp);
1200       while Np do
1201          adjust_nq();
1202          local pid, pm = Np.id, Np.met
1203          -- 挿入部
1204          if pid == id_jglyph then
1205             handle_np_jachar(mode)
1206          elseif pm then
1207             if pid==id_hlist then handle_np_ja_hlist()
1208             else handle_np_jachar() end
1209          elseif Nq.met then
1210             if Nq.id==id_hlist then handle_nq_ja_hlist()
1211             else handle_nq_jachar() end
1212          end
1213          lp = calc_np(last,lp)
1214       end
1215       handle_list_tail(mode, last)
1216    end
1217    --luatexja.ext_show_node_list(to_node(ahead ), '>A ', print)
1218    --print()
1219    return cleanup(mode, TEMP)
1220 end
1221 end
1222
1223 do
1224    local IHB  = luatexja.userid_table.IHB
1225    local BPAR = luatexja.userid_table.BPAR
1226    local BOXB = luatexja.userid_table.BOXB
1227    local node_prev = node.direct.getprev
1228    local node_write = node.direct.write
1229
1230    -- \inhibitglue
1231    function create_inhibitglue_node()
1232       local tn = node_new(id_whatsit, sid_user)
1233       setfield(tn, 'user_id', IHB)
1234       setfield(tn, 'type', 100)
1235       setfield(tn, 'value', 1)
1236       node_write(tn)
1237    end
1238
1239    -- Node for indicating beginning of a paragraph
1240    -- (for ltjsclasses)
1241    function create_beginpar_node()
1242       local tn = node_new(id_whatsit, sid_user)
1243       setfield(tn, 'user_id', BPAR)
1244       setfield(tn, 'type', 100)
1245       setfield(tn, 'value', 1)
1246       node_write(tn)
1247    end
1248
1249    -- Node for indicating a head/end of a box
1250    function create_boxbdd_node()
1251       local tn = node_new(id_whatsit, sid_user)
1252       setfield(tn, 'user_id', BOXB)
1253       setfield(tn, 'type', 100)
1254       setfield(tn, 'value', 1)
1255       node_write(tn)
1256    end
1257
1258    local function whatsit_callback(Np, lp, Nq)
1259       if Np and Np.nuc then return Np
1260       elseif Np and getfield(lp, 'user_id') == BPAR then
1261          Np.first = lp; Np.nuc = lp; Np.last = lp
1262          return Np
1263       elseif Np and getfield(lp, 'user_id') == BOXB then
1264          Np.first = lp; Np.nuc = lp; Np.last = lp
1265          if Nq then
1266             if Nq.met then
1267                Np.class = fast_find_char_class('boxbdd', Nq.met)
1268             end
1269             Np.met = Nq.met; Np.pre = 0; Np.post = 0; Np.xspc = 0
1270             Np.auto_xspc, Np.auto_kspc = 0, 0
1271          end
1272          return Np
1273       else
1274          return Np
1275       end
1276    end
1277
1278     local function whatsit_after_callback(s, Nq, Np)
1279        if not s and getfield(Nq.nuc, 'user_id') == BPAR then
1280          local x, y = node_prev(Nq.nuc), Nq.nuc
1281          Nq.first, Nq.nuc, Nq.last = x, x, x
1282          if Np then
1283             if Np.met then
1284                Nq.class = fast_find_char_class('parbdd', Np.met)
1285             end
1286             Nq.met = Np.met; Nq.pre = 0; Nq.post = 0; Nq.xspc = 0
1287             Nq.auto_xspc, Nq.auto_kspc = 0, 0
1288          end
1289          head = node_remove(head, y)
1290          node_free(y)
1291        elseif not s and getfield(Nq.nuc, 'user_id') == BOXB then
1292          local x, y = node_prev(Nq.nuc), Nq.nuc
1293          Nq.first, Nq.nuc, Nq.last = x, x, x
1294          if Np then
1295             if Np.met then
1296                Nq.class = fast_find_char_class('boxbdd', Np.met)
1297             end
1298             Nq.met = Np.met; Nq.pre = 0; Nq.post = 0; Nq.xspc = 0
1299             Nq.auto_xspc, Nq.auto_kspc = 0, 0
1300          end
1301          head = node_remove(head, y)
1302          node_free(y)
1303       end
1304       return s
1305    end
1306
1307    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_getinfo", whatsit_callback,
1308                               "luatexja.beginpar.np_info", 1)
1309    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_after", whatsit_after_callback,
1310                               "luatexja.beginpar.np_info_after", 1)
1311
1312 end