src/ltj-jfmglue.lua

   1 --
   2 -- luatexja/ltj-jfmglue.lua
   3 --
   4 luatexbase.provides_module({
   5   name = 'luatexja.jfmglue',
   6   date = '2014/02/02',
   7   description = 'Insertion process of JFM glues and kanjiskip',
   8 })
   9 module('luatexja.jfmglue', package.seeall)
  10 local err, warn, info, log = luatexbase .errwarinf(_NAME)
  11
  12 luatexja.load_module('stack');     local ltjs = luatexja.stack
  13 luatexja.load_module('jfont');     local ltjf = luatexja.jfont
  14 local pairs = pairs
  15
  16 local Dnode = node.direct or node
  17
  18 local nullfunc = function(n) return n end
  19 local to_node = (Dnode ~= node) and Dnode.tonode or nullfunc
  20 local to_direct = (Dnode ~= node) and Dnode.todirect or nullfunc
  21
  22 local setfield = (Dnode ~= node) and Dnode.setfield or function(n, i, c) n[i] = c end
  23 local getfield = (Dnode ~= node) and Dnode.getfield or function(n, i) return n[i] end
  24 local getid = (Dnode ~= node) and Dnode.getid or function(n) return n.id end
  25 local getfont = (Dnode ~= node) and Dnode.getfont or function(n) return n.font end
  26 local getlist = (Dnode ~= node) and Dnode.getlist or function(n) return n.head end
  27 local getchar = (Dnode ~= node) and Dnode.getchar or function(n) return n.char end
  28 local getsubtype = (Dnode ~= node) and Dnode.getsubtype or function(n) return n.subtype end
  29
  30 local has_attr = Dnode.has_attribute
  31 local set_attr = Dnode.set_attribute
  32 local insert_before = Dnode.insert_before
  33 local insert_after = Dnode.insert_after
  34 local node_next = (Dnode ~= node) and Dnode.getnext or node.next
  35 local round = tex.round
  36 local ltjf_font_metric_table = ltjf.font_metric_table
  37 local ltjf_find_char_class = ltjf.find_char_class
  38 local node_new = Dnode.new
  39 local node_copy = Dnode.copy
  40 local node_remove = luatexja.Dnode_remove -- Dnode.remove
  41 local node_tail = Dnode.tail
  42 local node_free = Dnode.free
  43 local node_end_of_math = Dnode.end_of_math
  44
  45
  46 local id_glyph = node.id('glyph')
  47 local id_hlist = node.id('hlist')
  48 local id_vlist = node.id('vlist')
  49 local id_rule = node.id('rule')
  50 local id_ins = node.id('ins')
  51 local id_mark = node.id('mark')
  52 local id_adjust = node.id('adjust')
  53 local id_disc = node.id('disc')
  54 local id_whatsit = node.id('whatsit')
  55 local id_math = node.id('math')
  56 local id_glue = node.id('glue')
  57 local id_kern = node.id('kern')
  58 local id_penalty = node.id('penalty')
  59
  60 local id_glue_spec = node.id('glue_spec')
  61 local id_jglyph    = 512 -- Japanese character
  62 local id_box_like  = 256 -- vbox, shifted hbox
  63 local id_pbox      = 257 -- already processed nodes (by \unhbox)
  64 local id_pbox_w    = 258 -- cluster which consists of a whatsit
  65 local sid_user = node.subtype('user_defined')
  66
  67 local sid_start_link = node.subtype('pdf_start_link')
  68 local sid_start_thread = node.subtype('pdf_start_thread')
  69 local sid_end_link = node.subtype('pdf_end_link')
  70 local sid_end_thread = node.subtype('pdf_end_thread')
  71
  72 local ITALIC       = luatexja.icflag_table.ITALIC
  73 local PACKED       = luatexja.icflag_table.PACKED
  74 local KINSOKU      = luatexja.icflag_table.KINSOKU
  75 local FROM_JFM     = luatexja.icflag_table.FROM_JFM
  76 local PROCESSED    = luatexja.icflag_table.PROCESSED
  77 local IC_PROCESSED = luatexja.icflag_table.IC_PROCESSED
  78 local BOXBDD       = luatexja.icflag_table.BOXBDD
  79 local PROCESSED_BEGIN_FLAG = luatexja.icflag_table.PROCESSED_BEGIN_FLAG
  80 local kanji_skip
  81 local xkanji_skip
  82 local table_current_stack
  83
  84 local attr_curjfnt = luatexbase.attributes['ltj@curjfnt']
  85 local attr_icflag = luatexbase.attributes['ltj@icflag']
  86
  87 local function get_attr_icflag(p)
  88    return (has_attr(p, attr_icflag) or 0)%PROCESSED_BEGIN_FLAG
  89 end
  90
  91 -------------------- Helper functions
  92
  93 local function copy_attr(new, old)
  94   -- 仕様が決まるまで off にしておく
  95 end
  96
  97 -- This function is called only for acquiring `special' characters.
  98 local function fast_find_char_class(c,m)
  99    return m.chars[c] or 0
 100 end
 101
 102 -- 文字クラスの決定
 103 local function slow_find_char_class(c, m, oc)
 104    local xc = c or oc
 105    local cls = ltjf_find_char_class(oc, m)
 106    if xc ~= oc and  cls==0 then cls = ltjf_find_char_class(-xc, m) end
 107    return cls, xc
 108 end
 109
 110 local zero_glue = node_new(id_glue)
 111 spec_zero_glue = to_node(node_new(id_glue_spec))
 112   -- must be public, since mentioned from other sources
 113 local spec_zero_glue = to_direct(spec_zero_glue)
 114 setfield(spec_zero_glue, 'width', 0)
 115 setfield(spec_zero_glue, 'stretch', 0)
 116 setfield(spec_zero_glue, 'shrink', 0)
 117 setfield(spec_zero_glue, 'stretch_order', 0)
 118 setfield(spec_zero_glue, 'shrink_order', 0)
 119 setfield(zero_glue, 'spec', spec_zero_glue)
 120
 121 local function skip_table_to_spec(n)
 122    local g, st = node_new(id_glue_spec), ltjs.fast_get_stack_skip(n)
 123    setfield(g, 'width', st.width)
 124    setfield(g, 'stretch', st.stretch)
 125    setfield(g, 'shrink', st.shrink)
 126    setfield(g, 'stretch_order', st.stretch_order)
 127    setfield(g, 'shrink_order', st.shrink_order)
 128    return g
 129 end
 130
 131
 132 -- penalty 値の計算
 133 local function add_penalty(p,e)
 134    local pp = getfield(p, 'penalty')
 135    if pp>=10000 then
 136       if e<=-10000 then pp = 0 end
 137    elseif pp<=-10000 then
 138       if e>=10000 then pp = 0 end
 139    else
 140       pp = pp + e
 141       if pp>=10000 then      setfield(p, 'penalty', 10000)
 142       elseif pp<=-10000 then setfield(p, 'penalty', -10000)
 143       else                   setfield(p, 'penalty', pp) end
 144    end
 145    return
 146 end
 147
 148 -- 「異なる JFM」の間の調整方法
 149 diffmet_rule = math.two_paverage
 150 function math.two_add(a,b) return a+b end
 151 function math.two_average(a,b) return (a+b)*0.5 end
 152 function math.two_paverage(a,b) return (a+b)/2 end
 153 function math.two_pleft(a,b) return a end
 154 function math.two_pright(a,b) return b end
 155
 156 local head -- the head of current list
 157
 158 local Np, Nq, Bp
 159 local widow_Bp, widow_Np -- \jcharwidowpenalty 挿入位置管理用
 160
 161 local ihb_flag -- JFM グルー挿入抑止用 flag
 162                -- on: \inhibitglue 指定時，hlist の周囲
 163
 164 -------------------- hlist 内の文字の検索
 165
 166 local first_char, last_char, find_first_char
 167
 168 local function check_box(box_ptr, box_end)
 169    local p = box_ptr; local found_visible_node = false
 170    if not p then
 171       find_first_char = false; last_char = nil
 172       return true
 173    end
 174    while p and p~=box_end do
 175       local pid = getid(p)
 176       if pid==id_kern and getsubtype(p)==2 then
 177          p = node_next(node_next(node_next(p))); pid = getid(p) -- p must be glyph_node
 178        end
 179       if pid==id_glyph then
 180          repeat
 181             if find_first_char then
 182                first_char = p; find_first_char = false
 183             end
 184             last_char = p; found_visible_node = true; p=node_next(p)
 185             if (not p) or p==box_end then
 186                return found_visible_node
 187             end
 188          until getid(p)~=id_glyph
 189          pid = getid(p) -- p must be non-nil
 190       end
 191       if pid==id_kern then
 192          local pa = get_attr_icflag(p)
 193          --if pa==IC_PROCESSED or pa == PACKED then
 194          if pa==IC_PROCESSED then
 195             -- do nothing
 196          elseif getsubtype(p)==2 then
 197             p = node_next(node_next(p));
 198             -- Note that another node_next will be executed outside this if-statement.
 199          else
 200             found_visible_node = true
 201             find_first_char = false; last_char = nil
 202          end
 203       elseif pid==id_hlist then
 204          if PACKED == get_attr_icflag(p) then
 205             if find_first_char then
 206                first_char = getlist(p); find_first_char = false
 207             end
 208             last_char = getlist(p); found_visible_node = true
 209          else
 210             if getfield(p, 'shift')==0 then
 211                if check_box(getlist(p), nil) then found_visible_node = true end
 212             else
 213                find_first_char = false; last_char = nil
 214             end
 215          end
 216       elseif pid==id_math then
 217          if find_first_char then
 218             first_char = p; find_first_char = false
 219          end
 220          last_char = p; found_visible_node = true
 221          --elseif pid==id_rule and get_attr_icflag(p)==PACKED then -- do nothing
 222       elseif not (pid==id_ins   or pid==id_mark
 223                   or pid==id_adjust or pid==id_whatsit
 224                   or pid==id_penalty) then
 225          found_visible_node = true
 226          find_first_char = false; last_char = nil
 227       end
 228       p = node_next(p)
 229    end
 230    return found_visible_node
 231 end
 232
 233 function check_box_high(Nx, box_ptr, box_end)
 234    first_char = nil;  last_char = nil;  find_first_char = true
 235    if check_box(box_ptr, box_end) then
 236       local first_char = first_char
 237       if first_char then
 238          if getid(first_char)==id_glyph then
 239             if getfont(first_char) == (has_attr(first_char, attr_curjfnt) or -1) then
 240                set_np_xspc_jachar(Nx, first_char)
 241             else
 242                set_np_xspc_alchar(Nx, getchar(first_char),first_char, 1)
 243             end
 244          else -- math_node
 245             set_np_xspc_alchar(Nx, -1,first_char)
 246          end
 247       end
 248    end
 249    return last_char
 250 end
 251
 252 -------------------- Np の計算と情報取得
 253
 254 luatexbase.create_callback("luatexja.jfmglue.whatsit_getinfo", "data",
 255                            function (Np, lp, Nq)
 256                               if Np.nuc then return Np
 257                               else
 258                                  return Np  -- your code
 259                               end
 260                            end)
 261 luatexbase.create_callback("luatexja.jfmglue.whatsit_after", "data",
 262                            function (stat, Nq, Np) return false end)
 263
 264 -- calc next Np
 265 do
 266
 267 local function set_attr_icflag_processed(p)
 268    if get_attr_icflag(p)<= ITALIC then
 269       set_attr(p, attr_icflag, PROCESSED)
 270    end
 271 end
 272
 273 local function check_next_ickern(lp)
 274    if lp and getid(lp) == id_kern and ITALIC == get_attr_icflag(lp) then
 275       set_attr(lp, attr_icflag, IC_PROCESSED)
 276       Np.last = lp; return node_next(lp)
 277    else
 278       Np.last = Np.nuc; return lp
 279    end
 280 end
 281
 282 local function calc_np_pbox(lp)
 283    Np.first = Np.first or lp; Np.id = id_pbox
 284    local lpa, nc = KINSOKU, nil
 285    set_attr(lp, attr_icflag, get_attr_icflag(lp));
 286    while lp and (lpa>=PACKED) and (lpa<BOXBDD) do
 287       nc, lp = lp, node_next(lp); lpa = lp and has_attr(lp, attr_icflag) or 0
 288      -- get_attr_icflag() ではいけない！
 289    end
 290    Np.nuc = nc
 291    return check_next_ickern(lp)
 292 end
 293
 294
 295 local calc_np_auxtable = {
 296    [id_glyph] = function (lp)
 297       Np.first, Np.nuc = (Np.first or lp), lp;
 298       Np.id = (getfont(lp) == (has_attr(lp, attr_curjfnt) or -1))
 299          and id_jglyph or id_glyph
 300       return true, check_next_ickern(node_next(lp));
 301    end,
 302    [id_hlist] = function(lp)
 303       Np.first = Np.first or lp; Np.last = lp; Np.nuc = lp;
 304       set_attr(lp, attr_icflag, PROCESSED)
 305       Np.id = (getfield(lp, 'shift')~=0) and id_box_like or id_hlist
 306       return true, node_next(lp)
 307    end,
 308    box_like = function(lp)
 309       Np.first = Np.first or lp; Np.nuc = lp; Np.last = lp;
 310       Np.id = id_box_like; set_attr(lp, attr_icflag, PROCESSED)
 311       return true, node_next(lp);
 312    end,
 313    skip = function(lp)
 314       set_attr(lp, attr_icflag, PROCESSED)
 315       return false, node_next(lp)
 316    end,
 317    [id_whatsit] = function(lp)
 318       local lps = getsubtype(lp)
 319       if lps==sid_user then
 320          if getfield(lp, 'user_id')==luatexja.userid_table.IHB then
 321             local lq = node_next(lp);
 322             head = node_remove(head, lp); node_free(lp); ihb_flag = true
 323             return false, lq;
 324          else
 325             set_attr(lp, attr_icflag, PROCESSED)
 326             luatexbase.call_callback("luatexja.jfmglue.whatsit_getinfo",
 327                                      Np, lp, Nq)
 328             if Np.nuc then
 329                Np.id = id_pbox_w; Np.first = Np.nuc; Np.last = Np.nuc;
 330                return true, node_next(lp)
 331             else
 332                return false, node_next(lp)
 333             end
 334          end
 335       else
 336          -- we do special treatment for these whatsit nodes.
 337          if lps == sid_start_link or lps == sid_start_thread then
 338             Np.first = lp
 339          elseif lps == sid_end_link or lps == sid_end_thread then
 340             Np.first, Nq.last = nil, lp;
 341          end
 342          set_attr(lp, attr_icflag, PROCESSED)
 343          return false, node_next(lp)
 344       end
 345    end,
 346    [id_math] = function(lp)
 347       Np.first, Np.nuc = (Np.first or lp), lp;
 348       set_attr(lp, attr_icflag, PROCESSED)
 349       lp  = node_end_of_math(lp)
 350       set_attr(lp, attr_icflag, PROCESSED)
 351       Np.last, Np.id = lp, id_math;
 352       return true, node_next(lp);
 353    end,
 354    discglue = function(lp)
 355       Np.first, Np.nuc, Np.last = (Np.first or lp), lp, lp;
 356       Np.id = getid(lp); set_attr(lp, attr_icflag, PROCESSED)
 357       return true, node_next(lp)
 358    end,
 359    [id_kern] = function(lp)
 360       Np.first = Np.first or lp
 361       if getsubtype(lp)==2 then
 362          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 363          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 364          set_attr(lp, attr_icflag, PROCESSED); lp = node_next(lp)
 365          set_attr(lp, attr_icflag, PROCESSED); Np.nuc = lp
 366          Np.id = (getfont(lp) == (has_attr(lp, attr_curjfnt) or -1)) and id_jglyph or id_glyph
 367          return true, check_next_ickern(node_next(lp));
 368       else
 369          Np.id = id_kern; set_attr(lp, attr_icflag, PROCESSED)
 370          Np.last = lp; return true, node_next(lp)
 371       end
 372    end,
 373    [id_penalty] = function(lp)
 374       Bp[#Bp+1] = lp; set_attr(lp, attr_icflag, PROCESSED)
 375       return false, node_next(lp)
 376    end,
 377 }
 378 calc_np_auxtable[id_vlist]  = calc_np_auxtable.box_like
 379 calc_np_auxtable[id_rule]   = calc_np_auxtable.box_like
 380 calc_np_auxtable[13]        = calc_np_auxtable.box_like
 381 calc_np_auxtable[id_ins]    = calc_np_auxtable.skip
 382 calc_np_auxtable[id_mark]   = calc_np_auxtable.skip
 383 calc_np_auxtable[id_adjust] = calc_np_auxtable.skip
 384 calc_np_auxtable[id_disc]   = calc_np_auxtable.discglue
 385 calc_np_auxtable[id_glue]   = calc_np_auxtable.discglue
 386
 387 function calc_np(lp)
 388    local k
 389    -- We assume lp = node_next(Np.last)
 390    Np, Nq, ihb_flag = Nq, Np, nil
 391    -- We clear `predefined' entries of Np before pairs() loop,
 392    -- because using only pairs() loop is slower.
 393    Np.post, Np.pre, Np.xspc = nil, nil, nil
 394    Np.first, Np.id, Np.last, Np.met, Np.class= nil, nil, nil, nil
 395    Np.auto_kspc, Np.auto_xspc, Np.char, Np.nuc = nil, nil, nil, nil
 396    for k in pairs(Np) do Np[k] = nil end
 397
 398    for k = 1,#Bp do Bp[k] = nil end
 399    while lp  do
 400       local lpa = has_attr(lp, attr_icflag) or 0
 401        -- unbox 由来ノードの検出
 402       if lpa>=PACKED then
 403          if lpa%PROCESSED_BEGIN_FLAG == BOXBDD then
 404             local lq = node_next(lp)
 405             head = node_remove(head, lp); node_free(lp); lp = lq
 406          else return calc_np_pbox(lp)
 407          end -- id_pbox
 408       else
 409          k, lp = calc_np_auxtable[getid(lp)](lp)
 410          if k then return lp end
 411       end
 412    end
 413    Np = nil; return lp
 414 end
 415
 416 end
 417 local calc_np = calc_np
 418
 419 -- extract informations from Np
 420 -- We think that "Np is a Japanese character" if Np.met~=nil,
 421 --            "Np is an alphabetic character" if Np.pre~=nil,
 422 --            "Np is not a character" otherwise.
 423 local after_hlist, after_alchar, extract_np
 424 do
 425   local PRE  = luatexja.stack_table_index.PRE
 426   local POST = luatexja.stack_table_index.POST
 427   local KCAT = luatexja.stack_table_index.KCAT
 428   local XSP  = luatexja.stack_table_index.XSP
 429
 430 -- 和文文字のデータを取得
 431    local attr_jchar_class = luatexbase.attributes['ltj@charclass']
 432    local attr_orig_char = luatexbase.attributes['ltj@origchar']
 433    local attr_autospc = luatexbase.attributes['ltj@autospc']
 434    local attr_autoxspc = luatexbase.attributes['ltj@autoxspc']
 435    function set_np_xspc_jachar(Nx, x)
 436       local m = ltjf_font_metric_table[getfont(x)]
 437       local cls, c = slow_find_char_class(has_attr(x, attr_orig_char), m, getchar(x))
 438       Nx.met, Nx.char = m, c; Nx.class = cls;
 439       if cls~=0 then set_attr(x, attr_jchar_class, cls) end
 440       Nx.pre  = table_current_stack[PRE + c]  or 0
 441       Nx.post = table_current_stack[POST + c] or 0
 442       Nx.xspc = table_current_stack[XSP  + c] or 3
 443       Nx.kcat = table_current_stack[KCAT + c] or 0
 444       Nx.auto_kspc, Nx.auto_xspc = (has_attr(x, attr_autospc)==1), (has_attr(x, attr_autoxspc)==1)
 445    end
 446    local set_np_xspc_jachar = set_np_xspc_jachar
 447
 448 -- 欧文文字のデータを取得
 449    local floor = math.floor
 450    function set_np_xspc_alchar(Nx, c,x, lig)
 451       if c~=-1 then
 452          local f = (lig ==1) and nullfunc or node_tail
 453          local xc, xs = getfield(x, 'components'), getsubtype(x)
 454          while xc and xs and xs%4>=2 do
 455             x = f(xc); xc, xs = getfield(x, 'components'), getsubtype(x)
 456          end
 457          c = getchar(x)
 458          Nx.pre  = table_current_stack[PRE + c]  or 0
 459          Nx.post = table_current_stack[POST + c] or 0
 460          Nx.xspc = table_current_stack[XSP  + c] or 3
 461          Nx.char = 'jcharbdd'
 462       else
 463          Nx.pre, Nx.post, Nx.char = 0, 0, -1
 464          Nx.xspc = table_current_stack[XSP - 1] or 3
 465       end
 466       Nx.met = nil
 467       Nx.auto_xspc = (has_attr(x, attr_autoxspc)==1)
 468    end
 469    local set_np_xspc_alchar = set_np_xspc_alchar
 470
 471 -- Np の情報取得メインルーチン
 472    extract_np = function ()
 473       local x, i = Np.nuc, Np.id;
 474       if i ==  id_jglyph then return set_np_xspc_jachar(Np, x)
 475       elseif i == id_glyph then return set_np_xspc_alchar(Np, getchar(x), x, 1)
 476       elseif i == id_hlist then Np.last_char = check_box_high(Np, getlist(x), nil)
 477       elseif i == id_pbox then Np.last_char = check_box_high(Np, Np.first, node_next(Np.last))
 478       elseif i == id_disc then Np.last_char = check_box_high(Np, getfield(x, 'replace'), nil)
 479       elseif i == id_math then return set_np_xspc_alchar(Np, -1, x)
 480       end
 481    end
 482
 483    -- change the information for the next loop
 484    -- (will be done if Nx is an alphabetic character or a hlist)
 485    after_hlist = function (Nx)
 486       local s = Nx.last_char
 487       if s then
 488          if getid(s)==id_glyph then
 489             if getfont(s) == (has_attr(s, attr_curjfnt) or -1) then
 490                set_np_xspc_jachar(Nx, s)
 491             else
 492                set_np_xspc_alchar(Nx, getchar(s), s, 2)
 493             end
 494          else
 495             set_np_xspc_alchar(Nx, -1, s)
 496          end
 497       else
 498          Nx.pre, Nx.met = nil, nil
 499       end
 500    end
 501
 502    after_alchar = function (Nx)
 503       local x = Nx.nuc
 504       return set_np_xspc_alchar(Nx, getchar(x), x, 2)
 505    end
 506
 507 end
 508
 509 -------------------- 最下層の処理
 510
 511 -- change penalties (or create a new penalty, if needed)
 512 local function handle_penalty_normal(post, pre, g)
 513    local a = (pre or 0) + (post or 0)
 514    if #Bp == 0 then
 515       if (a~=0 and not(g and getid(g)==id_kern)) then
 516          local p = node_new(id_penalty)
 517          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 518          setfield(p, 'penalty', a)
 519          head = insert_before(head, Np.first, p)
 520          Bp[1]=p;
 521          set_attr(p, attr_icflag, KINSOKU)
 522       end
 523    else for _, v in pairs(Bp) do add_penalty(v,a) end
 524    end
 525 end
 526
 527 local function handle_penalty_always(post, pre, g)
 528    local a = (pre or 0) + (post or 0)
 529    if #Bp == 0 then
 530       if not (g and getid(g)==id_glue) then
 531          local p = node_new(id_penalty)
 532          if a<-10000 then a = -10000 elseif a>10000 then a = 10000 end
 533          setfield(p, 'penalty', a)
 534          head = insert_before(head, Np.first, p)
 535          Bp[1]=p
 536          set_attr(p, attr_icflag, KINSOKU)
 537       end
 538    else for _, v in pairs(Bp) do add_penalty(v,a) end
 539    end
 540 end
 541
 542 local function handle_penalty_suppress(post, pre, g)
 543    local a = (pre or 0) + (post or 0)
 544    if #Bp == 0 then
 545       if g and getid(g)==id_glue then
 546          local p = node_new(id_penalty)
 547          setfield(p, 'penalty', 10000); head = insert_before(head, Np.first, p)
 548          Bp[1]=p
 549          set_attr(p, attr_icflag, KINSOKU)
 550       end
 551    else for _, v in pairs(Bp) do add_penalty(v,a) end
 552    end
 553 end
 554
 555 -- 和文文字間の JFM glue を node 化
 556 local function new_jfm_glue(m, bc, ac)
 557 -- bc, ac: char classes
 558    local g, d = m.char_type[bc][ac], 0
 559    local n
 560    if g then
 561       n,d = node_copy(g[2]), g[3]
 562       if g[1] then
 563          local f = node_new(id_glue)
 564          set_attr(f, attr_icflag, g[4])
 565          setfield(f, 'spec', n)
 566          return f, d
 567       end
 568    end
 569    return n, d
 570 end
 571
 572 -- Nq.last (kern w) .... (glue/kern g) Np.first
 573 local function real_insert(g)
 574    if g then
 575       head  = insert_before(head, Np.first, g)
 576       Np.first = g
 577    end
 578 end
 579
 580
 581 -------------------- 和文文字間空白量の決定
 582
 583 -- get kanjiskip
 584 local get_kanjiskip
 585 local get_kanjiskip_normal, get_kanjiskip_jfm
 586 do
 587    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 588    local KANJI_SKIP_JFM   = luatexja.icflag_table.KANJI_SKIP_JFM
 589    get_kanjiskip_normal = function ()
 590       if Np.auto_kspc or Nq.auto_kspc then
 591          return node_copy(kanji_skip)
 592       else
 593          local g = node_copy(zero_glue)
 594          set_attr(g, attr_icflag, KANJI_SKIP)
 595          return g
 596       end
 597    end
 598
 599    get_kanjiskip_jfm = function ()
 600       local g
 601       if Np.auto_kspc or Nq.auto_kspc then
 602          g = node_new(id_glue); --copy_attr(g, Nq.nuc)
 603          local gx = node_new(id_glue_spec);
 604          setfield(gx, 'stretch_order', 0); setfield(gx, 'shrink_order', 0)
 605          local pm, qm = Np.met, Nq.met
 606          local bk = qm.kanjiskip or {0, 0, 0}
 607          if (pm.char_type==qm.char_type) and (qm.var==pm.var) then
 608             setfield(gx, 'width', bk[1])
 609             setfield(gx, 'stretch', bk[2])
 610             setfield(gx, 'shrink', bk[3])
 611          else
 612             local ak = pm.kanjiskip or {0, 0, 0}
 613             setfield(gx, 'width', round(diffmet_rule(bk[1], ak[1])))
 614             setfield(gx, 'stretch', round(diffmet_rule(bk[2], ak[2])))
 615             setfield(gx, 'shrink', -round(diffmet_rule(-bk[3], -ak[3])))
 616          end
 617          setfield(g, 'spec', gx)
 618       else
 619          g =  node_copy(zero_glue)
 620       end
 621       set_attr(g, attr_icflag, KANJI_SKIP_JFM)
 622       return g
 623    end
 624 end
 625
 626 local calc_ja_ja_aux
 627 do
 628    local bg_ag = 2*id_glue - id_glue
 629    local bg_ak = 2*id_glue - id_kern
 630    local bk_ag = 2*id_kern - id_glue
 631    local bk_ak = 2*id_kern - id_kern
 632
 633    calc_ja_ja_aux = function (gb,ga, db, da)
 634       local rbb, rab = (1-db)/2, (1-da)/2 -- 「前の文字」由来のグルーの割合
 635       local rba, raa = (1+db)/2, (1+da)/2 -- 「前の文字」由来のグルーの割合
 636       if diffmet_rule ~= math.two_pleft and diffmet_rule ~= math.two_pright
 637           and diffmet_rule ~= math.two_paverage then
 638          rbb, rab, rba, raa = 1,0,0,1
 639       end
 640       if not gb then
 641          if ga then
 642             gb = node_new(id_kern); setfield(gb, 'kern', 0)
 643          else return nil end
 644       elseif not ga then
 645          ga = node_new(id_kern); setfield(ga, 'kern', 0)
 646       end
 647
 648       local k = 2*getid(gb) - getid(ga)
 649       if k == bg_ag then
 650          local bs, as = getfield(gb, 'spec'), getfield(ga, 'spec')
 651          -- 両方とも glue．
 652          local bd, ad = getfield(bs, 'width'), getfield(as, 'width')
 653          setfield(bs, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 654          bd, ad = getfield(bs, 'stretch'), getfield(as, 'stretch')
 655          setfield(bs, 'stretch', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 656          bd, ad = getfield(bs, 'shrink'), getfield(as, 'shrink')
 657          setfield(bs, 'shrink', -round(diffmet_rule(-rbb*bd - rba*ad, -rab*bd - raa*ad)))
 658          node_free(ga)
 659          return gb
 660       elseif k == bk_ak then
 661          -- 両方とも kern．
 662          local bd, ad = getfield(gb, 'kern'), getfield(ga, 'kern')
 663          setfield(gb, 'kern', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 664          node_free(ga)
 665          return gb
 666       elseif k == bk_ag then
 667          local as = getfield(ga, 'spec')
 668          -- gb: kern, ga: glue
 669          local bd, ad = getfield(gb, 'kern'), getfield(as, 'width')
 670          setfield(as, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 671          ad = getfield(as, 'stretch')
 672          setfield(bs, 'stretch', round(diffmet_rule(rba*ad, raa*ad)))
 673          ad = getfield(as, 'shrink')
 674          setfield(bs, 'shrink', -round(diffmet_rule(-rba*ad, -raa*ad)))
 675          node_free(gb)
 676          return ga
 677       else
 678          local bs = getfield(gb, 'spec')
 679          -- gb: glue, ga: kern
 680          local bd, ad = getfield(bs, 'width'), getfield(ga, 'kern')
 681          setfield(bs, 'width', round(diffmet_rule(rbb*bd + rba*ad, rab*bd + raa*ad)))
 682          bd = getfield(bs, 'stretch')
 683          setfield(bs, 'stretch', round(diffmet_rule(rbb*bd, rab*bd)))
 684          bd = getfield(bs, 'shrink')
 685          setfield(bs, 'shrink', -round(diffmet_rule(-rbb*bd, -rab*bd)))
 686          node_free(ga)
 687          return gb
 688       end
 689    end
 690 end
 691
 692 local function calc_ja_ja_glue()
 693    if  ihb_flag then return nil
 694    else
 695       local qm, pm = Nq.met, Np.met
 696       if (qm.char_type==pm.char_type) and (qm.var==pm.var) then
 697          return new_jfm_glue(qm, Nq.class, Np.class)
 698       else
 699          local npn, nqn = Np.nuc, Nq.nuc
 700          local gb, db = new_jfm_glue(qm, Nq.class,
 701                                      slow_find_char_class(has_attr(npn, attr_orig_char),
 702                                                           qm, getchar(npn)))
 703          local ga, da = new_jfm_glue(pm,
 704                                      slow_find_char_class(has_attr(nqn, attr_orig_char),
 705                                                           pm, getchar(nqn)),
 706                                Np.class)
 707          return calc_ja_ja_aux(gb, ga, db, da);
 708       end
 709    end
 710 end
 711
 712 -------------------- 和欧文間空白量の決定
 713
 714 -- get xkanjiskip
 715 local get_xkanjiskip
 716 local get_xkanjiskip_normal, get_xkanjiskip_jfm
 717 do
 718    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 719    local XKANJI_SKIP_JFM   = luatexja.icflag_table.XKANJI_SKIP_JFM
 720    get_xkanjiskip_normal = function (Nn)
 721       if (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 722          local f = node_copy(xkanji_skip)
 723          return f
 724       else
 725          local g = node_copy(zero_glue)
 726          set_attr(g, attr_icflag, XKANJI_SKIP)
 727          return g
 728       end
 729    end
 730    get_xkanjiskip_jfm = function (Nn)
 731       local g
 732       if (Nq.xspc>=2) and (Np.xspc%2==1) and (Nq.auto_xspc or Np.auto_xspc) then
 733          g = node_new(id_glue)
 734          local gx = node_new(id_glue_spec);
 735          setfield(gx, 'stretch_order', 0); setfield(gx, 'shrink_order', 0)
 736          local bk = Nn.met.xkanjiskip or {0, 0, 0}
 737          setfield(gx, 'width', bk[1])
 738          setfield(gx, 'stretch', bk[2])
 739          setfield(gx, 'shrink', bk[3])
 740          setfield(g, 'spec', gx)
 741       else
 742          g = node_copy(zero_glue)
 743       end
 744       set_attr(g, attr_icflag, XKANJI_SKIP_JFM)
 745       return g
 746    end
 747 end
 748
 749 -------------------- 隣接した「塊」間の処理
 750
 751 local function get_OA_skip()
 752    if not ihb_flag then
 753       local pm = Np.met
 754       return new_jfm_glue(pm,
 755         fast_find_char_class(((Nq.id == id_math and -1) or (type(Nq.char)=='string' and Nq.char or 'jcharbdd')), pm), Np.class)
 756    else return nil
 757    end
 758 end
 759 local function get_OB_skip()
 760    if not ihb_flag then
 761       local qm = Nq.met
 762       return new_jfm_glue(qm, Nq.class,
 763         fast_find_char_class(((Np.id == id_math and -1) or'jcharbdd'), qm))
 764    else return nil
 765    end
 766 end
 767
 768 -- (anything) .. jachar
 769 local function handle_np_jachar(mode)
 770    local qid = Nq.id
 771    if qid==id_jglyph or ((qid==id_pbox or qid==id_pbox_w) and Nq.met) then
 772       local g = calc_ja_ja_glue() or get_kanjiskip() -- M->K
 773       handle_penalty_normal(Nq.post, Np.pre, g); real_insert(g)
 774    elseif Nq.met then  -- qid==id_hlist
 775       local g = get_OA_skip() or get_kanjiskip() -- O_A->K
 776       handle_penalty_normal(0, Np.pre, g); real_insert(g)
 777    elseif Nq.pre then
 778       local g = get_OA_skip() or get_xkanjiskip(Np) -- O_A->X
 779       handle_penalty_normal((qid==id_hlist and 0 or Nq.post), Np.pre, g); real_insert(g)
 780    else
 781       local g = get_OA_skip() -- O_A
 782       if qid==id_glue then handle_penalty_normal(0, Np.pre, g)
 783       elseif qid==id_kern then handle_penalty_suppress(0, Np.pre, g)
 784       else handle_penalty_always(0, Np.pre, g)
 785       end
 786       real_insert(g)
 787    end
 788    if mode and Np.kcat%2~=1 then
 789       widow_Np.first, widow_Bp, Bp = Np.first, Bp, widow_Bp
 790    end
 791 end
 792
 793
 794 -- jachar .. (anything)
 795 local function handle_nq_jachar()
 796     if Np.pre then
 797       local g = get_OB_skip() or get_xkanjiskip(Nq) -- O_B->X
 798       handle_penalty_normal(Nq.post, (Np.id==id_hlist and 0 or Np.pre), g); real_insert(g)
 799    else
 800       local g = get_OB_skip() -- O_B
 801       if Np.id==id_glue then handle_penalty_normal(Nq.post, 0, g)
 802       elseif Np.id==id_kern then handle_penalty_suppress(Nq.post, 0, g)
 803       else handle_penalty_always(Nq.post, 0, g)
 804       end
 805       real_insert(g)
 806    end
 807 end
 808
 809 -- (anything) .. (和文文字で始まる hlist)
 810 local function handle_np_ja_hlist()
 811    local qid = Nq.id
 812    if qid==id_jglyph or ((qid==id_pbox or Nq.id == id_pbox_w) and Nq.met) then
 813       local g = get_OB_skip() or get_kanjiskip() -- O_B->K
 814       handle_penalty_normal(Nq.post, 0, g); real_insert(g)
 815    elseif Nq.met then  -- Nq.id==id_hlist
 816       local g = get_kanjiskip() -- K
 817       handle_penalty_suppress(0, 0, g); real_insert(g)
 818    elseif Nq.pre then
 819       local g = get_xkanjiskip(Np) -- X
 820       handle_penalty_suppress(0, 0, g); real_insert(g)
 821    end
 822 end
 823
 824 -- (和文文字で終わる hlist) .. (anything)
 825 local function handle_nq_ja_hlist()
 826    if Np.pre then
 827       local g = get_xkanjiskip(Nq) -- X
 828       handle_penalty_suppress(0, 0, g); real_insert(g)
 829    end
 830 end
 831
 832
 833 -- Nq が前側のクラスタとなることによる修正
 834 do
 835    local adjust_nq_aux = {
 836       [id_glyph] = function()
 837                       local x = Nq.nuc
 838                       return set_np_xspc_alchar(Nq, getchar(x),x, 2)
 839                    end, -- after_alchar(Nq)
 840       [id_hlist]  = function() after_hlist(Nq) end,
 841       [id_pbox]  = function() after_hlist(Nq) end,
 842       [id_disc]  = function() after_hlist(Nq) end,
 843       [id_pbox_w]  = function()
 844                         luatexbase.call_callback("luatexja.jfmglue.whatsit_after",
 845                                                  false, Nq, Np)
 846                      end,
 847    }
 848
 849    function adjust_nq()
 850       local x = adjust_nq_aux[Nq.id]
 851       if x then x()  end
 852    end
 853 end
 854
 855
 856 -------------------- 開始・終了時の処理
 857 do
 858
 859 -- リスト末尾の処理
 860 local JWP  = luatexja.stack_table_index.JWP
 861 local function handle_list_tail(mode)
 862    adjust_nq(); Np = Nq
 863    if mode then
 864       -- the current list is to be line-breaked.
 865       -- Insert \jcharwidowpenalty
 866       Bp = widow_Bp; Np = widow_Np
 867       if Np.first then
 868          handle_penalty_normal(0,
 869                                table_current_stack[JWP] or 0)
 870       end
 871    else
 872       -- the current list is the contents of a hbox
 873       local npi, pm = Np.id, Np.met
 874       if npi == id_jglyph or (npi==id_pbox and pm) then
 875          local g = new_jfm_glue(pm, Np.class, fast_find_char_class('boxbdd', pm))
 876          if g then
 877             set_attr(g, attr_icflag, BOXBDD)
 878             head = insert_after(head, Np.last, g)
 879          end
 880       end
 881    end
 882 end
 883
 884 -- リスト先頭の処理
 885 local function handle_list_head(par_indented)
 886    local npi, pm = Np.id, Np.met
 887    if npi ==  id_jglyph or (npi==id_pbox and pm) then
 888       if not ihb_flag then
 889          local g = new_jfm_glue(pm, fast_find_char_class(par_indented, pm), Np.class)
 890          if g then
 891             set_attr(g, attr_icflag, BOXBDD)
 892             if getid(g)==id_glue and #Bp==0 then
 893                local h = node_new(id_penalty)
 894                setfield(h, 'penalty', 10000); set_attr(h, attr_icflag, BOXBDD)
 895             end
 896             head = insert_before(head, Np.first, g)
 897          end
 898       end
 899    end
 900 end
 901
 902 -- initialize
 903 -- return value: (the initial cursor lp), (last node)
 904 local init_var
 905 do
 906    local KANJI_SKIP   = luatexja.icflag_table.KANJI_SKIP
 907    local XKANJI_SKIP   = luatexja.icflag_table.XKANJI_SKIP
 908    local KSK  = luatexja.stack_table_index.KSK
 909    local XSK  = luatexja.stack_table_index.XSK
 910    init_var = function (mode)
 911       -- 1073741823: max_dimen
 912       Bp, widow_Bp, widow_Np = {}, {}, {first = nil}
 913       table_current_stack = ltjs.table_current_stack
 914
 915       kanji_skip = node_new(id_glue)
 916       setfield(kanji_skip, 'spec', skip_table_to_spec(KSK))
 917       set_attr(kanji_skip, attr_icflag, KANJI_SKIP)
 918       get_kanjiskip = (getfield(getfield(kanji_skip, 'spec'), 'width') == 1073741823)
 919          and get_kanjiskip_jfm or get_kanjiskip_normal
 920
 921       xkanji_skip = node_new(id_glue)
 922       setfield(xkanji_skip, 'spec', skip_table_to_spec(XSK))
 923       set_attr(xkanji_skip, attr_icflag, XKANJI_SKIP)
 924       get_xkanjiskip = (getfield(getfield(xkanji_skip, 'spec'), 'width') == 1073741823)
 925          and get_xkanjiskip_jfm or get_xkanjiskip_normal
 926
 927       Np = {
 928          auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
 929          first=nil, id=nil, last=nil, met=nil, nuc=nil,
 930          post=nil, pre=nil, xspc=nil,
 931       }
 932       Nq = {
 933          auto_kspc=nil, auto_xspc=nil, char=nil, class=nil,
 934          first=nil, id=nil, last=nil, met=nil, nuc=nil,
 935          post=nil, pre=nil, xspc=nil,
 936       }
 937       if mode then
 938          -- the current list is to be line-breaked:
 939          -- hbox from \parindent is skipped.
 940          local lp, par_indented, lpi, lps  = head, 'boxbdd', getid(head), getsubtype(head)
 941          while lp and ((lpi==id_whatsit and lps~=sid_user)
 942                        or ((lpi==id_hlist) and (lps==3))) do
 943             if (lpi==id_hlist) and (lps==3) then par_indented = 'parbdd' end
 944             lp=node_next(lp); lpi, lps = getid(lp), getsubtype(lp) end
 945          return lp, par_indented
 946       else
 947          return head, 'boxbdd'
 948       end
 949    end
 950 end
 951
 952 local function cleanup(mode)
 953    -- adjust attr_icflag for avoiding error
 954    tex.setattribute('global', attr_icflag, 0)
 955    node_free(kanji_skip); node_free(xkanji_skip)
 956    if mode then
 957       local h = node_next(head)
 958       if getid(h) == id_penalty and getfield(h, 'penalty') == 10000 then
 959          h = node_next(h)
 960          if getid(h) == id_glue and getsubtype(h) == 15 and not node_next(h) then
 961             return false
 962          end
 963       end
 964       return head
 965    else
 966       set_attr(head, attr_icflag,
 967                get_attr_icflag(head) + PROCESSED_BEGIN_FLAG);
 968       return head
 969    end
 970 end
 971 -------------------- 外部から呼ばれる関数
 972
 973 -- main interface
 974 function main(ahead, mode)
 975    if not ahead then return ahead end
 976    head = ahead;
 977    local lp, par_indented = init_var(mode)
 978    lp = calc_np(lp, last)
 979    if Np then
 980       extract_np(); handle_list_head(par_indented)
 981    else
 982       return cleanup(mode, last)
 983    end
 984    lp = calc_np(lp)
 985    while Np do
 986       extract_np();
 987       adjust_nq();
 988       local pid, pm = Np.id, Np.met
 989       -- 挿入部
 990       if pid == id_jglyph then
 991          handle_np_jachar(mode)
 992       elseif pm then
 993          if pid==id_hlist then handle_np_ja_hlist()
 994          else handle_np_jachar() end
 995       elseif Nq.met then
 996          if Nq.id==id_hlist then handle_nq_ja_hlist()
 997          else handle_nq_jachar() end
 998       end
 999       lp = calc_np(lp)
1000    end
1001    handle_list_tail(mode)
1002    return cleanup(mode)
1003 end
1004 end
1005
1006 do
1007    local IHB  = luatexja.userid_table.IHB
1008    local BPAR = luatexja.userid_table.BPAR
1009    local node_prev = (Dnode ~= node) and Dnode.getprev or node.prev
1010    local node_write = Dnode.write
1011
1012    -- \inhibitglue
1013    function create_inhibitglue_node()
1014       local tn = node_new(id_whatsit, sid_user)
1015       setfield(tn, 'user_id', IHB)
1016       setfield(tn, 'type', 100)
1017       setfield(tn, 'value', 1)
1018       node_write(tn)
1019    end
1020
1021    -- Node for indicating beginning of a paragraph
1022    -- (for ltjsclasses)
1023    function create_beginpar_node()
1024       local tn = node_new(id_whatsit, sid_user)
1025       setfield(tn, 'user_id', BPAR)
1026       setfield(tn, 'type', 100)
1027       setfield(tn, 'value', 1)
1028       node_write(tn)
1029    end
1030
1031    local function whatsit_callback(Np, lp, Nq)
1032       if Np and Np.nuc then return Np
1033       elseif Np and getfield(lp, 'user_id') == BPAR then
1034          Np.first = lp; Np.nuc = lp; Np.last = lp
1035          Np.char = 'parbdd'
1036          Np.met = nil
1037          Np.pre = 0; Np.post = 0
1038          Np.xspc = 0
1039          Np.auto_xspc = false
1040          return Np
1041       end
1042    end
1043
1044     local function whatsit_after_callback(s, Nq, Np)
1045        if not s and getfield(Nq.nuc, 'user_id') == BPAR then
1046          local x, y = node_prev(Nq.nuc), Nq.nuc
1047          Nq.first, Nq.nuc, Nq.last = x, x, x
1048          head = node_remove(head, y)
1049          node_free(y)
1050       end
1051       return s
1052    end
1053
1054    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_getinfo", whatsit_callback,
1055                               "luatexja.beginpar.np_info", 1)
1056    luatexbase.add_to_callback("luatexja.jfmglue.whatsit_after", whatsit_after_callback,
1057                               "luatexja.beginpar.np_info_after", 1)
1058
1059 end