src/ltj-rmlgbm.lua

   1 --
   2 -- ltj-rmlgbm.lua
   3 --
   4 luatexja.load_module('base');      local ltjb = luatexja.base
   5
   6 local cidfont_data = {}
   7 local cache_chars = {}
   8 local cache_ver = 11
   9 local identifiers = fonts.hashes.identifiers
  10
  11 local cid_reg, cid_order, cid_supp, cid_name
  12 local cid_replace = {
  13    ["Adobe-Japan1"] = {"UniJIS2004-UTF32", 23059, 7,
  14                        function (i)
  15                           if (231<=i and i<=632) or (8718<=i and i<=8719)
  16                              or (12063<=i and i<=12087) then
  17                              return 327680 -- 655360/2
  18                           elseif 9758<=i and i<=9778 then
  19                              return 218453 -- 655360/3
  20                           elseif 9738<=i and i<=9757 then
  21                              return 163840 -- 655360/4
  22                           end
  23                        end},
  24                        -- 基本的には JIS X 0213:2004 に沿ったマッピング
  25    ["Adobe-Korea1"] = {"UniKS-UTF32",  18351, 2,
  26                        function (i)
  27                           if 8094<=i and i<=8100 then
  28                              return 327680 -- 655360/2
  29                           end
  30                        end},
  31    ["Adobe-GB1"]    = {"UniGB-UTF32",  30283, 5,
  32                        function (i)
  33                           if (814<=i and i<=939) or (i==7716)
  34                              or (22355<=i and i<=22357) then
  35                              return 327680 -- 655360/2
  36                           end
  37                        end},
  38    ["Adobe-CNS1"]   = {"UniCNS-UTF32", 19178, 7,
  39                        function (i)
  40                           if (13648<=i and i<=13742) or (i==17603) then
  41                              return 327680 -- 655360/2
  42                           end
  43                        end},
  44    ["Adobe-KR"] = {"UniAKR-UTF32", 22896, 9,
  45                        function (i)
  46                           if i==3057 then
  47                              return 655360*2
  48                           elseif i==3058 then
  49                              return 655360*3
  50                           elseif i==12235 or i==12236 then
  51                              return 163840 -- 655360/4
  52                           end
  53                        end},
  54 }
  55
  56 -- reading CID maps
  57 local make_cid_font
  58 do
  59    local line, fh -- line, file handler
  60    local tt,cidm -- characters, cid->(Unicode)
  61
  62    local function load_cid_char(cid_dec, mke)
  63       local cid, ucs, ucsa
  64       line = fh:read("*l")
  65       while line do
  66          if string.find(line, "end...?char") then
  67             line = fh:read("*l"); return
  68          else -- WMA l is in the form "<%x+>%s%d+"
  69             ucs, cid = string.match(line, "<(%x+)>%s+<?(%x+)>?")
  70             cid = cid_dec(cid); ucs = tonumber(ucs, 16);
  71             if not tt[ucs]  then
  72                tt[ucs] = mke(cid); cidm[cid]=ucs
  73             end
  74          end
  75          line = fh:read("*l")
  76       end
  77    end
  78
  79    local function load_cid_range(inc, cid_dec, mke)
  80       local bucs, eucs, cid
  81       line = fh:read("*l")
  82       while line do
  83         if string.find(line, "end...?range") then
  84             line = fh:read("*l"); return
  85          else -- WMA l is in the form "<%x+>%s+<%x+>"
  86             bucs, eucs, cid = string.match(line, "<(%x+)>%s+<(%x+)>%s+<?(%x+)>?")
  87             cid = cid_dec(cid);
  88             bucs = tonumber(bucs, 16); eucs = tonumber(eucs, 16)
  89             for ucs = bucs, eucs do
  90                if not tt[ucs]  then
  91                   tt[ucs] = mke(cid); cidm[cid]=ucs
  92                end
  93                cid = inc(cid)
  94             end
  95          end
  96          line = fh:read("*l")
  97       end
  98    end
  99
 100    local function open_cmap_file(name, inc, cid_dec, mke)
 101       local fn = kpse.find_file(name, 'cmap files')
 102       if fn then
 103          fh = io.open(fn, "r")
 104          line = fh:read("*l")
 105          while line do
 106             if string.find(line, "%x+%s+begin...?char") then
 107                load_cid_char(cid_dec, mke)
 108             elseif string.find(line, "%x+%s+begin...?range") then
 109                load_cid_range(inc, cid_dec, mke)
 110             else
 111                line = fh:read("*l")
 112             end
 113          end
 114          fh:close();
 115       end
 116    end
 117
 118    local function increment(a) return a+1 end
 119    local function entry(a)
 120       return {index = a}
 121    end
 122    local feat_dummy_vert = { gsub={vert={dflt={dflt=true}}} }
 123    local seq_dummy_vert={{
 124      features={vert={dflt={dflt=true}}},
 125      --flags={false,false,false,false},
 126      --index=1, name="s_s_0", skiphash=false, steps={coverage={},index=1},
 127      ["type"]="gsub_single", order='vert',
 128    }}
 129    make_cid_font = function ()
 130       local kx = cid_replace[cid_name]
 131       if not kx then return end
 132       local k = {
 133          cidinfo = { ordering=cid_order, registry=cid_reg, supplement=kx[3] },
 134          encodingbytes = 2, extend=1000, format = 'opentype',
 135          direction = 0, characters = {}, parameters = {
 136             ascender = 655360*0.88,
 137             descender = 655360*0.12,
 138          },
 139          embedding = "no", cache = "yes", factor = 0, hfactor = 0, vfactor = 0,
 140          tounicode = 1,
 141          properties = { language = "dflt", script = "dflt" },
 142       }
 143       cidfont_data[cid_name] = k
 144
 145       -- CID => Unicode 符号空間
 146       local tth, cidmo = {}, {}
 147       tt, cidm = tth, cidmo
 148       for i = 0,kx[2] do cidm[i] = -1 end
 149       open_cmap_file(kx[1] .. "-H", increment, tonumber, entry)
 150       k.characters = tth
 151
 152       -- Unicode にマップされなかった文字の処理
 153       -- これらは TrueType フォントを使って表示するときはおかしくなる
 154       local ttu, pricode = {}, 0xF0000
 155       for i,v in ipairs(cidmo) do
 156          if v==-1 then
 157             tth[pricode], cidmo[i], pricode
 158                = { index = i }, pricode, pricode+1;
 159          end
 160          ttu[i] = cidmo[i]
 161          ttu[cid_order .. '.' .. i] = cidmo[i]
 162       end
 163
 164       -- shared
 165       k.shared = {
 166          otfdata = {
 167             cidinfo= k.cidinfo, verbose = false,
 168             shared = { featuredata = {}, },
 169          },
 170          dynamics = {}, processes = {},
 171          rawdata = {}, features={},
 172       }
 173       k.resources = {
 174          unicodes = ttu,
 175          features = feat_dummy_vert,
 176          sequences = seq_dummy_vert,
 177       }
 178       k.descriptions = {}
 179       cache_chars[cid_name]  = { [655360] = k.characters }
 180
 181       -- 縦書用字形
 182       tt, cidm = {}, {}
 183       local ttv = {}; k.ltj_vert_table = ttv
 184       for i = 0,kx[2] do cidm[i] = -1 end
 185       open_cmap_file(kx[1] .. "-V", increment, tonumber, entry)
 186       for i,v in pairs(tt) do
 187          ttv[i] =  cidmo[v.index] -- "unicode" of vertical variant
 188       end
 189
 190       -- tounicode エントリ
 191       local cidp = {nil, nil}; tt, ttu, cidm = {}, {}, {}
 192       open_cmap_file(cid_name .. "-UCS2",
 193                      function(a)
 194                         a[2] = a[2] +1 ; return a
 195                      end,
 196                      function(a)
 197                         cidp[1] = string.upper(string.sub(a,1,string.len(a)-4))
 198                         cidp[2] = tonumber(string.sub(a,-4),16)
 199                         return cidp
 200                      end,
 201                      function(a) return a[1] ..string.format('%04X',a[2])  end)
 202       -- tt は cid -> tounicode になっているので cidm -> tounicode に変換
 203       local kxf = kx[4]
 204       for i,v in ipairs(cidmo) do
 205          k.characters[v].width = kxf(i)
 206          if v>=0xF0000 then
 207             k.characters[v].tounicode = tt[i]
 208          end
 209       end
 210
 211       -- Save
 212       if k and k.characters and k.characters[46] then
 213         k.characters[46].width = math.floor(655360/14);
 214       end
 215       ltjb.save_cache("ltj-cid-auto-" .. string.lower(cid_name),
 216                       {version = cache_ver, k})
 217       k.shared.rawdata.resources=k.resources
 218       k.shared.rawdata.descriptions=k.descriptions
 219    end
 220 end
 221
 222 --
 223 local cidf_vert_processor
 224 do
 225    local traverse_id, is_node = node.direct.traverse_id, node.is_node
 226    local to_direct = node.direct.todirect
 227    local id_glyph = node.id('glyph')
 228    local getfont = node.direct.getfont
 229    local getchar = node.direct.getchar
 230    local setchar = node.direct.setchar
 231    local font_getfont = font.getfont
 232    cidf_vert_processor = {
 233       function (head, fnum)
 234          local fontdata = font_getfont(fnum)
 235          if head and luatexja.jfont.font_metric_table[fnum] and luatexja.jfont.font_metric_table[fnum].vert_activated then
 236             local vt = fontdata.ltj_vert_table
 237             local nh = is_node(head) and to_direct(head) or head
 238             for n in traverse_id(id_glyph, head) do
 239                if getfont(n)==fnum then
 240                  local c = getchar(n); setchar(n, vt[c] or c)
 241                end
 242             end
 243             return head, false
 244          end
 245       end
 246    }
 247 end
 248
 249 local dummy_vht, dummy_vorg = {}, {}
 250 setmetatable(dummy_vht, {__index = function () return 1 end } )
 251 setmetatable(dummy_vorg, {__index = function () return 0.88 end } )
 252 local function cid_cache_outdated(t) return t.version~=cache_ver end
 253 local function read_cid_font()
 254    local dat = ltjb.load_cache("ltj-cid-auto-" .. string.lower(cid_name),
 255                                cid_cache_outdated)
 256    if dat then
 257       dat[1].shared.rawdata.resources=dat[1].resources
 258       dat[1].shared.rawdata.descriptions=dat[1].descriptions
 259       cidfont_data[cid_name] = dat[1]
 260       cache_chars[cid_name]  = { [655360] = cidfont_data[cid_name].characters }
 261    else
 262       -- Now we must create the virtual metrics from CMap.
 263       make_cid_font()
 264    end
 265    if cidfont_data[cid_name] then
 266       cidfont_data[cid_name].shared.processes = cidf_vert_processor
 267       cidfont_data[cid_name].resources.ltj_extra
 268         = { ind_to_uni = cidfont_data[cid_name].resources.unicodes,
 269             vheight = dummy_vht, vorigin = dummy_vorg }
 270       for i,v in pairs(cidfont_data[cid_name].characters) do
 271          if not v.width then v.width = 655360 end
 272          v.height, v.depth = 576716.8, 78643.2 -- optimized for jfm-ujis.lua
 273       end
 274       return cidfont_data[cid_name]
 275    else
 276       return nil
 277    end
 278 end
 279
 280 -- High-level
 281 local function prepare_cid_font(reg, ord)
 282    cid_reg, cid_order, cid_name, cid_supp = reg, ord, reg .. '-' .. ord
 283    return cidfont_data[cid_name] or read_cid_font()
 284 end
 285
 286
 287 local definers = fonts.definers
 288 local function mk_rml(name, size, id)
 289    local specification = definers.analyze(name,size)
 290    --specification = definers.resolve(specification) (not needed)
 291    specification.detail = specification.detail or ''
 292    do
 293       local n = specification.name
 294       if n:sub(1,1)=="{" then n=n:sub(2) end
 295       if n:sub(-1)=="}" then  n=n:sub(1,-2) end
 296       specification.name=n
 297    end
 298    local fontdata = {}
 299    local cachedata = {}
 300    local s = cidfont_data[cid_name]
 301    for k, v in pairs(s) do
 302       fontdata[k] = v
 303       cachedata[k] = v
 304    end
 305    fontdata.characters = nil
 306    cachedata.characters = nil
 307    fontdata.shared = nil
 308    cachedata.shared = nil
 309    if s.shared then
 310       cachedata.shared = {}
 311       local shared = cachedata.shared
 312       for k, v in pairs(s.shared) do
 313          shared[k] = v
 314       end
 315    end
 316
 317    -- characters & scaling
 318    if size < 0 then size = -size * 655.36 end
 319    local scale = size / 655360
 320
 321    do
 322       local def_height =  0.88 * size
 323       -- character's default height (optimized for jfm-ujis.lua)
 324       local def_depth =  0.12 * size  -- and depth.
 325       if not cache_chars[cid_name][size] then
 326          cache_chars[cid_name][size]  = {}
 327          for k, v in pairs(cache_chars[cid_name][655360]) do
 328             cache_chars[cid_name][size][k] = {
 329                index = v.index, width = v.width * scale,
 330                height = def_height, depth = def_depth, tounicode = v.tounicode,
 331             }
 332          end
 333       end
 334       fontdata.characters = cache_chars[cid_name][size]
 335       cachedata.characters = cache_chars[cid_name][size]
 336    end
 337    luatexja.rmlgbm.vert_addfunc(id, fontdata)
 338
 339    -- other parameters
 340    do
 341       local parameters = {}
 342       for k, v in pairs(s.parameters) do  parameters[k] = v * scale end
 343       fontdata.parameters  = parameters; fontdata.size  = size; fontdata.resources  = s.resources
 344       cachedata.parameters = parameters; cachedata.size = size; cachedata.resources = s.resources
 345    end
 346
 347    -- no embedding
 348    local var = ''
 349    local s = string.match(specification.detail, 'slant=([+-]*%d*%.?%d)')
 350    if s and e~=0  then
 351       s = s * 1000
 352       var, fontdata.slant  = var .. 's' .. tostring(s), s
 353    end
 354    local e = string.match(specification.detail, 'extend=([+-]*%d*%.?%d)')
 355    if e and e~=1  then
 356       e = e * 1000
 357       var, fontdata.extend  = var .. 'x' .. tostring(e), e
 358    end
 359    fontdata.name = specification.name .. size .. var; cachedata.name = fontdata.name
 360    fontdata.fullname = specification.name .. var; cachedata.fullname = fontdata.fullname
 361    fontdata.psname = specification.name; cachedata.psname = fontdata.psname
 362    identifiers[id] = cachedata
 363
 364    return fontdata
 365 end
 366
 367 local function font_callback(name, size, id, fallback)
 368    if name:sub(1,1)=="{" and name:sub(-1)=="}" then name = name:sub(2,-2) end
 369    local p = name:find(":") or 0
 370    if name:sub(1, p-1) == 'psft' then
 371       local s = "Adobe-Japan1-7"
 372       local basename = name:sub(p+1)
 373       local p = basename:find(":")
 374       local q = basename:find("/[BI][BI]?")
 375       if q and p and q<=p then
 376          basename = basename:gsub('/[BI][BI]?', '', 1)
 377          p = basename:find(":")
 378       end
 379       if p then
 380          local xname = basename:sub(p+1)
 381          p = 1
 382          while p do
 383             local q = xname:find(";", p+1) or xname:len()+1
 384             if xname:sub(p, p+3)=='cid=' and q>p+4 then
 385                s = xname:sub(p+4, q-1)
 386             end
 387             if xname:len()+1==q then p = nil else p = q + 1 end
 388          end
 389       end
 390       cid_reg, cid_order = string.match(s, "^(.-)%-(.-)%-(%d-)$")
 391       if not cid_reg then
 392          cid_reg, cid_order = string.match(s, "^(.-)%-(.-)$")
 393       end
 394       if not prepare_cid_font(cid_reg, cid_order) then
 395          ltjb.package_error('luatexja',
 396                             "bad cid key `" .. s .. "'",
 397                             "I couldn't find any non-embedded font information for the CID\n" ..
 398                             '`' .. s .. "'. For now, I'll use `Adobe-Japan1-6'.\n"..
 399                             'Please contact the LuaTeX-ja project team.')
 400          cid_name = "Adobe-Japan1"
 401       end
 402       return mk_rml(basename, size, id)
 403    else
 404       local fontdata=fallback(name, size, id)
 405       if type (fontdata) == "table" and fontdata.encodingbytes == 2 then
 406         luatexbase.call_callback ("luaotfload.patch_font", fontdata, name, id)
 407       else
 408         luatexbase.call_callback ("luaotfload.patch_font_unsafe", fontdata, name, id)
 409       end
 410       return fontdata
 411    end
 412 end
 413
 414 luatexja.rmlgbm = {
 415    prepare_cid_font = prepare_cid_font,
 416    cidfont_data = cidfont_data,
 417    font_callback = font_callback,
 418    vert_addfunc = function () end, -- dummy, set in ltj-direction.lua
 419 }
 420
 421 prepare_cid_font('Adobe', 'Japan1')