OSDN Git Service

#30840 不要になっていたTemplate:Documentation絡みの処理も除去,
[wptscs/wpts.git] / Wptscs / Logics / MediaWikiTranslator.cs
1 // ================================================================================================
2 // <summary>
3 //      Wikipedia用の翻訳支援処理実装クラスソース</summary>
4 //
5 // <copyright file="MediaWikiTranslator.cs" company="honeplusのメモ帳">
6 //      Copyright (C) 2013 Honeplus. All rights reserved.</copyright>
7 // <author>
8 //      Honeplus</author>
9 // ================================================================================================
10
11 namespace Honememo.Wptscs.Logics
12 {
13     using System;
14     using System.Collections.Generic;
15     using System.IO;
16     using System.Linq;
17     using System.Net;
18     using System.Text;
19     using System.Windows.Forms;
20     using Honememo.Models;
21     using Honememo.Parsers;
22     using Honememo.Utilities;
23     using Honememo.Wptscs.Models;
24     using Honememo.Wptscs.Parsers;
25     using Honememo.Wptscs.Properties;
26     using Honememo.Wptscs.Utilities;
27     using Honememo.Wptscs.Websites;
28
29     /// <summary>
30     /// MediaWiki用の翻訳支援処理実装クラスです。
31     /// </summary>
32     public class MediaWikiTranslator : Translator
33     {
34         #region private変数
35
36         /// <summary>
37         /// <see cref="Translator.ItemTable"/>用ロックオブジェクト。
38         /// </summary>
39         private LockObject itemTableLock = new LockObject();
40
41         #endregion
42
43         #region コンストラクタ
44
45         /// <summary>
46         /// MediaWikiでの翻訳支援処理を行うトランスレータを作成。
47         /// </summary>
48         /// <remarks>
49         /// 別途プロパティに必要なパラメータを設定する必要あり。
50         /// 通常は<see cref="Translator.Create"/>にて設定ファイルから作成する。
51         /// </remarks>
52         public MediaWikiTranslator()
53         {
54             // このクラス用のロガーと、デフォルトの確認処理としてメッセージダイアログ版を設定
55             this.Logger = new MediaWikiLogger();
56             this.IsContinueAtInterwikiExisted = this.IsContinueAtInterwikiExistedWithDialog;
57         }
58
59         #endregion
60
61         #region デリゲート
62
63         /// <summary>
64         /// 対象記事に言語間リンクが存在する場合の確認処理を表すデリゲート。
65         /// </summary>
66         /// <param name="interwiki">言語間リンク先記事。</param>
67         /// <returns>処理を続行する場合<c>true</c>。</returns>
68         public delegate bool IsContinueAtInterwikiExistedDelegate(string interwiki);
69
70         #endregion
71
72         #region プロパティ
73
74         /// <summary>
75         /// 翻訳元言語のサイト。
76         /// </summary>
77         public new MediaWiki From
78         {
79             get
80             {
81                 return base.From as MediaWiki;
82             }
83
84             set
85             {
86                 base.From = value;
87             }
88         }
89
90         /// <summary>
91         /// 翻訳先言語のサイト。
92         /// </summary>
93         public new MediaWiki To
94         {
95             get
96             {
97                 return base.To as MediaWiki;
98             }
99
100             set
101             {
102                 base.To = value;
103             }
104         }
105
106         /// <summary>
107         /// 対象記事に言語間リンクが存在する場合の確認処理。
108         /// </summary>
109         /// <remarks>確認を行わない場合<c>null</c>。</remarks>
110         public IsContinueAtInterwikiExistedDelegate IsContinueAtInterwikiExisted
111         {
112             get;
113             set;
114         }
115
116         #endregion
117
118         #region メイン処理メソッド
119
120         /// <summary>
121         /// 翻訳支援処理実行部の本体。
122         /// ※継承クラスでは、この関数に処理を実装すること
123         /// </summary>
124         /// <param name="name">記事名。</param>
125         /// <exception cref="ApplicationException">処理が中断された場合。中断の理由は<see cref="Translator.Logger"/>に出力される。</exception>
126         protected override void RunBody(string name)
127         {
128             // 対象記事を取得
129             MediaWikiPage article = this.GetTargetPage(name);
130             if (article == null)
131             {
132                 throw new ApplicationException("article is not found");
133             }
134
135             // 対象記事に言語間リンクが存在する場合、処理を継続するか確認
136             // ※ 言語間リンク取得中は、処理状態を解析中に変更
137             string interlanguage;
138             using (var sm = this.StatusManager.Switch(Resources.StatusParsing))
139             {
140                 interlanguage = article.GetInterlanguage(this.To.Language.Code);
141             }
142
143             if (!string.IsNullOrEmpty(interlanguage))
144             {
145                 // 確認処理の最中は処理時間をカウントしない(ダイアログ等を想定するため)
146                 this.Stopwatch.Stop();
147                 if (this.IsContinueAtInterwikiExisted != null && !this.IsContinueAtInterwikiExisted(interlanguage))
148                 {
149                     throw new ApplicationException("user canceled");
150                 }
151
152                 this.Stopwatch.Start();
153                 this.Logger.AddResponse(Resources.LogMessageTargetArticleHadInterWiki, interlanguage);
154             }
155
156             // 冒頭部を作成
157             this.Text += this.CreateOpening(article.Title);
158
159             // 言語間リンク・定型句の変換、実行中は処理状態を解析中に設定
160             this.Logger.AddSeparator();
161             this.Logger.AddResponse(Resources.LogMessageStartParseAndReplace);
162             using (var sm = this.StatusManager.Switch(Resources.StatusParsing))
163             {
164                 IElement element;
165                 using (MediaWikiParser parser = new MediaWikiParser(this.From))
166                 {
167                     element = parser.Parse(article.Text);
168                 }
169
170                 this.Text += this.ReplaceElement(element, article).ToString();
171             }
172
173             // 記事の末尾に新しい言語間リンクと、コメントを追記
174             this.Text += this.CreateEnding(article);
175
176             // ダウンロードされるテキストがLFなので、最後にクライアント環境に合わせた改行コードに変換
177             // ※ダウンロード時に変換するような仕組みが見つかれば、そちらを使う
178             //   その場合、上のように\nをべたに吐いている部分を修正する
179             this.Text = this.Text.Replace("\n", Environment.NewLine);
180         }
181
182         #endregion
183
184         #region 他のクラスの処理をこのクラスにあわせて拡張したメソッド
185
186         /// <summary>
187         /// ログ出力によるエラー処理を含んだページ取得処理。
188         /// </summary>
189         /// <param name="title">ページタイトル。</param>
190         /// <param name="page">取得したページ。ページが存在しない場合は <c>null</c> を返す。</param>
191         /// <returns>処理が成功した(404も含む)場合<c>true</c>、失敗した(通信エラーなど)の場合<c>false</c>。</returns>
192         /// <exception cref="ApplicationException"><see cref="Translator.CancellationPending"/>が<c>true</c>の場合。</exception>
193         /// <remarks>
194         /// 本メソッドは、大きく3パターンの動作を行う。
195         /// <list type="number">
196         /// <item><description>正常にページが取得できた → <c>true</c>でページを設定、ログ出力無し</description></item>
197         /// <item><description>404など想定内の例外でページが取得できなかった → <c>true</c>でページ無し、ログ出力無し</description></item>
198         /// <item><description>想定外の例外でページが取得できなかった → <c>false</c>でページ無し、ログ出力有り
199         ///                    or <c>ApplicationException</c>で処理中断(アプリケーション設定のIgnoreErrorによる)。</description></item>
200         /// </list>
201         /// また、実行中は処理状態をサーバー接続中に更新する。
202         /// 実行前後には終了要求のチェックも行う。
203         /// </remarks>
204         protected bool TryGetPage(string title, out MediaWikiPage page)
205         {
206             // &amp; &nbsp; 等の特殊文字をデコードして、親クラスのメソッドを呼び出し
207             Page p;
208             bool success = base.TryGetPage(WebUtility.HtmlDecode(title), out p);
209             page = p as MediaWikiPage;
210             return success;
211         }
212
213         #endregion
214
215         #region 冒頭/末尾ブロックの生成メソッド
216
217         /// <summary>
218         /// 変換後記事冒頭用の「'''日本語記事名'''([[英語|英]]: '''{{Lang|en|英語記事名}}''')」みたいなのを作成する。
219         /// </summary>
220         /// <param name="title">翻訳支援対象の記事名。</param>
221         /// <returns>冒頭部のテキスト。</returns>
222         protected virtual string CreateOpening(string title)
223         {
224             string langPart = string.Empty;
225             IElement langLink = this.GetLanguageLink();
226             if (langLink != null)
227             {
228                 langPart = langLink.ToString() + ": ";
229             }
230
231             string langBody = this.To.FormatLang(this.From.Language.Code, title);
232             if (string.IsNullOrEmpty(langBody))
233             {
234                 langBody = title;
235             }
236
237             StringBuilder b = new StringBuilder("'''xxx'''");
238             b.Append(this.To.Language.FormatBracket(langPart + "'''" + langBody + "'''"));
239             b.Append("\n\n");
240             return b.ToString();
241         }
242
243         /// <summary>
244         /// 変換後記事末尾用の新しい言語間リンクとコメントを作成する。
245         /// </summary>
246         /// <param name="page">翻訳支援対象の記事。</param>
247         /// <returns>末尾部のテキスト。</returns>
248         protected virtual string CreateEnding(MediaWikiPage page)
249         {
250             MediaWikiLink link = new MediaWikiLink();
251             link.Title = page.Title;
252             link.Interwiki = this.From.Language.Code;
253             return "\n\n" + link.ToString() + "\n" + string.Format(
254                 Resources.ArticleFooter,
255                 FormUtils.ApplicationName(),
256                 this.From.Language.Code,
257                 page.Title,
258                 page.Timestamp.HasValue ? page.Timestamp.Value.ToString("U") : string.Empty) + "\n";
259         }
260
261         #endregion
262
263         #region 要素の変換メソッド
264
265         /// <summary>
266         /// 渡されたページ要素の変換を行う。
267         /// </summary>
268         /// <param name="element">ページ要素。</param>
269         /// <param name="parent">ページ要素を取得した変換元記事。</param>
270         /// <returns>変換後のページ要素。</returns>
271         protected virtual IElement ReplaceElement(IElement element, MediaWikiPage parent)
272         {
273             // ユーザーからの中止要求をチェック
274             this.ThrowExceptionIfCanceled();
275
276             // 要素の型に応じて、必要な置き換えを行う
277             if (element is MediaWikiTemplate)
278             {
279                 // テンプレート
280                 return this.ReplaceTemplate((MediaWikiTemplate)element, parent);
281             }
282             else if (element is MediaWikiLink)
283             {
284                 // 内部リンク
285                 return this.ReplaceLink((MediaWikiLink)element, parent);
286             }
287             else if (element is MediaWikiHeading)
288             {
289                 // 見出し
290                 return this.ReplaceHeading((MediaWikiHeading)element, parent);
291             }
292             else if (element is MediaWikiVariable)
293             {
294                 // 変数
295                 return this.ReplaceVariable((MediaWikiVariable)element, parent);
296             }
297             else if (element is ListElement)
298             {
299                 // 値を格納する要素
300                 return this.ReplaceListElement((ListElement)element, parent);
301             }
302
303             // それ以外は、特に何もせず元の値を返す
304             return element;
305         }
306
307         /// <summary>
308         /// 内部リンクを解析し、変換先言語の記事へのリンクに変換する。
309         /// </summary>
310         /// <param name="link">変換元リンク。</param>
311         /// <param name="parent">ページ要素を取得した変換元記事。</param>
312         /// <returns>変換済みリンク。</returns>
313         protected virtual IElement ReplaceLink(MediaWikiLink link, MediaWikiPage parent)
314         {
315             // 記事名が存在しないor自記事内の別セクションへのリンクの場合、記事名絡みの処理を飛ばす
316             if (!this.IsSectionLink(link, parent.Title))
317             {
318                 // 記事名の種類に応じて処理を実施
319                 MediaWikiPage article = new MediaWikiPage(this.From, link.Title);
320
321                 bool child = false;
322                 if (link.IsSubpage())
323                 {
324                     // サブページ(子)の場合だけ後で記事名を復元するので記録
325                     child = link.Title.StartsWith("/");
326                     
327                     // ページ名を完全な形に補完
328                     string title = parent.Normalize(link);
329                     if (parent.Title.StartsWith(title))
330                     {
331                         // サブページ(親)の場合、変換してもしょうがないのでセクションだけチェックして終了
332                         if (!string.IsNullOrEmpty(link.Section))
333                         {
334                             link.Section = this.ReplaceLinkSection(link.Section);
335                             link.ParsedString = null;
336                         }
337
338                         return link;
339                     }
340
341                     link.Title = title;
342                 }
343                 else if (!string.IsNullOrEmpty(link.Interwiki))
344                 {
345                     // 言語間リンク・姉妹プロジェクトへのリンクの場合、変換対象外とする
346                     // ただし、先頭が : でない、翻訳先言語への言語間リンクだけは削除
347                     return this.ReplaceLinkInterwiki(link);
348                 }
349                 else if (article.IsFile())
350                 {
351                     // 画像の場合、名前空間を翻訳先言語の書式に変換、パラメータ部を再帰的に処理
352                     return this.ReplaceLinkFile(link, parent);
353                 }
354                 else if (article.IsCategory() && !link.IsColon)
355                 {
356                     // カテゴリで記事へのリンクでない([[:Category:xxx]]みたいなリンクでない)場合、
357                     // カテゴリ用の変換を実施
358                     return this.ReplaceLinkCategory(link);
359                 }
360
361                 // 専用処理の無い内部リンクの場合、言語間リンクによる置き換えを行う
362                 string interWiki = this.GetInterlanguage(link);
363                 if (interWiki == null)
364                 {
365                     // 記事自体が存在しない(赤リンク)場合、リンクはそのまま
366                 }
367                 else if (interWiki == string.Empty)
368                 {
369                     // 言語間リンクが存在しない場合、可能なら{{仮リンク}}に置き換え
370                     if (!string.IsNullOrEmpty(this.To.LinkInterwikiFormat))
371                     {
372                         return this.ReplaceLinkLinkInterwiki(link);
373                     }
374
375                     // 設定が無ければ [[:en:xxx]] みたいな形式に置換
376                     link.Title = this.From.Language.Code + ':' + link.Title;
377                     link.IsColon = true;
378                 }
379                 else if (child)
380                 {
381                     // 言語間リンクが存在してサブページ(子)の場合、親ページ部分を消す
382                     // TODO: 兄弟や叔父のパターンも対処したい(ややこしいので現状未対応)
383                     link.Title = StringUtils.Substring(interWiki, interWiki.IndexOf('/'));
384                 }
385                 else
386                 {
387                     // 普通に言語間リンクが存在する場合、記事名を置き換え
388                     link.Title = interWiki;
389                 }
390
391                 if (link.PipeTexts.Count == 0 && interWiki != null)
392                 {
393                     // 表示名が存在しない場合、元の名前を表示名に設定
394                     // 元の名前にはあればセクションも含む
395                     link.PipeTexts.Add(
396                         new TextElement(new MediaWikiLink { Title = article.Title, Section = link.Section }
397                             .GetLinkString()));
398                 }
399             }
400
401             // セクション部分([[#関連項目]]とか)を変換
402             if (!string.IsNullOrEmpty(link.Section))
403             {
404                 link.Section = this.ReplaceLinkSection(link.Section);
405             }
406
407             link.ParsedString = null;
408             return link;
409         }
410
411         /// <summary>
412         /// テンプレートを解析し、変換先言語の記事へのテンプレートに変換する。
413         /// </summary>
414         /// <param name="template">変換元テンプレート。</param>
415         /// <param name="parent">ページ要素を取得した変換元記事。</param>
416         /// <returns>変換済みテンプレート。</returns>
417         protected virtual IElement ReplaceTemplate(MediaWikiTemplate template, MediaWikiPage parent)
418         {
419             // システム変数({{PAGENAME}}とか)の場合は対象外
420             if (this.From.IsMagicWord(template.Title))
421             {
422                 return template;
423             }
424
425             // テンプレートは通常名前空間が省略されているので補完する
426             string filledTitle = this.FillTemplateName(template, parent);
427
428             // リンクを辿り、対象記事の言語間リンクを取得
429             string interWiki = this.GetInterlanguage(new MediaWikiTemplate(filledTitle));
430             if (interWiki == null)
431             {
432                 // 記事自体が存在しない(赤リンク)場合、リンクはそのまま
433                 return template;
434             }
435             else if (interWiki == string.Empty)
436             {
437                 // 言語間リンクが存在しない場合、[[:en:Template:xxx]]みたいな普通のリンクに置換
438                 // おまけで、元のテンプレートの状態をコメントでつける
439                 ListElement list = new ListElement();
440                 MediaWikiLink link = new MediaWikiLink();
441                 link.IsColon = true;
442                 link.Title = this.From.Language.Code + ':' + filledTitle;
443                 list.Add(link);
444                 XmlCommentElement comment = new XmlCommentElement();
445                 comment.Raw = ' ' + template.ToString() + ' ';
446                 list.Add(comment);
447                 return list;
448             }
449             else
450             {
451                 // 言語間リンクが存在する場合、そちらを指すように置換
452                 template.Title = interWiki;
453                 if (new MediaWikiPage(this.To, interWiki).IsTemplate())
454                 {
455                     // 言語間リンク先がテンプレートの場合、: より前の部分を削除
456                     template.Title = interWiki.Substring(interWiki.IndexOf(':') + 1);
457                 }
458
459                 // | の後に内部リンクやテンプレートが書かれている場合があるので、再帰的に処理する
460                 template.PipeTexts = this.ReplaceElements(template.PipeTexts, parent);
461                 template.ParsedString = null;
462                 return template;
463             }
464         }
465
466         /// <summary>
467         /// 指定された見出しに対して、対訳表による変換を行う。
468         /// </summary>
469         /// <param name="heading">見出し。</param>
470         /// <param name="parent">ページ要素を取得した変換元記事。</param>
471         /// <returns>変換後の見出し。</returns>
472         protected virtual IElement ReplaceHeading(MediaWikiHeading heading, MediaWikiPage parent)
473         {
474             // 変換元ログ出力
475             this.Logger.AddSource(heading);
476
477             // 定型句変換
478             StringBuilder oldText = new StringBuilder();
479             foreach (IElement e in heading)
480             {
481                 oldText.Append(e.ToString());
482             }
483
484             string newText = this.GetHeading(oldText.ToString().Trim());
485             if (newText != null)
486             {
487                 // 対訳表による変換が行えた場合、変換先をログ出力し処理終了
488                 heading.Clear();
489                 heading.ParsedString = null;
490                 heading.Add(new XmlTextElement(newText));
491                 this.Logger.AddDestination(heading);
492                 return heading;
493             }
494
495             // 対訳表に存在しない場合、内部要素を通常の変換で再帰的に処理
496             return this.ReplaceListElement(heading, parent);
497         }
498
499         /// <summary>
500         /// 変数要素を再帰的に解析し、変換先言語の記事への要素に変換する。
501         /// </summary>
502         /// <param name="variable">変換元変数要素。</param>
503         /// <param name="parent">ページ要素を取得した変換元記事。</param>
504         /// <returns>変換済み変数要素。</returns>
505         protected virtual IElement ReplaceVariable(MediaWikiVariable variable, MediaWikiPage parent)
506         {
507             // 変数、これ自体は処理しないが、再帰的に探索
508             if (variable.Value != null)
509             {
510                 string old = variable.Value.ToString();
511                 variable.Value = this.ReplaceElement(variable.Value, parent);
512                 if (variable.Value.ToString() != old)
513                 {
514                     // 内部要素が変化した(置き換えが行われた)場合、変換前のテキストを破棄
515                     variable.ParsedString = null;
516                 }
517             }
518
519             return variable;
520         }
521
522         /// <summary>
523         /// 要素を再帰的に解析し、変換先言語の記事への要素に変換する。
524         /// </summary>
525         /// <param name="listElement">変換元要素。</param>
526         /// <param name="parent">ページ要素を取得した変換元記事。</param>
527         /// <returns>変換済み要素。</returns>
528         protected virtual IElement ReplaceListElement(ListElement listElement, MediaWikiPage parent)
529         {
530             // 値を格納する要素、これ自体は処理しないが、再帰的に探索
531             for (int i = 0; i < listElement.Count; i++)
532             {
533                 string old = listElement[i].ToString();
534                 listElement[i] = this.ReplaceElement(listElement[i], parent);
535                 if (listElement[i].ToString() != old)
536                 {
537                     // 内部要素が変化した(置き換えが行われた)場合、変換前のテキストを破棄
538                     listElement.ParsedString = null;
539                 }
540             }
541
542             return listElement;
543         }
544
545         #endregion
546
547         #region 対訳表アクセスメソッド
548
549         /// <summary>
550         /// 対訳表に指定された記事名の情報が登録されているか?
551         /// </summary>
552         /// <param name="title">記事名。</param>
553         /// <returns>指定した記事の情報が登録されている場合<c>true</c>。</returns>
554         /// <remarks>複数スレッドからのアクセスに対応する。また項目の対訳表が無い場合も動作する。</remarks>
555         protected bool ContainsAtItemTable(string title)
556         {
557             if (this.ItemTable == null)
558             {
559                 return false;
560             }
561
562             // 以下マルチスレッドで使われることも想定して対訳表へのアクセス時はロック
563             // ※ 対訳表へのアクセス時は記事名をデコードしておく
564             string decodedTitle = WebUtility.HtmlDecode(title);
565             lock (this.itemTableLock.GetObject(decodedTitle.ToLower()))
566             {
567                 // 対訳表へのキーとしてはHTMLデコードした記事名を使用する
568                 return this.ItemTable.ContainsKey(decodedTitle);
569             }
570         }
571         
572         /// <summary>
573         /// 指定されたコードでの見出しに相当する、別の言語での見出しを取得。
574         /// </summary>
575         /// <param name="heading">翻訳元言語での見出し。</param>
576         /// <returns>翻訳先言語での見出し。値が存在しない場合は<c>null</c>。</returns>
577         /// <remarks>見出しの対訳表が無い場合も動作する。</remarks>
578         protected string GetHeading(string heading)
579         {
580             if (this.HeadingTable == null)
581             {
582                 return null;
583             }
584
585             return this.HeadingTable.GetWord(heading);
586         }
587
588         #endregion
589
590         #region 言語間リンク取得メソッド
591         
592         /// <summary>
593         /// ロガーに取得結果を出力しつつ、指定された要素の記事の翻訳先言語への言語間リンクを返す。
594         /// </summary>
595         /// <param name="element">内部リンク要素。</param>
596         /// <returns>言語間リンク先の記事名。見つからない場合は空。ページ自体が存在しない場合は<c>null</c>。</returns>
597         /// <remarks>取得処理では対訳表を使用する。また新たな取得結果は対訳表に追加する。</remarks>
598         protected string GetInterlanguage(MediaWikiLink element)
599         {
600             // 翻訳元をロガーに出力
601             this.Logger.AddSource(element);
602             string title = element.Title;
603             TranslationDictionary.Item item;
604             if (this.ItemTable == null)
605             {
606                 // 対訳表が指定されていない場合は、使わずに言語間リンクを探索して終了
607                 return this.GetInterlanguageWithCreateCache(title, out item);
608             }
609
610             // 対訳表を使用して言語間リンクを探索。
611             // 以下マルチスレッドで使われることも想定して対訳表へのアクセス時はロック(記事名単位)。
612             // また、対訳表へのアクセス時は記事名をデコードしておく。
613             string decodedTitle = WebUtility.HtmlDecode(title);
614             lock (this.itemTableLock.GetObject(decodedTitle.ToLower()))
615             {
616                 if (this.ItemTable.TryGetValue(decodedTitle, out item))
617                 {
618                     // 存在する場合はその値を使用
619                     if (!string.IsNullOrWhiteSpace(item.Alias))
620                     {
621                         // リダイレクトがあれば、そのメッセージも表示
622                         this.Logger.AddAlias(new MediaWikiLink(item.Alias));
623                     }
624
625                     if (!string.IsNullOrEmpty(item.Word))
626                     {
627                         this.Logger.AddDestination(new MediaWikiLink(item.Word), true);
628                         return item.Word;
629                     }
630                     else
631                     {
632                         this.Logger.AddDestination(new TextElement(Resources.LogMessageInterWikiNotFound), true);
633                         return string.Empty;
634                     }
635                 }
636
637                 // 対訳表に存在しない場合は、普通に取得し表に記録
638                 // ※ こちらは内部でデコードしているためデコードした記事名を渡してはならない
639                 string interlanguage = this.GetInterlanguageWithCreateCache(title, out item);
640                 if (interlanguage != null)
641                 {
642                     // ページ自体が存在しない場合を除き、結果を対訳表に登録
643                     // ※ キャッシュとしては登録すべきかもしれないが、一応"対訳表"であるので
644                     this.ItemTable[decodedTitle] = item;
645                 }
646
647                 return interlanguage;
648             }
649         }
650
651         /// <summary>
652         /// ロガーに取得結果を出力しつつ、指定された記事の翻訳先言語への言語間リンクを返す。
653         /// キャッシュ用の処理結果情報も出力する。
654         /// </summary>
655         /// <param name="title">記事名。</param>
656         /// <param name="item">キャッシュ用の処理結果情報。</param>
657         /// <returns>言語間リンク先の記事名。見つからない場合は空。ページ自体が存在しない場合は<c>null</c>。</returns>
658         private string GetInterlanguageWithCreateCache(string title, out TranslationDictionary.Item item)
659         {
660             // 記事名から記事を探索
661             item = new TranslationDictionary.Item { Timestamp = DateTime.UtcNow };
662             MediaWikiPage page = this.GetDestinationPage(title);
663             if (page == null)
664             {
665                 // ページ自体が存在しない場合はnull
666                 return null;
667             }
668
669             if (page.IsRedirect())
670             {
671                 // リダイレクトの場合、リダイレクトである旨出力
672                 this.Logger.AddAlias(new MediaWikiLink(page.Title));
673                 item.Alias = page.Title;
674             }
675
676             // 記事があればその言語間リンクを取得
677             string interlanguage = page.GetInterlanguage(this.To.Language.Code);
678             if (!string.IsNullOrEmpty(interlanguage))
679             {
680                 item.Word = interlanguage;
681                 MediaWikiLink link = new MediaWikiLink(interlanguage);
682                 link.Interwiki = this.To.Language.Code;
683                 this.Logger.AddDestination(link);
684             }
685             else
686             {
687                 // 見つからない場合は空
688                 item.Word = string.Empty;
689                 this.Logger.AddDestination(new TextElement(Resources.LogMessageInterWikiNotFound));
690             }
691
692             return item.Word;
693         }
694
695         /// <summary>
696         /// 変換先の記事を取得する。
697         /// </summary>
698         /// <param name="title">ページタイトル。</param>
699         /// <returns>取得したページ。ページが存在しない場合は <c>null</c> を返す。</returns>
700         /// <remarks>記事が無い場合、通信エラーなど例外が発生した場合は、エラーログを出力する。</remarks>
701         private MediaWikiPage GetDestinationPage(string title)
702         {
703             MediaWikiPage page;
704             if (this.TryGetPage(title, out page) && page == null)
705             {
706                 // 記事が存在しない場合だけ、変換先に「記事無し」を出力
707                 // ※ エラー時のログはTryGetPageが自動的に出力
708                 this.Logger.AddDestination(new TextElement(Resources.LogMessageLinkArticleNotFound));
709             }
710
711             return page;
712         }
713
714         #endregion
715
716         #region 要素の変換関連その他メソッド
717
718         /// <summary>
719         /// 同記事内の別のセクションを指すリンク([[#関連項目]]とか[[自記事#関連項目]]とか)か?
720         /// </summary>
721         /// <param name="link">判定する内部リンク。</param>
722         /// <param name="parent">内部リンクがあった記事。</param>
723         /// <returns>セクション部分のみ変換済みリンク。</returns>
724         private bool IsSectionLink(MediaWikiLink link, string parent)
725         {
726             // 記事名が指定されていない、または記事名が自分の記事名で
727             // 言語コード等も特に無く、かつセクションが指定されている場合
728             // (記事名もセクションも指定されていない・・・というケースもありえるが、
729             //   その場合他に指定できるものも思いつかないので通す)
730             return string.IsNullOrEmpty(link.Title)
731                 || (link.Title == parent && string.IsNullOrEmpty(link.Interwiki) && !string.IsNullOrEmpty(link.Section));
732         }
733
734         /// <summary>
735         /// 内部リンクのセクション部分([[#関連項目]]とか)の定型句変換を行う。
736         /// </summary>
737         /// <param name="section">セクション文字列。</param>
738         /// <returns>セクション部分のみ変換済みリンク。</returns>
739         private string ReplaceLinkSection(string section)
740         {
741             // セクションが指定されている場合、定型句変換を通す
742             string heading = this.GetHeading(section);
743             return heading != null ? heading : section;
744         }
745
746         /// <summary>
747         /// 言語間リンク指定の内部リンクを解析し、不要であれば削除する。
748         /// </summary>
749         /// <param name="link">変換元言語間リンク。</param>
750         /// <returns>変換済み言語間リンク。</returns>
751         private IElement ReplaceLinkInterwiki(MediaWikiLink link)
752         {
753             // 言語間リンク・姉妹プロジェクトへのリンクの場合、変換対象外とする
754             // ただし、先頭が : でない、翻訳先言語への言語間リンクだけは削除
755             if (!link.IsColon && link.Interwiki == this.To.Language.Code)
756             {
757                 return new TextElement();
758             }
759
760             return link;
761         }
762
763         /// <summary>
764         /// カテゴリ指定の内部リンクを解析し、変換先言語のカテゴリへのリンクに変換する。
765         /// </summary>
766         /// <param name="link">変換元カテゴリ。</param>
767         /// <returns>変換済みカテゴリ。</returns>
768         private IElement ReplaceLinkCategory(MediaWikiLink link)
769         {
770             // リンクを辿り、対象記事の言語間リンクを取得
771             string interWiki = this.GetInterlanguage(link);
772             if (interWiki == null)
773             {
774                 // 記事自体が存在しない(赤リンク)場合、リンクはそのまま
775                 return link;
776             }
777             else if (interWiki == string.Empty)
778             {
779                 // 言語間リンクが存在しない場合、コメントで元の文字列を保存した後
780                 // [[:en:xxx]]みたいな形式に置換。また | 以降は削除する
781                 XmlCommentElement comment = new XmlCommentElement();
782                 comment.Raw = ' ' + link.ToString() + ' ';
783
784                 link.Title = this.From.Language.Code + ':' + link.Title;
785                 link.IsColon = true;
786                 link.PipeTexts.Clear();
787                 link.ParsedString = null;
788
789                 ListElement list = new ListElement();
790                 list.Add(link);
791                 list.Add(comment);
792                 return list;
793             }
794             else
795             {
796                 // 普通に言語間リンクが存在する場合、記事名を置き換え
797                 link.Title = interWiki;
798                 link.ParsedString = null;
799                 return link;
800             }
801         }
802
803         /// <summary>
804         /// ファイル指定の内部リンクを解析し、変換先言語で参照可能なファイルへのリンクに変換する。
805         /// </summary>
806         /// <param name="link">変換元リンク。</param>
807         /// <param name="parent">ページ要素を取得した変換元記事。</param>
808         /// <returns>変換済みリンク。</returns>
809         private IElement ReplaceLinkFile(MediaWikiLink link, MediaWikiPage parent)
810         {
811             // 名前空間を翻訳先言語の書式に変換、またパラメータ部を再帰的に処理
812             link.Title = this.ReplaceLinkNamespace(link.Title, this.To.FileNamespace);
813             link.PipeTexts = this.ReplaceElements(link.PipeTexts, parent);
814             link.ParsedString = null;
815             return link;
816         }
817
818         /// <summary>
819         /// 記事名のうち名前空間部分の変換先言語への変換を行う。
820         /// </summary>
821         /// <param name="title">変換元記事名。</param>
822         /// <param name="id">名前空間のID。</param>
823         /// <returns>変換済み記事名。</returns>
824         private string ReplaceLinkNamespace(string title, int id)
825         {
826             // 名前空間だけ翻訳先言語の書式に変換
827             IgnoreCaseSet names;
828             if (!this.To.Namespaces.TryGetValue(id, out names))
829             {
830                 // 翻訳先言語に相当する名前空間が無い場合、何もしない
831                 return title;
832             }
833
834             // 記事名の名前空間部分を置き換えて返す
835             return names.FirstOrDefault() + title.Substring(title.IndexOf(':'));
836         }
837
838         /// <summary>
839         /// 内部リンクを他言語版への{{仮リンク}}等に変換する。。
840         /// </summary>
841         /// <param name="link">変換元言語間リンク。</param>
842         /// <returns>変換済み言語間リンク。</returns>
843         private IElement ReplaceLinkLinkInterwiki(MediaWikiLink link)
844         {
845             // 仮リンクにはセクションの指定が可能なので、存在する場合付加する
846             // ※ 渡されたlinkをそのまま使わないのは、余計なゴミが含まれる可能性があるため
847             MediaWikiLink title = new MediaWikiLink { Title = link.Title, Section = link.Section };
848             string langTitle = title.GetLinkString();
849             if (!string.IsNullOrEmpty(title.Section))
850             {
851                 // 変換先言語版のセクションは、セクションの変換を通したものにする
852                 title.Section = this.ReplaceLinkSection(title.Section);
853             }
854
855             // 表示名は、設定されていればその値を、なければ変換元言語の記事名を使用
856             string label = langTitle;
857             if (link.PipeTexts.Count > 0)
858             {
859                 label = link.PipeTexts.Last().ToString();
860             }
861
862             // 書式化した文字列を返す
863             // ※ {{仮リンク}}を想定しているが、やろうと思えば何でもできるのでテキストで処理
864             return new TextElement(this.To.FormatLinkInterwiki(title.GetLinkString(), this.From.Language.Code, langTitle, label));
865         }
866
867         /// <summary>
868         /// 渡された要素リストに対して<see cref="ReplaceElement"/>による変換を行う。
869         /// </summary>
870         /// <param name="elements">変換元要素リスト。</param>
871         /// <param name="parent">ページ要素を取得した変換元記事。</param>
872         /// <returns>変換済み要素リスト。</returns>
873         private IList<IElement> ReplaceElements(IList<IElement> elements, MediaWikiPage parent)
874         {
875             if (elements == null)
876             {
877                 return null;
878             }
879
880             IList<IElement> result = new List<IElement>();
881             foreach (IElement e in elements)
882             {
883                 result.Add(this.ReplaceElement(e, parent));
884             }
885
886             return result;
887         }
888
889         /// <summary>
890         /// テンプレート名に必要に応じて名前空間を補完する。
891         /// </summary>
892         /// <param name="template">テンプレート。</param>
893         /// <param name="parent">ページ要素を取得した変換元記事。</param>
894         /// <returns>補完済みのテンプレート名。</returns>
895         private string FillTemplateName(MediaWikiTemplate template, MediaWikiPage parent)
896         {
897             // プレフィックスが付いた記事名を作成
898             string filledTitle = parent.Normalize(template);
899             if (filledTitle == template.Title || template.IsSubpage())
900             {
901                 // 補完が不要な場合、またはサブページだった場合、ここで終了
902                 return filledTitle;
903             }
904
905             // プレフィックスが付いた記事名が実際に存在するかを確認
906             // ※ 不要かもしれないが、マジックワードの漏れ等の誤検出を減らしたいので
907             if (this.ContainsAtItemTable(filledTitle))
908             {
909                 // 対訳表に記事名が確認されている場合、既知の名前として確定
910                 return filledTitle;
911             }
912
913             // 実際に頭にプレフィックスを付けた記事名でアクセスし、存在するかをチェック
914             // TODO: GetInterWikiの方とあわせ、テンプレートでは2度GetPageが呼ばれている。可能であれば共通化する
915             MediaWikiPage page = null;
916             try
917             {
918                 // 記事が存在する場合、プレフィックスをつけた名前を使用
919                 page = this.From.GetPage(WebUtility.HtmlDecode(filledTitle)) as MediaWikiPage;
920                 return filledTitle;
921             }
922             catch (FileNotFoundException)
923             {
924                 // 記事が存在しない場合、元のページ名を使用
925                 return template.Title;
926             }
927             catch (Exception e)
928             {
929                 // 想定外の例外が発生した場合
930                 if (!Settings.Default.IgnoreError)
931                 {
932                     // エラーを無視しない場合、ここで翻訳支援処理を中断する
933                     this.Logger.AddError(e);
934                     throw new ApplicationException(e.Message, e);
935                 }
936
937                 // 続行する場合は、とりあえずプレフィックスをつけた名前で処理
938                 this.Logger.AddResponse(Resources.LogMessageTemplateNameUnidentified, template.Title, filledTitle, e.Message);
939                 return filledTitle;
940             }
941         }
942
943         #endregion
944
945         #region その他内部処理用メソッド
946
947         /// <summary>
948         /// 翻訳支援対象のページを取得。
949         /// </summary>
950         /// <param name="title">翻訳支援対象の記事名。</param>
951         /// <returns>取得したページ。取得失敗時は<c>null</c>。</returns>
952         /// <remarks>
953         /// ここで取得した記事のURIを、以後の翻訳支援処理で使用するRefererとして登録
954         /// (ここで処理しているのは、リダイレクトの場合のリダイレクト先への
955         /// アクセス時にもRefererを入れたかったから。
956         /// リダイレクトの場合は、最終的には転送先ページのURIとなる)。
957         /// </remarks>
958         private MediaWikiPage GetTargetPage(string title)
959         {
960             // 指定された記事をWikipediaから取得、リダイレクトの場合その先まで探索
961             // ※ この処理ではキャッシュは使用しない。
962             this.Logger.AddMessage(Resources.LogMessageGetTargetArticle, this.From.Location, title);
963             MediaWikiPage page;
964             if (!this.TryGetPage(title, out page))
965             {
966                 // 取得失敗時はそのまま終了
967                 return null;
968             }
969             else if (page == null)
970             {
971                 // 記事が存在しない場合、メッセージを出力して終了
972                 this.Logger.AddResponse(Resources.LogMessageTargetArticleNotFound);
973                 return null;
974             }
975
976             if (page.IsRedirect())
977             {
978                 // リダイレクトであれば、その旨メッセージを表示
979                 this.Logger.AddResponse(Resources.LogMessageRedirect
980                     + " " + new MediaWikiLink(page.Title).ToString());
981             }
982
983             // ページ本文にアクセスして遅延読み込みを実行させる
984             if (!this.TryLoadPage(page))
985             {
986                 // 読み込み失敗時はそのまま終了
987                 return null;
988             }
989
990             // 取得した記事のURIを以後のアクセスで用いるRefererとして登録
991             this.From.WebProxy.Referer = page.Uri.AbsoluteUri;
992             this.To.WebProxy.Referer = page.Uri.AbsoluteUri;
993
994             return page;
995         }
996
997         /// <summary>
998         /// 翻訳支援対象のページの本文・タイムスタンプを読み込み。
999         /// </summary>
1000         /// <param name="page">翻訳支援対象のページ。</param>
1001         /// <returns>読み込み成功の場合<c>true</c>、失敗した(通信エラーなど)の場合<c>false</c>。</returns>
1002         private bool TryLoadPage(MediaWikiPage page)
1003         {
1004             // ページ本文にアクセスして遅延読み込みを実行させる
1005             try
1006             {
1007                 string dummy = page.Text;
1008             }
1009             catch (Exception e)
1010             {
1011                 // その他例外の場合、エラー情報を出力
1012                 this.Logger.AddError(e);
1013                 return false;
1014             }
1015
1016             return true;
1017         }
1018
1019         /// <summary>
1020         /// 指定した言語での言語名称を [[言語名称|略称]]の内部リンクで取得。
1021         /// </summary>
1022         /// <returns>
1023         /// [[言語名称|略称]]の内部リンク。登録されていない場合<c>null</c>。
1024         /// サーバーにそうした記事が存在しない場合、リンクではなく言語名称or略称の文字列を返す。
1025         /// </returns>
1026         private IElement GetLanguageLink()
1027         {
1028             // 言語情報を取得
1029             Language.LanguageName name;
1030             if (!this.From.Language.Names.TryGetValue(this.To.Language.Code, out name))
1031             {
1032                 return null;
1033             }
1034
1035             // 略称を取得
1036             IElement shortName = null;
1037             if (!string.IsNullOrEmpty(name.ShortName))
1038             {
1039                 shortName = new TextElement(name.ShortName);
1040             }
1041
1042             if (this.To.HasLanguagePage)
1043             {
1044                 // サーバーにこの言語の記事が存在することが期待される場合、
1045                 // 内部リンクとして返す
1046                 MediaWikiLink link = new MediaWikiLink(name.Name);
1047                 if (shortName != null)
1048                 {
1049                     link.PipeTexts.Add(shortName);
1050                 }
1051
1052                 return link;
1053             }
1054             else if (shortName != null)
1055             {
1056                 // 存在しない場合、まずあれば略称を返す
1057                 return shortName;
1058             }
1059             else
1060             {
1061                 // 無ければ言語名を返す
1062                 return new TextElement(name.Name);
1063             }
1064         }
1065
1066         /// <summary>
1067         /// 対象記事に言語間リンクが存在する場合にメッセージダイアログでユーザーに確認する処理。
1068         /// </summary>
1069         /// <param name="interwiki">言語間リンク先記事。</param>
1070         /// <returns>処理を続行する場合<c>true</c>。</returns>
1071         private bool IsContinueAtInterwikiExistedWithDialog(string interwiki)
1072         {
1073             // 確認ダイアログを表示
1074             if (MessageBox.Show(
1075                         string.Format(Resources.QuestionMessageArticleExisted, interwiki),
1076                         Resources.QuestionTitle,
1077                         MessageBoxButtons.YesNo,
1078                         MessageBoxIcon.Question)
1079                    == DialogResult.No)
1080             {
1081                 // 中断の場合、同じメッセージをログにも表示
1082                 this.Logger.AddSeparator();
1083                 this.Logger.AddMessage(Resources.QuestionMessageArticleExisted, interwiki);
1084                 return false;
1085             }
1086
1087             return true;
1088         }
1089
1090         #endregion
1091     }
1092 }