ATL オープンラボ NLP 2015
•
6 gefällt mir•8,842 views
Slides used in ATL Open Lab 2015 April
Empfohlen
Weitere ähnliche Inhalte
Ähnlich wie ATL オープンラボ NLP 2015
Ähnlich wie ATL オープンラボ NLP 2015 (20)
Mehr von Recruit Technologies
Mehr von Recruit Technologies (20)
ATL オープンラボ NLP 2015
- 2. 自己紹介 名前：伊藤敬彦 Twitter アカウント: takahi_i 所属：株式会社リクルートテ クノロジーズ ATL 工学博士（専門分野：データ マイニング、グラフ、検索） 2
- 5. 背景: ソフトウェアの開発 環境 ソフトウェア開発では品質検査ツールを利用する ツール：CheckStyle [Burn]、FindBugs [Rutar ら] 等… コードが規約に従っているか自動で検査する： 行長、変数名、ファイル長、潜在的なバグ … ➔ 品質検査ツールは開発効率のアップ、品質向上に 寄与 5
- 6. 背景: 文書の執筆環境 文書：マニュアル、論文、仕様書 文書にも品質検査ツールは存在する JustRight! [JustSystem]、Tomarigi [又平 ら]、 ChantKun[笠原] しかし問題がある 6
- 7. 背景: 既存の品質検査ツー ルの問題点 有料 規約にあわせた設定ができない，設定を共有できない 日本語以外の言語（英語）で使えない ソースが公開されていない マークアップ言語に対応してない ➔ 問題を解決するため RedPen を開発した 7
- 10. RedPen の特徴 柔軟な設定 言語非依存 複数のフォーマットに対応：Markdown、Textile 拡張性 ソースを公開している（簡単に機能を追加できる） 研究成果を取り込むのが容易 10
- 12. 例：RedPen の設定 12 <validators> <validator name= SentenceLength" /> <validator name="InvalidCharacter" /> <validator name="KatakanaSpellCheck" /> <validator name= SectionLength /> </validators> 文長 不正な文字 スペルチェック
- 13. コマンド redpen コマンドを利用して実行する 入力フォーマット: Markdown、Textile、 PlainText 13 $ redpen -c 設定ファイル 入力文書
- 14. 機能追加 抽象クラス Validator を継承するクラスを定義する 記述言語は Java やること：一つのメソッドを実装するだけ validate(Sentence input, ValidationError errors) 雑多なことは RedPen がやってくれる マークアップデータ (Markdown) のパース、文の切り出 し 14
- 15. 例：文長検査 public validate(Sentence sentence, List<ValidationError> errors) { if (sentence.content.length() > 100) { errors.add(createValidationError(sentence)); } } 15 実装された関数は文書内すべ ての文に自動で適応される
- 16. 例：文長検査（実装詳細） public validate(Sentence sentence, List<ValidationError> errors) { if (sentence.content.length() > 100) { errors.add(createValidationError(sentence)); } } 16 文長が長い（100 文字以上） エラーを追加
- 17. 最近の進 :サーバ機能の 強化 REST API の強化：ドキュメントと設定ペアを 受け取る API を整備 今までは言語ごとに固定の設定だった 新しい API は設定をユーザごとに異なる設定 で文書を検査 17
- 18. サーバ URL：http://redpen.herokuapp.com/ 編集も可能 注：RedPen サーバは Heroku ボタンで立ち上がる 18
- 21. RedPen Python クライ アント Heroku 上の RedPen サーバに設定と、文書を投げる URL：https://github.com/takahi-i/redpen-ci- sample ポイント： 100行未満のスクリプト Java & RedPen インストールしなくても大丈夫！ 21
- 22. さらに 継続的インテグレーションサービス (Travisなど) の設定を加えると。。。 GitHub で保持されている文書に対する変更 （Pull Request）を RedPenクライアントで自 動チェックできる https://github.com/takahi-i/redpen-ci- sample/pulls 22
- 23. 最近進 ：そのほか 設定ファイルの自動ロード パラメタで指定しなくてもカレントディレクト リにある redpen-conf.xml を自動でロードす る。 機能追加：ですます、である調の混在 23
- 25. NLP 研究者の皆様へ 文書の検査関係の研究成果のアウトプット先とし てご利用いただければと考えております。 公開しても良いものであれば、Pull Request 随 時受け付けております。 25
- 29. 背景：パン田一郎 リクルートジョブズが運 営する『fromA navi』 のキャラクタ 最近 LINE の公式アカウ ントとなる 友人数：約1350万人 ATL が対話部分を担当 29
- 30. 背景：LINE アカウント パン田一郎 対話を通じて三つの機能を提供する 機能① 雑談 機能② バイト探し 機能③ バイト生活サポート シフト通知、天気 30
- 31. デモ 天気 雑談 31
- 59. 59 戦略：頻度上位のメッセージに対する返信だけ 工夫する 応答文のバリエーションを増やす 上位頻度の入力メッセージだけは文脈を取り 入れた応答をする 検証できてません。。。orz 対話システム改善案
- 61. Pepper にATL対話シ ステムを導入 パン田一郎で利用した対話エンジンを拡張 拡張 ユーザのプロファイルに合わせて対話を変化させる 対話対象のプロファイリングは Papper のAPIを 使用 年齢、性別（対応予定） 61