Diese Präsentation wurde erfolgreich gemeldet.
Wir verwenden Ihre LinkedIn Profilangaben und Informationen zu Ihren Aktivitäten, um Anzeigen zu personalisieren und Ihnen relevantere Inhalte anzuzeigen. Sie können Ihre Anzeigeneinstellungen jederzeit ändern.

実行計画についてのよくある誤解 ~Oracle Database編~ #dbltokyo 5

7.183 Aufrufe

Veröffentlicht am

9月19日 Database Lounge Tokyo #5 のLT発表資料です。
https://database-lounge-tokyo.connpass.com/event/64606

9月7日 db tech showcase 2017 tokyoの「Oracleの実行計画を読んでみよう!」の内容を、切り口を変えて再構成した内容になっています。https://www.slideshare.net/ryotawatabe/20170907-dbts2017-tokyo-cosol-how-to-read-oracle-execution-plan

Veröffentlicht in: Daten & Analysen
  • (Unlimited)....ACCESS WEBSITE Over for All Ebooks ................ accessibility Books Library allowing access to top content, including thousands of title from favorite author, plus the ability to read or download a huge selection of books for your pc or smartphone within minutes ......................................................................................................................... DOWNLOAD FULL PDF EBOOK here { http://bit.ly/2m6jJ5M } ......................................................................................................................... Download Full EPUB Ebook here { http://bit.ly/2m6jJ5M } ......................................................................................................................... Download Full PDF EBOOK here { http://bit.ly/2m6jJ5M }
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier
  • accessibility Books Library allowing access to top content, including thousands of title from favorite author, plus the ability to read or download a huge selection of books for your pc or smartphone within minutes.........ACCESS WEBSITE Over for All Ebooks ..... (Unlimited) ......................................................................................................................... Download FULL PDF EBOOK here { http://bit.ly/2m6jJ5M } .........................................................................................................................
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier
  • DOWNLOAD THI5 BOOKS INTO AVAILABLE FORMAT (Unlimited) ......................................................................................................................... ......................................................................................................................... Download Full PDF EBOOK here { http://bit.ly/2m6jJ5M } ......................................................................................................................... Download Full EPUB Ebook here { http://bit.ly/2m6jJ5M } ......................................................................................................................... ACCESS WEBSITE for All Ebooks ......................................................................................................................... Download Full PDF EBOOK here { http://bit.ly/2m6jJ5M } ......................................................................................................................... Download EPUB Ebook here { http://bit.ly/2m6jJ5M } ......................................................................................................................... Download doc Ebook here { http://bit.ly/2m6jJ5M } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier
  • DOWNLOAD THIS BOOKS INTO AVAILABLE FORMAT (Unlimited) ......................................................................................................................... ......................................................................................................................... Download Full PDF EBOOK here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download Full EPUB Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... ACCESS WEBSITE for All Ebooks ......................................................................................................................... Download Full PDF EBOOK here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download EPUB Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download doc Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier
  • DOWNLOAD THIS BOOKS INTO AVAILABLE FORMAT (Unlimited) ......................................................................................................................... ......................................................................................................................... Download Full PDF EBOOK here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download Full EPUB Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... ACCESS WEBSITE for All Ebooks ......................................................................................................................... Download Full PDF EBOOK here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download EPUB Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... Download doc Ebook here { https://tinyurl.com/yyxo9sk7 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier

実行計画についてのよくある誤解 ~Oracle Database編~ #dbltokyo 5

  1. 1. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 1Copyright © 2017 CO-Sol Inc. All Rights Reserved. 2017年9月19日 株式会社コーソル 渡部 亮太 実行計画についてのよくある誤解 ~Oracle Database編~
  2. 2. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 2 本セミナーについて • Oracle Databaseを主に想定して、実行計画に関する 「よくある誤解」を題材にして、実行計画について説明します。 – Oracle Database以外のRDBMSの実行計画の扱いについて考えてみ る契機にもなるかもしれません。 • 9月7日 db tech showcase 2017 tokyoの「Oracleの実行計画 を読んでみよう!」の内容を、切り口を変えて再構成した内容 になっています。 – https://www.slideshare.net/ryotawatabe/20170907-dbts2017- tokyo-cosol-how-to-read-oracle-execution-plan – 聴講済みのかたはごめんなさい m(_ _)m – コマンドなどは本セッションでの説明を割愛しているため、お知りに なりたいかたは、 「Oracleの実行計画を読んでみよう!」の資料を 参照してくださいませ
  3. 3. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 3 自己紹介+所属会社紹介 • 渡部 亮太(わたべ りょうた) – JPOUG 共同創設者、ボードメンバー – 日本に8名しかいないOracle ACEの一人 – 著書「Oracleの基本」9月22日発売! 「プロとしてのOracleアーキテクチャ入門[第2版]」 – ブログ「コーソルDatabaseエンジニアのBlog」 http://cosol.jp/techdb/ • 株式会社コーソル – 「CO-Solutions=共に解決する」の理念のもと、Oracle技術に特 化した事業を展開中。心あるサービスの提供とデータベースエン ジニアの育成に注力している – 社員数: 132名 (2017年9月時点) – ORACLE MASTER Platinum 11g 取得者数 50名 ORACLE MASTER Platinum 12c 取得者数 34名 取得者数 日本 No.1 (おそらくWorld WideでNo.1) http://www.oracle.com/jp/education/omdata-171891-ja.html
  4. 4. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 4 [宣伝] 書籍「Oracleの基本」9月22日発売! • データベース、Oracleがわからない 人が、Oracleおよびその利用・運用 について理解するのに最適(だと思 う)な入門書 • お近くに、IT基礎研修を終えた新人 エンジニア、データベースを知らな いのにOracleを使うことになったエ ンジニアがいらっしゃったら是非!
  5. 5. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 5 [コーソル紹介] 技術者育成の取り組み ORACLE MASTER Platinum取得者数 国内No1! 充実した教育+支援制度で技術者育成に力を入れています!
  6. 6. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 6 製品サービス [コーソル紹介] 弊社ソリューションについて 独自のサービスと製品を掛け合わせ、データベースの運用を 強力に支援致します。 &
  7. 7. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 7 [JPOUG] 11月17日(金) イベントのお知らせ • Japan Oracle User Groupで、 Dockerをテーマにした イベントをやります! – 11月17日(金) 19:00- (開始時間は仮) @ オラクル青山センター • Docker の利活用やTips、興味深い技術要素などについて 15分間 語ってくれる方を募集しています! 是非 https://goo.gl/forms/BNWRso2ZC9nJ1paS2 よ りご応募くださいませ。
  8. 8. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 8 本セミナーで取り上げる「誤解」 • 誤解1) 実行計画はEXPLAIN PLANで確認すれば十分! • 誤解2) 実行計画はもっともインデントが深いステップから実 行される! • 誤解3) Rows統計の値が同じなら、アクセスしたデータ量は同 程度の効率! • 誤解4) 実行計画の各ステップは必ず1回だけ実行される
  9. 9. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 9Copyright © 2017 CO-Sol Inc. All Rights Reserved. 実行計画とは
  10. 10. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 10 実行計画とは • 実行計画は、SQLがOracleで実行される手順を示す • 実行計画はコストベースオプティマイザ(CBO; Cost- Based Optimizer)が作成する – CBOはOracleの内部コンポーネント – オプティマイザ統計が最新でないと適切な実行計画が作成され ないことに注意 • 不適切な実行計画でSQLが実行されると、本来であれば 実現できる処理パフォーマンスを得られない --------------------------------------------------------------------- | Id | Operation | Name | Rows |...| Time | --------------------------------------------------------------------- | 0 | SELECT STATEMENT | | |...| | | 1 | TABLE ACCESS BY INDEX ROWID| TAB0 | 16 |...| 00:00:01 | |* 2 | INDEX RANGE SCAN | T0_IDX | 16 |...| 00:00:01 | ---------------------------------------------------------------------
  11. 11. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 11 Oracleの実行計画に含まれる情報 PLAN_TABLE_OUTPUT -------------------------------------------------------------------------------------- SQL_ID 3hrvf65nm048d, child number 0 ------------------------------------- SELECT * from tab0 WHERE col_idx = 'A' Plan hash value: 2195618789 -------------------------------------------------------------------------------------- | Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time | -------------------------------------------------------------------------------------- | 0 | SELECT STATEMENT | | | | 7 (100)| | | 1 | TABLE ACCESS BY INDEX ROWID| TAB0 | 16 | 32160 | 7 (0)| 00:00:01 | |* 2 | INDEX RANGE SCAN | T0_IDX | 16 | | 1 (0)| 00:00:01 | -------------------------------------------------------------------------------------- Predicate Information (identified by operation id): --------------------------------------------------- 2 - access("COL_IDX"='A') ツリー構造をしたステップ 各ステップの統計値 補足情報 ステップ 実行計画の実行手順における実行要素 親子関係がある ←SQL文 sql_id: SQL文の識別子(Oracleが自動的に付与) ←実行計画のハッシュ値 ※:取得方法によって、情報が表示される/され ないが異なる点に注意
  12. 12. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 12Copyright © 2017 CO-Sol Inc. All Rights Reserved. 誤解1) 実行計画はEXPLAIN PLANで確 認すれば十分!
  13. 13. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 13 EXPLAIN PLANの実行例 SQL> EXPLAIN PLAN FOR SELECT * FROM tab0 WHERE col_idx = 'A'; 解析されました。 SQL> SELECT * FROM TABLE(DBMS_XPLAN.DISPLAY); PLAN_TABLE_OUTPUT ---------------------------------------------------------------------------------------------------- Plan hash value: 2195618789 -------------------------------------------------------------------------------------- | Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time | -------------------------------------------------------------------------------------- | 0 | SELECT STATEMENT | | 16 | 32160 | 7 (0)| 00:00:01 | | 1 | TABLE ACCESS BY INDEX ROWID| TAB0 | 16 | 32160 | 7 (0)| 00:00:01 | |* 2 | INDEX RANGE SCAN | T0_IDX | 16 | | 1 (0)| 00:00:01 | -------------------------------------------------------------------------------------- Predicate Information (identified by operation id): --------------------------------------------------- 2 - access("COL_IDX"='A') 14行が選択されました。 誤解1) 実行計画はEXPLAIN PLANで確認すれば十分!
  14. 14. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 14 誤解1) 実行計画はEXPLAIN PLANで確認すれば十分! • 作成される実行計画は、実行時の実行環境に左右される → EXPLAIN PLANで確認した実行計画は、確認対象の環 境やタイミングにおける実行計画と同じである保証はな い Oracle SQL> SQL*Plus (EXPLAIN PLAN実行) Javaなどの カスタムアプリケーション 同一のSQLを 実行 異なる 実行計画!
  15. 15. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 15 Oracle 共有プール [補足] 「そのSQL実行の」実行計画を確認する方法 • 基本的な考え方は、「SQL実行後、共有プールにキャッ シュされている実行計画を確認する」 – キャッシュを直接確認する方法、キャッシュの履歴データを確認 する方法(AWR、Statspack)などのバリエーションがある • ただし、同一のSQLについて、複数の実行計画がキャッ シュされている場合はちょっと厄介・・・ – 調査対象のSQL実行において、どの実行計画が使用されたかを いくつかの情報をもとに調査する必要がでてくる・・・ (直近の実行時間、直近の実行計画作成時間など) アプリケーション ②キャッシュから 実行計画を確認①SQL実行 →実行計画が キャッシュされる
  16. 16. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 16Copyright © 2017 CO-Sol Inc. All Rights Reserved. 誤解2) 実行計画は最もインデントが深い ステップから実行される!
  17. 17. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 17 誤解2) 実行計画は最もインデントが深いステップから 実行される! • 誤解を前提にすると、最初に実行されるステップはcだが、 実際は?? ---------------------------------------------------- | Id | Operation | Name | ---------------------------------------------------- | 0 | SELECT STATEMENT | | | 1 | NESTED LOOPS | | |* 2 | TABLE ACCESS FULL | PA | | 3 | TABLE ACCESS BY INDEX ROWID | CH | |* 4 | INDEX RANGE SCAN | IDX_CHPA | ---------------------------------------------------- a b c
  18. 18. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 18 ツリー構造を整理 ------------------------------------------------- | Id | Operation | Name | ------------------------------------------------- | 0 | SELECT STATEMENT | | | 1 | NESTED LOOPS | | |* 2 | TABLE ACCESS FULL | PA | | 3 | TABLE ACCESS BY INDEX ROWID| CH | |* 4 | INDEX RANGE SCAN | IDX_CHPA | ------------------------------------------------- 0: SEL 1: NL 2: TAF 3: TAIR 4: IRS
  19. 19. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 19 ツリー構造のたどり方 0: SEL 1: NL 2: TAF 3: TAIR 4: IRS 1. 最上位から親→子方向にたどってゆく 2. 複数の「子ステップ」がある場合、表形式表示で上にある「子ステッ プ」に進む 3. そのステップから、さらに親→子方向にたどってゆく 4. 最下位の「子ステップ」に到達したら、実行を開始する。 5. 実行終了したら、「親ステップ」に戻る 6. その「親ステップ」に、他の「子ステップ」がある場合、表形式表示で 上にある「子ステップ」に進み、3. へ ない場合、その「親ステップ」を実行し、その「親ステップ」の「さら に親のステップ」に戻り、6.を繰り返す
  20. 20. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 20 ツリー構造のたどり方 0: SEL 1: NL 2: TAF 3: TAIR 4: IRS 1. 最上位から親→子方向にたどってゆく 2. 複数の「子ステップ」がある場合、表形式表示で上にある「子ステッ プ」に進む 3. そのステップから、さらに親→子方向にたどってゆく 4. 最下位の「子ステップ」に到達したら、実行を開始する。 5. 実行終了したら、「親ステップ」に戻る 6. その「親ステップ」に、他の「子ステップ」がある場合、表形式表示で 上にある「子ステップ」に進み、3. へ ない場合、その「親ステップ」を実行し、その「親ステップ」の「さら に親のステップ」に戻り、6.を繰り返す
  21. 21. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 21 というわけで正解は • かならずしも、最も深いインデントのステップから実行されるわけでは ないことに注意 – きちんとした説明が面倒だからか・・・ 誤った情報が結構流布されている ------------------------------------------------- | Id | Operation | Name | ------------------------------------------------- | 0 | SELECT STATEMENT | | | 1 | NESTED LOOPS | | |* 2 | TABLE ACCESS FULL | PA | | 3 | TABLE ACCESS BY INDEX ROWID| CH | |* 4 | INDEX RANGE SCAN | IDX_CHPA | ------------------------------------------------- 0: SEL 1: NL 2: TAF 3: TAIR 4: IRS 最初に 実行
  22. 22. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 22Copyright © 2017 CO-Sol Inc. All Rights Reserved. 誤解3) Rows統計の値が同じならば、 アクセスしたデータの量は同じ
  23. 23. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 23 誤解3) Rows統計の値が同じならば、アクセス したデータの量は同じ 統計値 解釈・意味 累積? Rows そのステップが上位のステップに返す見積行数 N Bytes そのステップが上位のステップに返すRowsの見積バイト数 N Cost そのステップ以下のステップの累積コスト コスト=平たく言うと「オラクルが予測した処理時間(単位なし)」 Y Time そのステップ以下のステップの予想処理時間 Y SELECT * FROM tab0 WHERE col_idx = 'A' AND col_noix='B' -------------------------------------------------------------------------------------- | Id | Operation | Name | Rows | Bytes | Cost (%CPU)| Time | -------------------------------------------------------------------------------------- | 0 | SELECT STATEMENT | | | | 2 (100)| | |* 1 | TABLE ACCESS BY INDEX ROWID| TAB0 | 1 | 2010 | 2 (0)| 00:00:01 | |* 2 | INDEX RANGE SCAN | T0_IDX | 3 | | 1 (0)| 00:00:01 | -------------------------------------------------------------------------------------- 1 - filter("COL_NOIX"='B') 2 - access("COL_IDX"='A') 0: SEL 1: TIR 2:IRS Rows=1 Rows=3 Rows統計
  24. 24. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 24 • Rows統計=そのステップが上位のステップに返す見積行数 であり、 ≠そのステップでアクセスした行数ではない • Rows統計が同じでも、アクセスした行数(=データの量)が異なる ことは十分に起こりうる SELECT * from t9 WHERE id = 1 ----------------------------------------------------- | Id | Operation | Name | Rows | ----------------------------------------------------- | 0 | SELECT STATEMENT | | | | 1 | TABLE ACCESS BY INDEX ROWID| T9 | 1 | |* 2 | INDEX UNIQUE SCAN | PK_T9 | 1 | ----------------------------------------------------- SELECT * from t9 WHERE id = 1 ------------------------------------------ | Id | Operation | Name | Rows | ------------------------------------------ | 0 | SELECT STATEMENT | | 1 | |* 1 | TABLE ACCESS FULL| T9 | 1 | ------------------------------------------ TABLE ACCESS FULL filterINDEX UNIQUE SCAN TABLE ACCESS BY INDEX ROWID access 誤解3) Rows統計の値が同じならば、アクセス したデータの量は同じ
  25. 25. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 25Copyright © 2017 CO-Sol Inc. All Rights Reserved. 誤解4) 実行計画の各ステップは必ず 1回だけ実行される
  26. 26. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 26 Starts実行統計 : オペレーションの実行回数 SELECT cid, cname, pa.pid, pname FROM ch, pa WHERE ch.pid = pa.pid and pa.pid IN (1,2,3) ------------------------------------------------------------------------- | Id | Operation | Name | Starts | E-Rows | A-Rows | ------------------------------------------------------------------------- | 0 | SELECT STATEMENT | | 1 | | 3 | | 1 | NESTED LOOPS | | 1 | 3 | 3 | |* 2 | TABLE ACCESS FULL | CH | 1 | 3 | 3 | | 3 | TABLE ACCESS BY INDEX ROWID| PA | 3 | 1 | 3 | |* 4 | INDEX UNIQUE SCAN | PK_PA | 3 | 1 | 3 | ------------------------------------------------------------------------- 0: SEL 1: NL 2: TAF 4: TAIR 5: IUS Starts=3 → 3回実行
  27. 27. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 27 Starts実行統計 : オペレーションの実行回数 SELECT cid, cname, pa.pid, pname FROM ch, pa WHERE ch.pid = pa.pid and pa.pid IN (1,2,3) ------------------------------------------------------------------------- | Id | Operation | Name | Starts | E-Rows | A-Rows | ------------------------------------------------------------------------- | 0 | SELECT STATEMENT | | 1 | | 3 | | 1 | NESTED LOOPS | | 1 | 3 | 3 | |* 2 | TABLE ACCESS FULL | CH | 1 | 3 | 3 | | 3 | TABLE ACCESS BY INDEX ROWID| PA | 3 | 1 | 3 | |* 4 | INDEX UNIQUE SCAN | PK_PA | 3 | 1 | 3 | ------------------------------------------------------------------------- INDEX UNIQUE SCAN TABLE ACCESS BY INDEX ROWID NL TABLE ACCESS FULL CH PK_PA PA access ① ② ③ 0: SEL 1: NL 2: TAF 4: TAIR 5: IUS Starts=3 → 3回実行 ① ② ③ ① ② ③
  28. 28. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 28 まとめ • 誤解1) 実行計画はEXPLAIN PLANで確認すれば十分! → 実行後に共有プール(キャッシュ)から確認 • 誤解2) 実行計画はもっともインデントが深いステップから実 行される! → 一概に言えない。ルールに従い実行されるため、インデン トが深いステップが最初に実行されないケースもある • 誤解3) Rows統計の値が同じなら、アクセスしたデータ量は同 程度の効率! → そのステップが返す行数に過ぎないので、同程度の場合も あれば、もっと大きい場合もある • 誤解4) 実行計画の各ステップは必ず1回だけ実行される → たいてい1回だが、複数回実行されることもある
  29. 29. Copyright © 2017 CO-Sol Inc. All Rights Reserved. 29

×