20070601 Syrcodis2007 Xml Support In Postgresql

•

0 gefällt mir•232 views

Nikolay Samokhvalov

Technologie News & Politik

20070601 Syrcodis2007 Xml Support In Postgresql

Weitere ähnliche Inhalte

Mehr von Nikolay Samokhvalov

Shared_buffers = 25% – это много или мало? Или в самый раз? Как понять, подходит ли эта – довольно устаревшая – рекомендация в вашем конкретном случае? Пришло время подойти к вопросу подбора параметров postgresql.conf "по-взрослому". Не с помощью слепых "автотюнеров" или устаревших советов из статей и блогов, а на основе: строго выверенных экспериментов на БД, производимых автоматизированно, в больших количествах и в условиях, максимально приближенных к "боевым", глубокого понимания особенностей работы СУБД и ОС. Используя Nancy CLI (https://gitlab.com/postgres.ai/nancy), мы рассмотрим конкретный пример – пресловутые shared_buffers – в разных ситуациях, в разных проектах и попробуем разобраться, как же подобрать оптимальную настройку для нашей инфраструктуры, БД и нагрузки. https://pgconf.ru/2019/242809

Промышленный подход к тюнингу PostgreSQL: эксперименты над базами данных

Nikolay Samokhvalov

Future database administration will be highly automated. Until then, we still live in a world where extensive manual interactions are required from a skilled DBA. This will change soon as more "autonomous databases" reach maturity and enter the production environment. Postgres-specific monitoring tools and systems continue to improve, detecting and analyzing performance issues and bottlenecks in production databases. However, while these tools can detect current issues, they require highly-experienced DBAs to analyze and recommend mitigations. In this session, the speaker will present the initial results of the POSTGRES.AI project – Nancy CLI, a unified way to manage automated database experiments. Nancy CLI is an automated database management framework based on well-known open-source projects and incorporating major open-source tools and Postgres modules: pgBadger, pg_stat_kcache, auto_explain, pgreplay, and others. Originally developed with the goal to simulate various SQL query use cases in various environments and collect data to train ML models, Nancy CLI turned out to be very a universal framework that can play a crucial role in CI/CD pipelines in any company. Using Nancy CLI, casual DBAs and any engineers can easily conduct automated experiments today, either on AWS EC2 Spot instances or on any other servers. All you need is to tell Nancy which database to use, specify workload (synthetic or "real", generated based on the Postgres logs), and what you want to test – say, check how a new index will affect all most expensive query groups from pg_stat_statements, or compare various values of "default_statistics_target". All the collected information with a very high level of confidence will give you understanding, how various queries and overall Postgres performance will be affected when you apply this change to production.

The Art of Database Experiments – PostgresConf Silicon Valley 2018 / San Jose

Nikolay Samokhvalov

Nancy CLI, a unified way to manage automated database experiments. Nancy CLI is an automated database management framework based on well-known open-source projects and incorporating major open-source tools. Using these tools, casual DBAs can conduct automated experiments today, either on AWS EC2 Spot instances or on any other servers. All you need is to tell Nancy which database to use, how to determine workloads and what you want to verify – say, check how some index will help, or compare various values of "default_statistics_target" for your database and your workload. Everything else Nancy will do for you, in fully automated fashion, in the end presenting you detailed results for comparison.

Nancy CLI. Automated Database Experiments

Nikolay Samokhvalov

Онлайн-опросы неизменно показывают — всех нас очень интересуют две вещи: а) как писать наиболее эффективные SQL-запросы, б) как «читать» такие запросы, а точнее, как понимать, что именно делает или будет делать СУБД при их выполнении. Эти две неразрывно связанные друг с другом темы чрезвычайно обширны, SQL-искусству можно (и нужно) учиться годами. Во время нашей очередной встречи в прямом эфире мы затронем некоторые аспекты обеих. ЧАСТЬ 1: EXPLAIN Алексей Ермаков. Как читать и интерпретировать вывод команды EXPLAIN Команда EXPLAIN — основной инструмент анализа запросов, позволяющий разобраться, каким образом запрос будет выполняться и как можно его ускорить. Для сложных запросов вывод может быть довольно громоздким и его становится сложно читать. Я расскажу, из каких частей состоит план запроса, на какие «маркеры» в нём следует обращать внимание в первую очередь и как на это реагировать. ЧАСТЬ 2: ADVANCED SQL Николай Самохвалов. SQL современный и «продвинутый» «Я не волшебник, я только учусь». Продвинутому SQL нас постоянно учат такие видные гуру как Markus Winand и Макс Богук. Рекурсивные CTE, LATERAL JOIN, виртуозная работа с массивами и строками, window functions и прочие модные штучки, которые помогут вам в дрессировке вашего Постгреса, — я постараюсь сделать хороший обзор, а если вдруг тема покажется интересной, то в следующих сеансах группового Постгреса мы обязательно пригласим настоящих гуру :)

#RuPostgresLive 4: как писать и читать сложные SQL-запросы

Nikolay Samokhvalov

#RuPostgresLive 4: как писать и читать сложные SQL-запросы

Nikolay Samokhvalov

Мы обсудим несколько фундаментальных ситуаций использования РСУБД (каждая из которых неоднократно встречалась автору), попутно разбирая возможные ошибки: - элементарная модификация данных; - работа с датой, временем и временными зонами;  - проверка ограничений целостности; - очередь заданий; - пакетная работа с данными (например, удаление пачки записей в таблице); - полнотекстовый поиск; - относительно новые задачи (создание API, machine learning).

Database First! О распространённых ошибках использования РСУБД

Nikolay Samokhvalov

2016.10.13 PostgreSQL in Russia

Nikolay Samokhvalov

Первый релиз-кандидат версии 9.6 вышел 1 сентября, а это значит, что совсем скоро будет полноценный релиз. Все вокруг уже успели обсудить новинки, и теперь уже стыдно ничего не знать о таких вещах, как параллелизация выполнения запросов, pushdown для FDW, мониторинг waitlocks, полнотекстовый поиск по фразам или магический \gexec в psql. Чтобы никому не приходилось краснеть, мы быстро пройдёмся по всем основным и интересным моментам версии 9.6.

#RuPostges в Yandex, эпизод 3. Что же нового в PostgreSQL 9.6

Nikolay Samokhvalov

#noBackend, или Как выжить в эпоху толстеющих клиентов

Nikolay Samokhvalov

#PostgreSQLRussia в банке Тинькофф, доклад №1

Nikolay Samokhvalov

SFPUG 2015.11.20 lightning talk "PostgreSQL in Russia"

Nikolay Samokhvalov

More: http://PostgreSQLRussia.org Доклад посвящён резервному хранению СУБД PostgreSQL. Мы поговорим о том, как устроено хранение данных на диске и организован WAL в PostgreSQL, какие есть средства для резервного копирования и восстановления данных. Обсудим, как перестать беспокоиться за свои данные и почему PostgreSQL славится своей надёжностью.

Владимир Бородин: Как спать спокойно - 2015.10.14 PostgreSQLRussia.org meetu...

Nikolay Samokhvalov

Встречи сообщества http://PostgreSQLRussia.org - Миграция из Oracle в Postgres. Встреча в компании CUSTIS. План встречи: 19:00 Приветственная пицца, свободное общение. 19:20 Вступление. Рассказ о CUSTIS. 19:25 Николай Самохвалов. Коротко о PostgreSQL. 19:35 Максим Трегубов, CUSTIS. Миграция данных из Oracle в Postgres. Доклад о том, как мы для одного из заказчиков тестировали переход с СУБД Oracle на Postgres. Расскажем о выборе инструмента миграции данных, настройке тестовой среды и о полученных результатах. Также немного затронем модную тему DevOps и покажем роль Ansible в миграции данных. 20:10 Вячеслав Муравлев, CUSTIS. Data Access Layer как страховка при миграции СУБД. Для многих АС миграция с одной СУБД на другую сродни наступлению страхового случая «тотал» - необходимо переписать львиную долю кода. Подстраховаться от такого ущерба можно с помощью шаблона проектирования Data Access Layer (DAL). Мы расскажем как этот подход помог нам провести первый этап миграции АС одного из заказчиков с Oracle на PostgreSQL, рассмотрим инструментарий, обсудим применимость подхода на уровне предприятия. 20:30 Иван Кухарчук, ЯНДЕКС. Как можно сэкономить на лицензиях и снизить нагрузку на Oracle, переселив отчёты в PostgreSQL. 20:50 Завершение встречи, свободное общение.

#PostgreSQLRussia 2015.09.15 - Николай Самохвалов - 5 главных особенностей Po...

Nikolay Samokhvalov

Максим Трегубов, CUSTIS. Миграция данных из Oracle в Postgres. Доклад о том, как мы для одного из заказчиков тестировали переход с СУБД Oracle на Postgres. Расскажем о выборе инструмента миграции данных, настройке тестовой среды и о полученных результатах. Также немного затронем модную тему DevOps и покажем роль Ansible в миграции данных.

#PostgreSQLRussia 2015.09.15 - Максим Трегубов, CUSTIS - Миграция из Oracle в...

Nikolay Samokhvalov

Реляционной модели скоро исполнится полвека – это огромный срок для любой технологической индустрии, не говоря уже об ИТ. За прошедшие годы этой модели было брошено немало вызовов, оказавших немалое влияние на развитие реляционных СУБД. В докладе обсуждаются три главных вызова реляционной модели, включая и NoSQL. На основе многолетнего опыта использования PostgreSQL для создания социальных сетей, объединяющих многомиллионные аудитории, наглядно демонстрируется как эта СУБД реагировала на возникающие вызовы. Речь также пойдет о «трех китах» PostgreSQL, которые не дают этой системе превратиться в монстра и позволяют обогащаться функционалом, необходимым для создания современных высоконагруженных проектов. Особое внимание в докладе уделено новым типам данных, JSON и JSONB — их возможностям, способам индексирования, а также разбору имеющихся недостатков.

Три вызова реляционным СУБД и новый PostgreSQL - #PostgreSQLRussia семинар по...

Nikolay Samokhvalov

Тип данных JSONb – это, пожалуй, самая яркая новинка PostgreSQL 9.4, который вышел 18 декабря 2014. Уже немало докладов и статей посвящено этому типу данных, работе с ним и индексации. Но как правило, информация в них перегружена специфичными для PostgreSQL терминами. Запутались в моделях данных? В том, какие индексы могут вам помочь ускорить вашу работу с СУБД? Этот доклад помогает сложить паттерн. Он для тех, кто начал использовать PostgreSQL совсем недавно или только планирует работать с ним. В нём рассказано о месте PostgreSQL в современном мире СУБД, о борьбе различных моделей данных за место под солнцем на этом рынке и то, как это отразилось на развитие Postgres. Помимо прочего, рассказывается о том, какие вообще бывают деревья, как они помогают ускорять базы данных и почему PostgreSQL — просто райский лес для деревьев самого разного типа :) См. также видео: http://postgresmen.ru/meetup/2014-12-23-parallels

2014.12.23 Николай Самохвалов, Ещё раз о JSON(b) в PostgreSQL 9.4

Nikolay Samokhvalov

Доклад от Parallels: Методики тестировния производительности database-centric приложений Описание: При работе над сложными продуктами в database-centric приложениях изменения в коде и тем более в SQL запросах к базе данных могут приводить к неожиданным падениям производительности или же деградации производительности приложения с ростом размера базы данных. Поэтому важно уметь как можно быстрее отлавливать и исправлять причины таких деградаций. Доклад о том, как устроен процесс мониторинга производительности продукта автоматизации хостинга и облачных сервисов Parallels Automation, для которого определяющим фактором является производительность базы данных. Компания покажет, как анализирует планы исполнения SQL запросов внутри PostgreSQL, как проверяет насколько быстро и эффективно в целом работают SQL запросы, как определяет стратегию дальнейшей оптимизации.

2014.12.23 Александр Андреев, Parallels

Nikolay Samokhvalov

2014.10.15 Сергей Бурладян, Avito.ru

Nikolay Samokhvalov

* приемы доступа к данным; * прикладной класс работы с БД поверх PDO, особенности PDO; * связки пуллов коннектов; * API хранимых процедур; * работа c распределенным хранилищем; * RPC между базами на примере асинхронного геокодинга.

2014.10.15 Мурат Кабилов, Avito.ru #PostgreSQLRussia

Nikolay Samokhvalov

2014.10.15 блиц-доклад PostgreSQL kNN search

Nikolay Samokhvalov

Mehr von Nikolay Samokhvalov (20)

Промышленный подход к тюнингу PostgreSQL: эксперименты над базами данных

The Art of Database Experiments – PostgresConf Silicon Valley 2018 / San Jose

Nancy CLI. Automated Database Experiments

#RuPostgresLive 4: как писать и читать сложные SQL-запросы

Database First! О распространённых ошибках использования РСУБД

2016.10.13 PostgreSQL in Russia

#RuPostges в Yandex, эпизод 3. Что же нового в PostgreSQL 9.6

#noBackend, или Как выжить в эпоху толстеющих клиентов

#PostgreSQLRussia в банке Тинькофф, доклад №1

SFPUG 2015.11.20 lightning talk "PostgreSQL in Russia"

Владимир Бородин: Как спать спокойно - 2015.10.14 PostgreSQLRussia.org meetu...

#PostgreSQLRussia 2015.09.15 - Николай Самохвалов - 5 главных особенностей Po...

#PostgreSQLRussia 2015.09.15 - Максим Трегубов, CUSTIS - Миграция из Oracle в...

Три вызова реляционным СУБД и новый PostgreSQL - #PostgreSQLRussia семинар по...

2014.12.23 Николай Самохвалов, Ещё раз о JSON(b) в PostgreSQL 9.4

2014.12.23 Александр Андреев, Parallels

2014.10.15 Сергей Бурладян, Avito.ru

2014.10.15 Мурат Кабилов, Avito.ru #PostgreSQLRussia

2014.10.15 блиц-доклад PostgreSQL kNN search

Kürzlich hochgeladen

PROYECTO FINAL. Tutorial para publicar en SlideShare.pptx

Alan779941

EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx

JorgeParada26

Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf

vladimiroflores1

EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx

MiguelAtencio10

pruebas unitarias unitarias en java con JUNIT

Maricarmen Sánchez Ruiz

Innovaciones tecnologicas en el siglo 21

mariacbr99

Avances tecnológicos del siglo XXI 10-07 eyvana

mcerpam

Avances tecnológicos del siglo XXI y ejemplos de estos

sgonzalezp1

How to use Redis with MuleSoft. A quick start presentation.

FlorenciaCattelani

Modulo-Mini Cargador.................pdf

AnnimoUno1

La sensibilidad al cobre por parte de microorganismos biolixiviadores es uno de los principales problemas que enfrenta la minería para mejorar los procesos de biolixiviación. En tal sentido, nosotros evaluamos la resistencia al cobre de un consorcio microbiano conformado por Sulfobacillus spp., y Acidithiobacillus ferrooxidans, el cual se propagó, en bioreactores de tanque aireado y agitado de 1 L, los cuales contenían medio 9K suplementado con hierro y concentraciones crecientes de cobre (200 mM, 400 mM, 600 mM, 800 mM y 1,000 mM) a 30°C con un pH de 1.6 durante 96 horas. Se colectó una muestra de cada biorreactor cada 8 horas, para realizar análisis, microscópicos y moleculares, además el cultivo del consorcio en placa mostró una resistencia al cobre hasta 1,000 mM.

Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...

JohnRamos830530

Kürzlich hochgeladen (11)

PROYECTO FINAL. Tutorial para publicar en SlideShare.pptx

EVOLUCION DE LA TECNOLOGIA Y SUS ASPECTOSpptx

Refrigerador_Inverter_Samsung_Curso_y_Manual_de_Servicio_Español.pdf

EL CICLO PRÁCTICO DE UN MOTOR DE CUATRO TIEMPOS.pptx

pruebas unitarias unitarias en java con JUNIT

Innovaciones tecnologicas en el siglo 21

Avances tecnológicos del siglo XXI 10-07 eyvana

Avances tecnológicos del siglo XXI y ejemplos de estos

How to use Redis with MuleSoft. A quick start presentation.

Modulo-Mini Cargador.................pdf

Resistencia extrema al cobre por un consorcio bacteriano conformado por Sulfo...

20070601 Syrcodis2007 Xml Support In Postgresql

Empfohlen

Empfohlen

Weitere ähnliche Inhalte

Mehr von Nikolay Samokhvalov

Mehr von Nikolay Samokhvalov (20)

Kürzlich hochgeladen

Kürzlich hochgeladen (11)