Внедрение систем хранения
данных для сейсморазведки
и промысловой геофизики
Всеволод Шабад, «СетьПроект»
2

Раньше я не умел плавать
3

Есть множество причин не учиться
Это не самое важное в жизни
Если будет действительно нужно — доплыву!
Чему там учиться?!
В 40 лет учиться плавать поздно!
Все тренеры одинаковы — они просто козлы!
…
4

Итоги 2013
Значимые результаты
•крепкое здоровье
Амбициозные цели
•Босфор в 2015 году
Осознание массы
тонких нюансов
•техника плавания
•тактика плавания
•снаряжение
•физиология
•…
5

Внедрение СХД для геологии и геофизики?
Зачем нужны такие СХД?
Чем такие СХД отличаются
от обычных?
Зачем нужно внедрение?
Как выбрать внедренца?
Какие еще есть нюансы?
6

Ключевые факторы успеха
Светлые головы
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
7

Ключевые факторы успеха
Светлые головы
ограниченный ресурс!
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
8

Ключевые факторы успеха
Светлые головы
ограниченный ресурс!
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
9

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
10

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
11

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
12

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
13

Особенности СХД для G & G
Общие свойства:
•огромные объемы данных – сотни ТБ
•масштабируемость по ёмкости и скорости
Три класса систем хранения сейсмоданных:
•обработка
•интерпретация и моделирование
•архивирование
14

Кое-что о масштабируемости

NetApp
FAS
EMC
Isilon

250 000
NFS IOPS
дисков ТБ
288
48
672

500 000
NFS IOPS
дисков ТБ
576
96

172.3 1344

1 000 000
NFS IOPS
дисков ТБ
1152
192

344.5 3360

864

Из http://www.spec.org/sfs2008/results/sfs2008nfs.html
15

СХД для обработки сейсмоданных
Очень большие объемы данных
Множественный доступ к единой файловой
системе
Последовательный ввод-вывод большими
блоками
Пакетный режим работы
Операционные системы — только Linux
16

СХД для интерпретации сейсмоданных
Большие объемы данных
Множественный доступ к единой программной
среде — база данных и файлы
Индивидуальная работа с данными
Диалоговый режим работы
Произвольный ввод-вывод малыми блоками
Операционные системы — Linux, Windows
17

СХД для архивирования сейсмоданных
Огромные объемы данных
•сравнительно небольшая база данных
•сравнительно немного огромных файлов
Обеспечение гарантированной долгосрочной
целостности данных
Пакетный (иногда и диалоговый!) режим работы
Последовательный ввод-вывод большими
блоками
Операционные системы — Linux, Windows (?)
18

Как правильно выбрать решение?
19

Факторы выбора решения
С каким ПО будет работать?
Каковы пределы масштабирования?
Универсальная СХД или специализированная?
Минимизация капитальных или
эксплуатационных расходов?
Диск или лента?
Решение от единого вендора (IBM?) или
множества вендоров?
Корпоративные правила
…
20

Факторы сложности выбора
Информационная закрытость
•вендоры геофизического ПО
•вендоры инфраструктуры
Отсутствие специалистов с широким кругозором,
глубокими знаниями и практическим опытом
•у заказчика
•у вендоров геофизического ПО
•у вендоров инфраструктуры
•у интеграторов
Пристрастность продавцов
•продают продукт, а не решение задачи
Дороговизна и длительность стендовых испытаний
21

«СетьПроект» — правильный интегратор
Партнерство с ключевыми вендорами СХД
•NetApp, Panasas, IBM, EMC, Intel, Quantum, …
Партнерство с вендорами геофизического ПО:
•Paradigm, KADME
Специализация на нефтегазовой отрасли
•и опыт работы с другими отраслями
Продвинутые технологии управления проектами
Опыт разнообразных проектов
Квалифицированный персонал
22

Плывем вместе?

www.netproject.ru

More Related Content

PDF
История успеха Яндекс.Почты с PostgreSQL / Владимир Бородин (Яндекс)
PDF
Алексей Ефимов "Основные проблемы и грабли при разработке видеохостингов"
PDF
2014.09.24 история небольшого успеха с PostgreSQL (Yandex)
PDF
Sun Microsystems Course on AACIMP 2009: Agenda
PDF
Архитектура хранилища бинарных данных на Одноклассниках (Александр Христофоро...
PDF
Реактивный кэш в Android, Андрей Мельников, Rambler&Co, Москва
PPTX
No sql.mongodb scaling
PDF
Олег Лексунин, Михаил Белов "Яндекс.Диск. Эксплуатация и разработка быстрорас...
История успеха Яндекс.Почты с PostgreSQL / Владимир Бородин (Яндекс)
Алексей Ефимов "Основные проблемы и грабли при разработке видеохостингов"
2014.09.24 история небольшого успеха с PostgreSQL (Yandex)
Sun Microsystems Course on AACIMP 2009: Agenda
Архитектура хранилища бинарных данных на Одноклассниках (Александр Христофоро...
Реактивный кэш в Android, Андрей Мельников, Rambler&Co, Москва
No sql.mongodb scaling
Олег Лексунин, Михаил Белов "Яндекс.Диск. Эксплуатация и разработка быстрорас...

Similar to Внедрение систем хранения данных для сейсморазведки и промысловой геофизики (20)

PDF
Организация хранения данных сейсморазведки и промысловой геофизики
PDF
Системы хранения сейсмических данных - серебряной пули нет! (конференция Para...
PPTX
Технологии хранения для больших проектов / Сергей Платонов (RAIDIX)
ODP
Data storage systems
PDF
Обработка спйсмоданных: возможности оптимизации ИТ-инфраструктуры
PDF
Software Defined Storage
PDF
СХД для обработки сейсмики: сравнительный обзор
PPTX
IBM Technology Day 2013 Sy Storage
PPTX
Велосипед уже изобретен. Что умеют промышленные СХД? / Антон Жбанков (Nutanix)
PDF
Программно-технические комплексы для работы с геолого-геофизическими данными
PDF
Aлександр Зайцев, LifeStreet
PPTX
Совместимы ли понятия SDS и производительность?
PPTX
Эволюция программно-аппаратного обеспечения хранения фотографий в Badoo / Дми...
PDF
Extreme cloud storage on free bsd (Андрей Пантюхин)
PDF
Extreme Cloud Storage on FreeBSD, Андрей Пантюхин
PPT
Untitled Presentation
PDF
HPC file systems (160761)
PDF
Центр решений КРОК наа базе технологий ЕМС: компетенцией точно в цель
PDF
Информационные технологии в эру Больших данных
PPTX
Информационные технологии в эру Больших данных
Организация хранения данных сейсморазведки и промысловой геофизики
Системы хранения сейсмических данных - серебряной пули нет! (конференция Para...
Технологии хранения для больших проектов / Сергей Платонов (RAIDIX)
Data storage systems
Обработка спйсмоданных: возможности оптимизации ИТ-инфраструктуры
Software Defined Storage
СХД для обработки сейсмики: сравнительный обзор
IBM Technology Day 2013 Sy Storage
Велосипед уже изобретен. Что умеют промышленные СХД? / Антон Жбанков (Nutanix)
Программно-технические комплексы для работы с геолого-геофизическими данными
Aлександр Зайцев, LifeStreet
Совместимы ли понятия SDS и производительность?
Эволюция программно-аппаратного обеспечения хранения фотографий в Badoo / Дми...
Extreme cloud storage on free bsd (Андрей Пантюхин)
Extreme Cloud Storage on FreeBSD, Андрей Пантюхин
Untitled Presentation
HPC file systems (160761)
Центр решений КРОК наа базе технологий ЕМС: компетенцией точно в цель
Информационные технологии в эру Больших данных
Информационные технологии в эру Больших данных
Ad

More from Vsevolod Shabad (20)

PDF
AI Safety and Security - the basement of customer trust
PDF
Slash Incident Resolution Time - From 30 Days to 1
PDF
Почему нужно бояться искусственного интеллекта и как это правильно делать
PDF
Опыт разработки стратегии ИБ и киберзащиты производственной инфраструктуры в...
PDF
Agile-подходы в ИБ
PDF
State regulation of information protection in the cloud - international and K...
PDF
How can a successful SOC2-compliant ISMS be built without power, money and a...
PDF
Государственное регулирование защиты данных в облаках - международный и каза...
PDF
Первые шаги нового CISO
PDF
С широко закрытыми глазами - риск-ориентированный подход к миграции в облака
PDF
Public clouds - tasty but scary
PDF
Building a cybersecurity strategy for growing companies (IDC Day 2022 - Tashk...
PDF
Public clouds: to love passionately, to be afraid, or to hate (IDC Security D...
PDF
Как повысить результативность борьбы с фродом: опыт "Халык Банка"
PDF
Как оценить пользу от ИБ и увязать с нею инвестиции в безопасность
PDF
Проекты по обеспечению непрерывности бизнеса: ЧТО, ЗАЧЕМ, КАК и ПОЧЕМУ ТАК ДО...
PDF
ITIL, SCRUM, Kanban in Cybersecurity
PDF
Гидродинамическое моделирование: возможности оптимизации ИТ-инфраструктуры
PDF
Мощнее или умнее? Возможности оптимизации ИТ-инфраструктуры для сейсмики
PDF
Возможности повышения производительности вычислительных кластеров
AI Safety and Security - the basement of customer trust
Slash Incident Resolution Time - From 30 Days to 1
Почему нужно бояться искусственного интеллекта и как это правильно делать
Опыт разработки стратегии ИБ и киберзащиты производственной инфраструктуры в...
Agile-подходы в ИБ
State regulation of information protection in the cloud - international and K...
How can a successful SOC2-compliant ISMS be built without power, money and a...
Государственное регулирование защиты данных в облаках - международный и каза...
Первые шаги нового CISO
С широко закрытыми глазами - риск-ориентированный подход к миграции в облака
Public clouds - tasty but scary
Building a cybersecurity strategy for growing companies (IDC Day 2022 - Tashk...
Public clouds: to love passionately, to be afraid, or to hate (IDC Security D...
Как повысить результативность борьбы с фродом: опыт "Халык Банка"
Как оценить пользу от ИБ и увязать с нею инвестиции в безопасность
Проекты по обеспечению непрерывности бизнеса: ЧТО, ЗАЧЕМ, КАК и ПОЧЕМУ ТАК ДО...
ITIL, SCRUM, Kanban in Cybersecurity
Гидродинамическое моделирование: возможности оптимизации ИТ-инфраструктуры
Мощнее или умнее? Возможности оптимизации ИТ-инфраструктуры для сейсмики
Возможности повышения производительности вычислительных кластеров
Ad

Внедрение систем хранения данных для сейсморазведки и промысловой геофизики

  • 1. Внедрение систем хранения данных для сейсморазведки и промысловой геофизики Всеволод Шабад, «СетьПроект»
  • 2. 2 Раньше я не умел плавать
  • 3. 3 Есть множество причин не учиться Это не самое важное в жизни Если будет действительно нужно — доплыву! Чему там учиться?! В 40 лет учиться плавать поздно! Все тренеры одинаковы — они просто козлы! …
  • 4. 4 Итоги 2013 Значимые результаты •крепкое здоровье Амбициозные цели •Босфор в 2015 году Осознание массы тонких нюансов •техника плавания •тактика плавания •снаряжение •физиология •…
  • 5. 5 Внедрение СХД для геологии и геофизики? Зачем нужны такие СХД? Чем такие СХД отличаются от обычных? Зачем нужно внедрение? Как выбрать внедренца? Какие еще есть нюансы?
  • 6. 6 Ключевые факторы успеха Светлые головы Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 7. 7 Ключевые факторы успеха Светлые головы ограниченный ресурс! Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 8. 8 Ключевые факторы успеха Светлые головы ограниченный ресурс! Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 9. 9 Зачем нужны СХД? Повышение эффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 10. 10 Зачем нужны СХД? Повышение эффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 11. 11 Зачем нужны СХД? Повышение эффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 12. 12 Зачем нужны СХД? Повышение эффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 13. 13 Особенности СХД для G & G Общие свойства: •огромные объемы данных – сотни ТБ •масштабируемость по ёмкости и скорости Три класса систем хранения сейсмоданных: •обработка •интерпретация и моделирование •архивирование
  • 14. 14 Кое-что о масштабируемости NetApp FAS EMC Isilon 250 000 NFS IOPS дисков ТБ 288 48 672 500 000 NFS IOPS дисков ТБ 576 96 172.3 1344 1 000 000 NFS IOPS дисков ТБ 1152 192 344.5 3360 864 Из http://www.spec.org/sfs2008/results/sfs2008nfs.html
  • 15. 15 СХД для обработки сейсмоданных Очень большие объемы данных Множественный доступ к единой файловой системе Последовательный ввод-вывод большими блоками Пакетный режим работы Операционные системы — только Linux
  • 16. 16 СХД для интерпретации сейсмоданных Большие объемы данных Множественный доступ к единой программной среде — база данных и файлы Индивидуальная работа с данными Диалоговый режим работы Произвольный ввод-вывод малыми блоками Операционные системы — Linux, Windows
  • 17. 17 СХД для архивирования сейсмоданных Огромные объемы данных •сравнительно небольшая база данных •сравнительно немного огромных файлов Обеспечение гарантированной долгосрочной целостности данных Пакетный (иногда и диалоговый!) режим работы Последовательный ввод-вывод большими блоками Операционные системы — Linux, Windows (?)
  • 19. 19 Факторы выбора решения С каким ПО будет работать? Каковы пределы масштабирования? Универсальная СХД или специализированная? Минимизация капитальных или эксплуатационных расходов? Диск или лента? Решение от единого вендора (IBM?) или множества вендоров? Корпоративные правила …
  • 20. 20 Факторы сложности выбора Информационная закрытость •вендоры геофизического ПО •вендоры инфраструктуры Отсутствие специалистов с широким кругозором, глубокими знаниями и практическим опытом •у заказчика •у вендоров геофизического ПО •у вендоров инфраструктуры •у интеграторов Пристрастность продавцов •продают продукт, а не решение задачи Дороговизна и длительность стендовых испытаний
  • 21. 21 «СетьПроект» — правильный интегратор Партнерство с ключевыми вендорами СХД •NetApp, Panasas, IBM, EMC, Intel, Quantum, … Партнерство с вендорами геофизического ПО: •Paradigm, KADME Специализация на нефтегазовой отрасли •и опыт работы с другими отраслями Продвинутые технологии управления проектами Опыт разнообразных проектов Квалифицированный персонал