Дата  Запланированые курсы
25.02 Поисковая оптимизация (SEO) для профессионалов
25.02 MOC-20742B. Инфраструктура идентификации на основе Windows Server 2016
25.02 Работа в MS Excel. Базовый уровень
25.02 MOC-20762. Разработка баз данных SQL
25.02 Архитектура современных компьютеров
03.03 Рисунок
04.03 DEV-PY-MP. Модульная программа "Разработчик прикладного программного обеспечения (Язык Python)"
04.03 DEV-C-CP. Комплексная программа «Разработчик прикладного программного обеспечения (Языки С и C++)»
04.03 Основы алгоритмизации и программирования (Группа II)
04.03 Основы алгоритмизации и программирования (Группа I)
04.03 DEV-C-CP+. Расширенная комплексная программа «Разработчик прикладного программного обеспечения (Языки С и C++)»
04.03 DEV-C10. Процедурное программирование. Языки С/C++
04.03 DEV-PY100. Основы процедурного программирования на языке Python
04.03 DEV-PY-MP+. Расширенная модульная программа "Разработчик прикладного программного обеспечения (язык Python)"
04.03 Разработка пользовательских Web-интерфейсов (JavaScript)
05.03 DEV-J-MP+. Расширенная комплексная программа "Разработчик прикладного программного обеспечения (Язык Java)"
05.03 DEV-J10. Программирование на платформе Java. Введение в язык Java
05.03 DEV-J-CP. Комплексная программа "Разработчик прикладного программного обеспечения (Язык Java)"
11.03 Компьютерное проектирование в системе AutoCAD (профессиональный курс)
11.03 MOC-20744A. Безопасность инфраструктуры средствами Windows Server 2016
11.03 Основы создания веб-сайтов. Adobe Dreamweaver
11.03 MOC-20764. Администрирование инфраструктуры баз данных SQL
11.03 Введение в тестирование программного обеспечения
11.03 Введение в тестирование программного обеспечения
11.03 Введение в тестирование программного обеспечения
14.03 Работа в MS Excel. Расширенные возможности
18.03 Инструменты бизнес-анализа Microsoft Excel: PowerPivot, PowerView
18.03 DEV-C21. Объектно-ориентированное программирование. Углубленное изучение. Язык С++
18.03 Разработка баз данных (MS Access)
18.03 MOC-10961B. Автоматизация администрирования с Windows PowerShell
20.03 NET-DLINKSW-LAB. Технологии коммутации современных сетей Ethernet. Лабораторный практикум
20.03 Автоматизация работы в Excel с использованием VBA
25.03 Информационно-коммуникационные технологии в учебном процессе
25.03 DEV-PY110. Процедурное программирование на языке Python (расширенный курс)
01.04 Трёхмерное моделирование. 3ds Max
01.04 Linux-MP. Модульная программа «Архитектура и администрирование Linux»
01.04 Linux-LE. Основы архитектуры и администрирования Linux
01.04 Средства растровой графики. Adobe Photoshop
01.04 Введение в тестирование программного обеспечения
02.04 DEV-J20. Программирование на платформе Java. Стандартные пакеты
08.04 Linux-LF. Расширенное администрирование ОС Linux
08.04 Средства векторной графики. Adobe Illustrator
08.04 Профессиональная верстка сайтов. HTML5 и CSS3
15.04 Компьютерное проектирование в системе AutoCAD (базовый курс)
16.04 DEV-C20. Объектно-ориентированное программирование. Базовый уровень. Язык С++
17.04 DEV-PY111. Базовые алгоритмы и структуры данных на языке Python
22.04 Adobe Photoshop для профессионалов
22.04 Adobe After Effects. Создание анимации и эффектов
06.05 DEV-J30. Программирование на платформе Java. Разработка многоуровневых приложений
13.05 Компьютерное проектирование в системе AutoCAD (базовый курс)
20.05 DEV-C21. Объектно-ориентированное программирование. Углубленное изучение. Язык С++
27.05 DEV-PY200. Объектно-ориентированное программирование на языке Python
03.06 Компьютерное проектирование в системе AutoCAD (профессиональный курс)
03.06 DEV-J60. Технологии разработки корпоративных приложений на платформе Java Enterprise Edition (Java EE)
17.06 DEV-C22. Стандарт С++11, С++14, С++17 для прикладного программирования
20.06 DEV-PYQT. Разработка оконных приложений Python c использованием Qt
02.09 DEV-PYWEB. Разработка WEB приложений на языке Python
02.09 DEV-QT10. Прикладное программирование на С++ с использованием Qt. Базовый уровень
02.09 DEV-OCPJP. Подготовка к сдаче сертификационных экзаменов серии Oracle Certified Professional Java Programmer
30.09 Введение в тестирование программного обеспечения
30.09 Введение в тестирование программного обеспечения
30.09 Введение в тестирование программного обеспечения
Открыт набор на весенний семестр на программы профессиональной переподготовки
Начало занятий 1 марта!
Добро пожаловать, Гость! Чтобы использовать все возможности Вход или Регистрация.

Уведомление

Icon
Error

sql server 2008 r2 I/O default block size 8K or 64
Shek
#1 Оставлено : 3 марта 2011 г. 16:22:16(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 09.02.2009(UTC)
Сообщений: 146
Баллов: 438
Откуда: Russia Питер

Здравствуйте!
Все утро сегодня ищу ответ на вопрос какой же все-таки по умолчанию размер блока данных, которыми sql server пишет на диски, 8К или 64К. Подскажите, пожалуйста, где это можно посмотреть и желательно жестко задать? Или сервер может быть сам выбирает размер в зависимости от, например, размера кластера при форматировании диска в NTFS?
Здесь (www.sqlservercentral.com/blogs/sqlmanofmystery/archive/2010/01/04/fundamentals-of-storage-systems-stripe-size-block-size-and-io-patterns.aspx) наглядно показана существенная разница, поэтому и встал такой вопрос, помогите разобраться.
Реклама
Alexander.Kudakov
#2 Оставлено : 3 марта 2011 г. 21:47:56(UTC)
Ранг: Администратор

Группы: Администраторы, Модераторы, Зарегистрированные пользователи
Зарегистрирован: 15.12.2002(UTC)
Сообщений: 2,418
Баллов: 7,303
Откуда: Russia Санкт-Петербург

Поблагодарили: 4 раз в 4 постах
мне помнится что IO происходит относительно extent-ов т.е. 64к

??? msdn.microsoft.com/en-us/library/dd758814(SQL.100).aspx
Alexander.Kudakov
#3 Оставлено : 3 марта 2011 г. 21:52:57(UTC)
Ранг: Администратор

Группы: Администраторы, Модераторы, Зарегистрированные пользователи
Зарегистрирован: 15.12.2002(UTC)
Сообщений: 2,418
Баллов: 7,303
Откуда: Russia Санкт-Петербург

Поблагодарили: 4 раз в 4 постах
SQL Server stores its data in Extents, which are groups of eight 8K pages. Therefore, to optimize disk performance, set the NTFS Allocation Unit size to 64KB as described in the “Disk Configuration Best Practices” section of the SQL

msdn.microsoft.co...s/library/cc966412.aspx


З.ы. версия MS SQL не имеет значения -- хоть 2000 хоть 2008r2 - архитектура одинаковая
Shek
#4 Оставлено : 3 марта 2011 г. 22:04:34(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 09.02.2009(UTC)
Сообщений: 146
Баллов: 438
Откуда: Russia Питер

Большое спасибо!
Eugene.Norka
#5 Оставлено : 3 марта 2011 г. 22:14:50(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 28.01.2005(UTC)
Сообщений: 52
Баллов: 156
Откуда: Russia СПб

Сказал(а) «Спасибо»: 1 раз
Поблагодарили: 3 раз в 3 постах
Да, в блогах так и пишут: "SQL Server is going to do disk I/O in 64K chunks. Forget anything else you've read about NTFS, use 64K clusters. And try to keep everything except SQL files off the SQL disks. SQL Server's units of data storage are 8K pages in 64K extents. If there is some reason you can't use 64K clusters, use the largest you can down to 8K."
PS Я тестировал как-то на разных размерах кластера, существенной разницы в производительности не заметил.
Shek
#6 Оставлено : 3 марта 2011 г. 22:19:31(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 09.02.2009(UTC)
Сообщений: 146
Баллов: 438
Откуда: Russia Питер

Я наоборот заметил очень сильную, вот тут отписался - forums.avalon.ru/...topic.asp?TOPIC_ID=10677
Eugene.Norka
#7 Оставлено : 4 марта 2011 г. 15:46:46(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 28.01.2005(UTC)
Сообщений: 52
Баллов: 156
Откуда: Russia СПб

Сказал(а) «Спасибо»: 1 раз
Поблагодарили: 3 раз в 3 постах
На днях потестирую на своем обрудовании, отпишусь в "вашу" тему. Не очень понятно, то есть вы получили разницу в потоковой скорости 50-60 Мбайт/сек vs 250-350 Мбайт/сек только за счет изменения размера кластера? Там во второй статье в основном речь идет о смещении раздела (Partition Offset).. Кэш на СХД имеется (отключен/включен)?
Shek
#8 Оставлено : 4 марта 2011 г. 16:40:02(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 09.02.2009(UTC)
Сообщений: 146
Баллов: 438
Откуда: Russia Питер

Именно так, только за счет изменения размера кластера при форматировании NTFS. На смещение я не обращал внимание, так как там же и написано, что Windows Server 2008 по умолчанию делает смещение в 1Мб, что выравнивает любые конфигурации блоков рейдов и NTFS.
Вообще схема такая:
Один сервер с 4 дисками SAS 15к 6G, RAID контроллер Perc H700 1G NV-cache
Из 1-го и 2-го диска создан RAID1, также из 3-го и 4-го (в обоих случаях adaptive read ahead, write back, 64K stripe, собственно, эти настройки по умолчанию и не менялись)
На первый RAID поставлена система, второй пустой.

Так вот в первом случае диск на втором RAID'е был отформатирован в NTFS 4К и скорость копирования с системного диска на этот была 50-60, иногда 100.
Во втором случае диск на втором RAID'е был отформатирован в NTFS с кластером 64К и при копировании с системного диска средняя скорость стала 250-350.

Хотя вот я сейчас опять задумался, а ведь системный диск в любом случае отформатирован с размером кластера 4К... Но вот по факту что имею, то говорю.
Eugene.Norka
#9 Оставлено : 9 марта 2011 г. 19:00:19(UTC)
Ранг: Активный Участник

Группы: Зарегистрированные пользователи
Зарегистрирован: 28.01.2005(UTC)
Сообщений: 52
Баллов: 156
Откуда: Russia СПб

Сказал(а) «Спасибо»: 1 раз
Поблагодарили: 3 раз в 3 постах
Ну что же, провел быстрое тестирование на своем оборудовании. Диски были подготовлены таким же образом, как и в вашем случае, кэш на СХД отключен. Никакой разницы при копировании с системного диска на диск, отформатированный в размер кластера 4К и на диск в 64К замечено не было (скорость трансфера в обоих случаях ~ 100 МБ/с). Притом, после первого прохода – скорость действительно увеличилась (на пике до 900 МБ/с!), но при копировании других файлов был получен первоначальный результат (налицо кэширование данных самой ОС). При этом, операции копирования в обратную сторону (с SAN диска на системный) проходят так же. Результаты синтетических тестов SQLIO и SQLIOSIM также различаются в рамках погрешности.
liables
#10 Оставлено : 9 апреля 2011 г. 13:52:11(UTC)
Ранг: Новичок

Группы: Зарегистрированные пользователи
Зарегистрирован: 09.04.2011(UTC)
Сообщений: 2
Баллов: 6

Спасибо большое за советы)) Парочка очень даже помогла

______________
чердачные лестницы на заказ.
RSS Лента  Atom Лента
Пользователи, просматривающие эту тему
Guest
Быстрый переход  
Вы не можете создавать новые темы в этом форуме.
Вы не можете отвечать в этом форуме.
Вы не можете удалять Ваши сообщения в этом форуме.
Вы не можете редактировать Ваши сообщения в этом форуме.
Вы не можете создавать опросы в этом форуме.
Вы не можете голосовать в этом форуме.