20 ловушек переноса Си++ - кода на 64-битную платформу (исходники)Источник: realcoding Андрей Карпов, Евгений Рыжков
Рассмотрены программные ошибки, проявляющие себя при переносе Си++ - кода с 32-битных платформ на 64-битные платформы. Приведены примеры некорректного кода и способы его исправления. Перечислены методики и средства анализа кода, позволяющие диагностировать обсуждаемые ошибки.
1. Отключенные предупреждения
2. Использование функций с переменным количеством аргументов 3. Магические константы 4. Хранение в double целочисленных значений 5. Операции сдвига 6. Упаковка указателей 7. Memsize типы в объединениях 8. Изменение типа массива 9. Виртуальные функции с аргументами типа memsize 10. Сериализация и обмен данными 11. Битовые поля 12. Адресная арифметика с указателями 13. Индексация массивов 14. Смешенное использование простых целочисленных типов и memsize типов 15. Неявные приведения типов при использовании функций 16. Перегруженные функции 17. Выравнивание данных 18. Исключения. 19. Использование устаревших функций и предопределенных констант. 20. Явные приведения типов Диагностика ошибок Юнит-тестирование Просмотр кода Встроенные средства компиляторов Статические анализаторы Заключение Ресурсы Вашему вниманию предлагается статья, посвященная переносу программного кода 32-биных приложений на 64-битные системы. Статья составлена для программистов, использующих Си++, но может быть полезна всем, кто сталкивается с переносом приложений на другие платформы. Нужно четко понимать, что новый класс ошибок, возникающий при написании 64-битных программ, не просто еще несколько новых некорректных конструкций, среди тысяч других. Это неминуемые сложности, с которыми столкнутся разработчики любой развивающейся программы. Данная статья поможет быть готовым к этим трудностям и покажет пути их преодоления. Любая новая технология (как в программировании, так и в других областях) несет в себе помимо преимуществ, некоторые ограничения или даже проблемы использования этой технологии. Точно такая же ситуация происходит в области разработки 64-битного программного обеспечения. Мы все знаем о том, что 64-битное программное обеспечение - это следующий этап развития информационных технологий. Однако не многие программисты пока реально столкнулись с нюансами этой области, а именно разработки 64-битных программ. Мы не будем задерживаться на преимуществах, которые открывает перед программистами переход на 64-битную архитектуру. Данной тематике посвящено большое количество публикаций, и читателю не составит труда их найти. Целью же этой статьи является подробный обзор тех проблем, с которыми может столкнуться разработчик 64-битных программ. В статье Вы познакомитесь:
Приведенная информация позволит Вам:
В статье приводится много примеров, которые для лучшего понимания стоит попробовать в среде программирования. Знакомясь с ними, Вы получите нечто большее суммы отдельных частей. Вы откроете дверь в мир 64-битных систем. Для облегчения понимания дальнейшего текста в начале вспомним некоторые типы, с которыми мы можем столкнуться (см. таблица N1).
В тексте будет использоваться термин "memsize" тип. Под memsize типом мы будем понимать любой простой целочисленный тип, способный хранить в себе указатель и меняющий свою размерность при изменении разрядности платформы с 32-бит на 64-бита. Примеры memsize типов: size_t, ptrdiff_t, все указатели, intptr_t, INT_PTR, DWORD_PTR. Несколько слов следует уделить моделям данных, определяющих соотношения размеров фундаментальных типов для различных систем. В таблице N2 приведены модели данных, которые могут быть нам интересны.
По умолчанию в статье будет считаться, что перенос программ осуществляется с системы имеющую модель данных ILP32 на системы с моделью данных LP64 или LLP64. И последнее, 64-битная модель в Linux (LP64) и Windows (LLP64) имеет различие только в размерности типа long. Поскольку это их единственное отличие, то для обобщения изложения мы будем избегать использования типов long, unsigned long, и будем использовать типы ptrdiff_t, size_t. Приступим к рассмотрению типовых ошибок, возникающих при переносе программ на 64-битную архитектуру. 1. Отключенные предупрежденияВо всех книгах посвященных разработке качественного кода рекомендуется выставлять уровень предупреждений, выдаваемых компилятором на как можно более высокий уровень. Но на практике встречается ситуации, когда для определенных частей проекта выставлен меньший уровень диагностики или вообще выключен. Обычно это очень старый код, который продолжает поддерживаться, но не модифицируется. Программисты, работающие в проекте, привыкли, что этот код работает, и закрывают глаза на его качество. Здесь и кроется опасность пропустить серьезные предупреждения компилятора, при переносе программ на новую 64-битную систему. При переносе приложения следует обязательно включить предупреждения для всего проекта, помогающие проверить код на совместимость и внимательно проанализировать их. Это может существенно сэкономить время при отладке проекта на новой архитектуре. Если этого не сделать, то самые глупые и простые ошибки будут проявлять себя во всем своем многообразии. Вот простейший пример переполнения, который возникнет в 64-битной программе, если полностью игнорировать предупреждения.
2. Использование функций с переменным количеством аргументовКлассическим примером является некорректное использование функций printf, scanf и их разновидностей:
В первом случае не учитывается, что тип size_t не эквивалентен типу unsigned на 64-битной платформе. Это приведет к выводу на печать некорректного результата, в случае если value > UINT_MAX. Во втором случае, автор кода не учел, что размер указателя в будущем может стать более 32 бит. В результате на 64-битной архитектуре данный код приведет к переполнению буфера. Некорректное использование функций с перемененным количеством параметров является распространенной ошибкой на всех архитектурах, а не только 64-битных. Это связано с принципиальной опасностью использования данных конструкций языка Си++. Общепринятой практикой является отказ от них и использование безопасных методик программирования. Мы настоятельно рекомендуем модифицировать код и использовать безопасные методы. Например, можно заменить printf на cout, а sprintf на boost::format или std::stringstream. Если Вы вынуждены поддерживать код, использующий функции типа sscanf, то в формате управляющих строк можно использовать специальные макросы, раскрывающиеся в необходимые модификаторы для различных систем. Пример:
3. Магические константыВ некачественном коде часто встречаются магические числовые константы, наличие которых опасно само по себе. При миграции кода на 64-битную платформу эти константы могут сделать код неработоспособным, если участвуют в операциях вычисления адреса, размера объектов или в битовых операциях. В таблице N3 перечислены основные магические константы, которые могут влиять на работоспособность приложения на новой платформе.
Следует внимательно изучить код на наличия магических констант и заменить их безопасными константами и выражениями. Для этого можно использовать оператор sizeof(), специальные значения из Приведем несколько ошибок, связанных с использованием магических констант. Самой распространенной является запись в виде числовых значений размеров типов.
Во всех случаях, предполагаем, что размер используемых типов всегда равен 4 байта. Исправление кода заключается в использовании оператор sizeof().
или
Иногда может потребоваться специфическая константа. В качестве примера мы возьмем значение size_t, где все биты кроме 4 младших должны быть заполнены единицами. В 32-битной программе эта константа может быть объявлена следующим образом.
Это некорректный код в случае 64-битной системы. Такие ошибки очень неприятны, так как запись магических констант может быть осуществлена различными способами и их поиск достаточно трудоемок. К сожалению, нет никаких путей, кроме как найти и исправить этот код, используя #ifdef или специальный макрос.
Иногда в качестве кода ошибки или другого специального маркера используют значение "-1", записывая его как "0xffffffff". На 64-битной платформе записанное выражение некорректно и следует явно использовать значение -1. Пример некорректного кода, использующий значение 0xffffffff как признак ошибки.
На всякий случай уточним ваше понимание, чему равно значение "(size_t)(-1)" на 64-битной платформе. Можно ошибиться, назвав значение 0x00000000FFFFFFFFu. Согласно правилам языка Си++ сначала значение -1 преобразуется в знаковый эквивалент большего типа, а затем в беззнаковое значение:
Таким образом "(size_t)(-1)" на 64-битной архитектуре представляется значением 0xFFFFFFFFFFFFFFFui64, которое является максимально большим значением для 64-битного типа size_t. Вернемся к ошибке с INVALID_RESULT. Использование константы 0xFFFFFFFFu приводит к невыполнению условия "len == (size_t)(-1)" в 64-битной программе. Наилучшее решение заключается в изменении кода так, чтобы специальных маркерных значений не требовалось. Если по какой-то причине вы не можете от них отказаться или считаете нецелесообразным существенные правки кода, то просто используйте честное значение -1.
4. Хранение в double целочисленных значенийТип double, как правило, имеет размер 64-бита, и совместим со стандартом IEEE-754 на 32-битных и 64-битных системах. Некоторые программисты используют тип double для хранения и работы с целочисленными типами.
Данный пример еще можно пытаться оправдывать на 32-битной системе, так как тип double имеет 52 значащих бит и способен без потери хранить 32-битное целое значение. Но при попытке сохранить в double 64-битное целое число точное значение может быть потеряно (см. рисунок 1). Возможно, приближенное значение вполне применимо в вашей программе, но на всякий случай хочется вас предупредить о потенциальных эффектах на новой архитектуре. И в любом случае не рекомендуется смешивать целочисленную арифметику и арифметику с плавающей точкой. 5. Операции сдвигаОперации сдвига при невнимательном использовании, могут принести много неприятностей при переходе от 32-битной к 64-битной системе. Начнем с примера функции, выставляющей в переменной типа memsize, указанный вами бит в 1.
Приведенный код работоспособен на 32-битной архитектуре и позволяет выставлять биты с номерами от 0 дл 31. После переноса программы на 64-битную платформу возникнет необходимость выставлять биты от 0 до 63. Как вы думаете, какое значение вернет следующий вызов функции SetBitN(0, 32)? Если Вы думаете, что 0x100000000, то авторы рады, что не зря подготовили эту статью. Вы получите 0. Для исправления кода необходимо сделать константу "1" того же типа, что и переменная mask.
или
Еще один вопрос. Чему будет равен результат вызова неисправленной функции SetBitN(0, 31)? Правильный ответ 0xffffffff80000000. Результатом выражения 1 << 31 является отрицательное число -2147483648. Это число представляется в 64-битной целой переменной как 0xffffffff80000000. Следует помнить и учитывать эффекты сдвига значений различных типов. Для лучшего понимания и наглядности изложенной информации в таблице N4 приведен ряд интересных выражений со сдвигами на 64-битной системы.
6. Упаковка указателейБольшое количество ошибок при мигрировании на 64-битные системы связаны с изменением размера указателя по отношению к размеру обычных целых. В среде с моделью данных ILP32 обычные целые и указатели имеют одинаковый размер. К сожалению 32-битный код повсеместно опирается на это предположение. Указатели часто приводятся к int, unsigned int и другим неподходящим типам для выполнения адресных расчетов. Следует четко помнить, что для целочисленного представления указателей следует использовать только memsize типы. Предпочтение, пожалуй, следует отдавать типу uintptr_t, так как он лучше выражает намерения и делает код более переносимым, предохраняя его от изменений в будущем. Рассмотрим два небольших примера.
Оба примера не учитывают, что размер указателя может отличаться от 32-бит. Используется явное приведение типа, отбрасывающее старшие биты в указателе, что является явной ошибкой на 64-битной системе. Исправленные варианты, использующие для упаковки указателей целочисленные memsize типы (intptr_t и DWORD_PTR), приведены ниже:
Опасность двух рассмотренных примеров в том, что сбой в программе может быть обнаружен спустя очень большой промежуток времени. Программа может совершенно корректно работать с небольшим объемом данных на 64-битной системе, пока обрабатываемые адреса находятся в пространстве первых четырех гигабайт памяти. А затем при запуске программы на больших производственных задачах произойдет выделение памяти за пределами этой области. Рассмотренный в примерах код, обрабатывая указатель на объект вне данной области, приведет к неопределенному поведению программы. Следующий приведенный код не будет таиться и проявит себя при первом выполнении.
Исправление также заключается в выборе типа, способного вмещать в себя указатель.
Бывают ситуации, когда упаковка указателя в 32-битный тип просто необходима. В основном такие ситуации возникают при необходимости работы со старыми API функциями. Для таких случаев следует прибегнуть к специальным функциям, таким как LongToIntPtr, PtrToUlong и так далее. В конце хочется заметить, что плохим стилем будет упаковка указателя в типы всегда равные 64-битам. Показанный далее код вновь придется исправлять с приходом 128-битных систем.
7. Memsize типы в объединенияхОсобенностью объединения является то, что для всех элементов членов объединения выделяется одна и та же область памяти, то есть они перекрываются. Хотя доступ к этой области памяти возможен с использованием любого из элементов, элемент для этой цели должен выбираться так, чтобы полученный результат не был бессмысленным. Следует внимательно отнестись к объединениям, имеющим в своем составе указатели и другие члены типа memsize. Когда возникает необходимость работать с указателем, как с целым числом, иногда удобно воспользоваться объединением, как показано в примере, и работать с числовым представлением типа без использования явных приведений.
Данный код корректен на 32-битных системах и некорректен на 64-битных. Изменяя член m_n на 64-битной системе, мы работаем только с частью указателя m_p. Следует использовать тип, который будет соответствовать размеру указателю.
Другое частое использование объединения заключается в представлении одного члена, набором других более мелких. Например, нам может потребоваться разбить значение типа size_t на байты для реализации табличного алгоритма подсчета количества нулевых битов в байте.
Здесь допущена принципиальная алгоритмическая ошибка, заключающаяся в предположении, что тип size_t состоит из 4 байт. Возможность автоматического поиска алгоритмических ошибок пока вряд ли возможна, но мы можем осуществить поиск всех объединений и проверить наличие в них memsize типов. Найдя такое объединение, мы можем обнаружить алгоритмическую ошибку и переписать код следующим образом.
8. Изменение типа массиваИногда в программах необходимо (или просто удобно) представить элементы массива в виде элементов другого типа. Опасное и безопасное приведение типов представлено в следующем коде.
Как видите, результат вывода программы отличается в 32-битном и 64-битном варианте. На 32-битной системе доступ к элементам массива осуществляется корректно, так как размеры типов size_t и int совпадают, и мы видим вывод "2 2". На 64-битной системы мы получили в выводе "2 17179869187", так как именно значение 17179869187 находится в 1-ом элементе массива sizetPtr (см. рисунок 3). В некоторых случаях именно такое поведение и бывает нужно, но обычно это ошибка. Исправление описанной ситуации заключается в отказе от опасных приведений типов путем модернизации программы. Другим вариантом является создание нового массива и копирование в него значений из исходного массива. 9. Виртуальные функции с аргументами типа memsizeЕсли у вас в программе имеются большие иерархии наследования классов с виртуальными функциями, то существует вероятность использования по невнимательности аргументов различных типов, но которые фактически совпадают на 32-битной системе. Например, в базовом классе Вы используете в качестве аргумента виртуальной функции тип size_t, а в наследнике тип unsigned. Соответственно на 64-битной системе этот код будет некорректен. Но такая ошибка не обязательно кроется в сложных иерархиях наследования, и вот один из примеров.
Проследим жизненный цикл разработки некоторого приложения. Пусть первоначально оно разрабатывалось под Microsoft Visual C++ 6.0. когда, функция WinHelp в классе CWinApp имела следующий прототип:
Совершенно верно было осуществить перекрытие виртуальной функции в классе CSampleApp, как показано в примере. Затем проект был перенесен в Microsoft Visual C++ 2005, где прототип функции в классе CWinApp претерпел изменения, заключающиеся в смене типа DWORD на тип DWORD_PTR. На 32-битной системе программа продолжит совершенно корректно работать, так как здесь типы DWORD и DWORD_PTR совпадают. Неприятности проявят себя при компиляции данного кода под 64-битную платформу. Получатся две функции с одинаковыми именами, но с различными параметрами, в результате чего перестанет вызываться пользовательский код. Исправление заключается в использовании одинаковых типов в соответствующих виртуальных функциях.
10. Сериализация и обмен даннымиВажным пунктом при переносе программного решения на новую платформу является преемственность к существующим протоколам обмена данным. Необходимо обеспечить чтение существующих форматов проектов, осуществлять обмен данными между 32-битными и 64-битными процессами и так далее. В основном ошибки данного рода заключаются в сериализации memsize типов и операциях обмена данными с их использованием.
Во всех приведенных примерах имеются ошибки двух видов: использование типов непостоянной размерности в бинарных интерфейсах и игнорирование порядка байт. Использование типов непостоянной размерности. Недопустимо использование типов, которые меняют свой размер в зависимости от среды разработки, в бинарных интерфейсах обмена данными. В языке Си++ все типы не имеют четкого размера и, следовательно, их все невозможно использовать для этих целей. Поэтому создатели средств разработки и сами программисты, создают типы данных, имеющие строгий размер, такие как __int8, __int16, INT32, word64 и так далее. Использование подобных типов обеспечивает переносимость данных между программами на различных платформах, хотя и требует дополнительных усилий. Три показанных примера написаны неаккуратно, что и даст о себе знать при смене разрядности некоторых типов данных с 32-бит до 64-бит. Учитывая необходимость поддержки старых форматов данных, исправление может выглядеть следующим образом.
Но приведенный вариант исправления может являться не лучшим. При переходе на 64-битную систему программа может обрабатывать большее количество данных, и использование в данных 32-битных типов может стать существенным препятствием. В таком случае можно оставить старый код для совместимости со старым форматом данных, исправив некорректные типы. И реализовать новый бинарный формат данных, уже с учетом допущенных ошибок. Еще одним вариантом может стать отказ от бинарных форматов и переход на текстовый формат или другие форматы, предоставляемые различными библиотеками. Игнорирование порядка байт (byte order). Даже после внесения исправлений касающихся размеров типа, вы можете столкнуться с несовместимостью бинарных форматов. Причина - иное представление данных. Наиболее часто это связано с другой последовательностью байт. Порядок байт - метод записи байтов многобайтовых чисел (см. также рисунок 4). Порядок от младшего к старшему (англ. little-endian) - запись начинается с младшего и заканчивается старшим. Этот порядок записи принят в памяти персональных компьютеров с x86-процессорами. Порядок от старшего к младшему (англ. big-endian) - запись начинается со старшего и заканчивается младшим. Этот порядок является стандартным для протоколов TCP/IP. Поэтому, порядок байтов от старшего к младшему часто называют сетевым порядком байтов (англ. network byte order). Этот порядок байт используется процессорами Motorola 68000, SPARC. Разрабатывая бинарный интерфейс или формат данных, следует помнить о последовательности байт. А если 64-битная система, на которую Вы переносите 32-битное приложение, имеет иную последовательность байт, то вы просто будете вынуждены учесть это в своем коде. Для преобразования между сетевым порядком байт (big-endian) и порядком байт (little-endian), можно использовать функции htonl(), htons(), bswap_64, и так далее. 11. Битовые поляЕсли вы используете битовые поля, то вы должны учитывать, что использование memsize типов повлечет изменение размеров структур и выравнивания. Например, приведенная далее структура будет иметь размер 4 байта на 32-битной системе и 8 байт на 64-битной системе.
Но на этом ваша внимательность к битовым полям ограничиваться не должна. Рассмотрим тонкий пример.
Обратите внимание, что если пример скомпилировать для 64-битной системы, то в выражении "addr = obj.a << 17;" присутствует знаковое расширение, несмотря на то, что обе переменные addr и obj.a являются беззнаковыми. Это знаковое расширение обусловлено правилами приведения типов, которые применяются следующим образом (см. также рисунок 5): Член структуры obj.a преобразуется из битового поля типа unsigned short в int. Мы получаем тип int, а не unsigned int из-за того, что 15-битное поле помещается в 32-битное знаковое целое. Выражение "obj.a << 17" имеет тип int, но оно преобразуется в ptrdiff_t и затем в size_t, перед тем как будет присвоено переменной addr. Знаковое расширение происходит в момент совершения преобразования из int в ptrdiff_t. Так что будьте внимательны при работе с битовыми полями. Для избегания описанного эффекта в нашем примере, нам достаточно явно привести obj.a к типу size_t.
12. Адресная арифметика с указателямиПример первый.
Данный пример корректно работает с указателями, если значение выражения "a16 * b16 * c16" не превышает UINT_MAX (4Gb). Такой код мог всегда корректно работать на 32-битной платформе, так как программа никогда не выделяла массивов больших размеров. На 64-битной архитектуре размер массива превысил UINT_MAX элементов. Допустим, мы хотим сдвинуть значение указателя на 6.000.000.000 байт, и по этому переменные a16, b16 и c16 имеют значения 3000, 2000 и 1000 соответственно. При вычислении выражения "a16 * b16 * c16" все переменные, согласно правилам языка Си++, будут приведены к типу int, а уже затем будет произведено их умножение. В ходе выполнения умножение, произойдет переполнение. Некорректный результат выражения будет расширен до типа ptrdiff_t и произойдет некорректное вычисление указателя. Следует старательно избегать возможных переполнений в арифметике с указателями. Для этого лучше всего использовать memsize типы или явное приведение типов в выражениях, где присутствуют указатели. Используя явное приведение типов, мо можем переписать наш код следующим образом.
Если Вы думаете, что злоключения ждут неаккуратные программы только на больших объемах данных, то мы вынуждены вас огорчить. Рассмотрим интересный код для работы с массивом, содержащего всего 5 элементов. Второй пример работоспособен в 32-битном варианте и не работоспособен в 64-битном.
Давайте проследим, как происходит вычисление выражения "ptr + (a + b)":
Затем происходит вычисление выражения "ptr + 0xFFFFFFFFu", но что из этого выйдет, зависит от размера указателя на данной архитектуре. Если сложение будет происходить в 32-битной программе, то данное выражение будет эквивалентно "ptr - 1" и мы успешно распечатаем число 3. В 64-битной программе к указателю честным образом прибавится значение 0xFFFFFFFFu, в результате чего указатель окажется далеко за пределами массива. И при доступе к элементу по данному указателю нас ждут неприятности. Для предотвращения показанной ситуации, как и в первом случае, рекомендуем использовать в арифметике с указателями только memsize типы. Два варианта исправления кода:
Вы можете возразить и предложить следующий вариант исправления:
Да, такой код будет работать, но он плох по ряду причин:
13. Индексация массивовДанная разновидность ошибок выделена для лучшей структуризации изложения, так как индексация в массивах с использованием квадратных скобок это всего лишь иная запись адресной арифметики, рассмотренной до этого. В программировании на языке Си, а затем и Си++ сложилась практика использовать в конструкциях следующего вида переменные типа int/unsigned:
Но время идет и все меняется. И вот теперь пришло время сказать - больше так не делайте! Используйте для индексации (больших) массивов только memsize типы. Приведенный код не сможет обработать в 64-битной программе массив, содержащий более UINT_MAX элементов. После доступа к элементу с индексом UINT_MAX произойдет переполнение переменной Index и мы получим вечный цикл. Чтобы окончательно убедить Вас в необходимости использования только memsize типов для индексации и в выражениях адресной арифметики, приведем последний пример.
Данный код взят из реальной программы математического моделирования, в которой важным ресурсом является объем оперативной памяти, и возможность на 64-битной архитектуре использовать более 4 гигабайт памяти существенно увеличивает вычислительные возможности. В программах данного класса для экономии памяти часто используют одномерные массивы, осуществляя работу с ними как с трехмерными массивами. Для этого существуют функции, аналогичные GetCell, обеспечивающие доступ к необходимым элементам. Но приведенный код будет корректно работать только с массивами, содержащими менее INT_MAX элементов. Причина - использование 32-битных типов int для вычисления индекса элемента. Программисты часто допускают ошибку, пытаясь исправить код следующим образом:
Они знают, что по правилам языка Си++ выражение для вычисления индекса будет иметь тип ptrdiff_t и надеются за счет этого избежать переполнения. Но переполнение может произойти внутри подвыражения "y * Width" или "z * Width * Height", так как для их вычисления по-прежнему используется тип int. Если Вы хотите исправить код, не изменяя типов переменных, участвующих в выражении, то Вы можете явно привести каждую переменную к memsize типу:
Другое решение - изменить типы переменных на memsize тип:
14. Смешенное использование простых целочисленных типов и memsize типовСмешанное использование memsize и не memsize типов в выражениях может приводить к некорректным результатам на 64-битных системах и быть связано с изменением диапазона входных значений. Рассмотрим ряд примеров.
Это пример вечного цикла, если Count > UINT_MAX. Предположим, что на 32-битных системах этот код работал с диапазоном менее UINT_MAX итераций. Но 64-битный вариант программы может обрабатывать больше данных и ему может потребоваться большее количество итераций. Поскольку значения переменной Index лежат в диапазоне [0..UINT_MAX], то условие "Index != Count" никогда не выполнится, что и приводит к бесконечному циклу. Другая частая ошибка - запись выражений следующего вида:
Ранее уже рассматривались подобные примеры, когда при вычислении значений с использованием не memsize типов происходило арифметическое переполнение. И конечный результат был некорректен. Поиск и исправление приведенного кода осложняется тем, что компиляторы, как правило, не выдают на него никаких предупреждений. С точки зрения языка Си++ это совершенно корректная конструкция. Происходит умножения нескольких переменных типа int, после чего результат неявно расширяется до типа intptr_t и происходит присваивание. Приведем небольшой код, показывающий опасность неаккуратных выражений со смешенными типами (результаты получены с использованием Microsoft Visual C++ 2005, 64-битный режим компиляции).
Необходимо чтобы все операнды в подобных выражениях были заранее приведены к типу большей разрядности. Помните, что выражение вида
вовсе не гарантирует правильный результат. Оно гарантирует только, что выражение "intptr_t(x) * y * z" будет иметь тип intptr_t. Правильный результат, показанный этим выражением в примере - везение, обусловленное конкретной версией компилятора и фазой луны. Порядок вычисления выражения с операторами одинакового приоритета не определен. Точнее, компилятор волен вычислять подвыражения в том порядке, который он считает более эффективным, даже если подвыражения вызывают побочные эффекты. Порядок возникновения побочных эффектов не определен. Выражения, включающие в себя коммутативные и ассоциативные операции (*, +, &, /, ^), могут быть реорганизованы произвольным образом, даже при наличии скобок. Для задания определенного порядка вычисления выражения необходимо использовать явную временную переменную. По этому, если результатом выражения должен являться memsize тип, то в выражении должны участвовать только memsize типы. Или элементы, приведенные к memsize типам. Правильный вариант:
Смешенное использование типов может проявляться и в изменении программной логики.
На 32-битной системе переменная val_1 согласно правилам языка Си++ расширялась до типа unsigned int и становилась значением 0xFFFFFFFFu. В результате условие "0xFFFFFFFFu > 1" выполнялось. На 64-битной системе наоборот расширяется переменная val_2 до типа ptrdiff_t. В этом случае уже проверяется выражение "-1 > 1". На рисунке 6 схематично отображены происходящие преобразования. Если вам необходимо вернуть прежнее поведение кода вам следует изменить тип переменной val_2.
15. Неявные приведения типов при использовании функцийРассматривая предыдущий класс ошибок, связанный со смешиванием простых целочисленных типов и memsize типов, мы рассматривали только простые выражения. Но схожие проблемы могут проявиться и при использовании других конструкций языка Си++.
В случае работы с большими массивами (более INT_MAX элементов) данный код будет вести себя некорректно, и мы будет адресоваться не к тем элементам массива MyArray, к которым рассчитываем. Не смотря на то, что мы возвращаем значение типа size_t, выражение "x + y * Width + z * Width * Height" вычисляется с использованием типа int. Мы думаем, Вы уже догадались, что исправленный код будет выглядеть следующим образом:
В следующем примере, у нас вновь смешивается memsize тип (указатель) и простой тип unsigned.
Результат выражения "end - begin" имеет тип ptrdiff_t. Поскольку функция возвращает тип unsigned, то происходит неявное приведение типа, при котором старшие биты результата теряются. Таким образом, если указатели begin и end, ссылаются на начало и конец массива, по размеру большего UINT_MAX (4Gb), то функция вернет некорректное значение. И еще один пример, но на этот раз рассмотрим не возвращаемое значение, а формальный аргумент функции.
Вам этот код не напоминает пример некорректной арифметикой с указателями, рассмотренный ранее? Да, здесь происходит то же самое. Некорректный результат возникает при неявном расширении фактического аргумента, имеющего значение 0xFFFFFFFF и тип unsigned до типа ptrdiff_t. 16. Перегруженные функцииПри переносе 32-битных программ на 64-битную платформу может наблюдаться изменение логики ее работы, связанное с использованием перегруженных функций. Если функция перекрыта для 32-битных и 64-битных значений, то обращение к ней с аргументом типа memsize будет транслироваться в различные вызовы на различных системах. Этот прием может быть полезен, как например, в приведенном коде:
Но такое изменение логики хранит в себе опасность. Представьте себе программу, где для каких-то целей используется класс для организации стека. Особенность этого класса, что он позволяет хранить значение различных типов.
Неаккуратный программист помещал и затем выбирал из стека значений различных типов (ptrdiff_t и int). На 32-битной системе их размеры совпадали, все замечательно работало. Когда в 64-битной программе изменился размер типа ptrdiff_t, то в стек стало помещать больше байт, чем затем извлекаться. Думаем, Вам понятен данный класс ошибок и что следует внимательно относиться к вызову перегруженных функций, передавая фактические аргументы типа memsize. 17. Выравнивание данныхПроцессоры работают эффективнее, когда имеют дело с правильно выровненными данными. Как правило, 32-битный элемент данных должен быть выровнен по границе кратной 4 байт, а 64-битный элемент по границе 8 байт. Попытка работать с невыровненными данными на процессорах IA-64 (Itanium), как показано в следующем примере, приведет к возникновению исключения.
Если Вы вынуждены работать с невыровненными данными на Itanium, то Вы должны явно указать это компилятору. Например, воспользоваться специальным макросом UNALIGNED:
Такое решение не эффективно, так как доступ к не выровненным данным будет происходить в несколько раз медленнее. Лучшего результата можно достичь, располагая в 64-битные элементы данных до 32,16 и 8-битных элементов. На архитектуре x64 при обращении к не выровненным данным исключения не возникает, но их также следует избегать. Во-первых, из-за существенного замедления скорости доступа к таким данным, а во-вторых, из-за высокой вероятности переноса программы в будущем на платформу IA-64. Рассмотрим еще один пример кода, не учитывающий выравнивание данных.
Если мы хотим выделить объем памяти, необходимый для хранения объекта типа MyPointersArray, содержащего 5 указателей, то мы должны учесть, что начало массива m_arr будет выровнено по границе 8 байт. Корректный расчет размера должен выглядеть следующим образом:
В приведенном коде мы узнаем смещение последнего члена структуры, и суммируем это смещение с его размером. Смещение члена структуры или класса можно узнать с использованием макроса offsetof или FIELD_OFFSET. Всегда используйте эти макросы для получения смещения в структуре, не закладываясь на Ваше знание размеров типов и выравнивания. Пример кода с правильным вычислением адреса члена структуры:
18. Исключения.Бросание и обработка исключений с участием целочисленных типов не является хорошей практикой программирования на языке Си++. Для этих целей следует использовать более информативные типы, например классы, производные от классов std::exception. Но иногда все-таки приходится работать с менее качественным кодом, как например показанным ниже.
Следует тщательно избегать бросания или обработки исключений с использованием memsize типов, так как это чревато изменением логики работы программы. Исправление данного кода может заключаться в замене "catch (int)" на "catch (ptrdiff_t)". А более правильным исправлением будет использование специального класса для передачи информации о возникшей ошибке. 19. Использование устаревших функций и предопределенных констант.Разрабатывая 64-битное приложение, помните об изменениях среды, в которой оно теперь будет выполняться. Часть функций станут устаревшими, их будет необходимо изменить на обновленные варианты. Примером такой функции в ОС Windows будет GetWindowLong. Обратите внимание на константы, относящиеся к взаимодействию со средой в которой выполняется программа. В Windows подозрительными будут являться строки содержащие "system32" или "Program Files". 20. Явные приведения типовБудьте аккуратны с явными приведениями типов. Они могут изменить логику выполнения программы при изменении разрядности типов или приводить к потере значащих битов. Привести типовые примеры ошибок, связанные с явным приведением типов сложно, так как они очень разнообразны и специфичны для разных программ. С некоторыми из ошибок, связанных с явным приведением типов Вы уже познакомились ранее. Диагностика ошибокДиагностирование ошибок возникающих при переносе 32-битных программ на 64-битные системы является непростой задачей. Перенос недостаточно качественного кода, разработанного без учета особенностей других архитектур, может потребовать много времени и усилий. Поэтому уделим здесь немного внимания описанию методик и средств, которые смогут упростить эту задачу. Юнит-тестированиеЮнит-тестирование (англ. unit test) давно завоевало заслуженное уважение среди программистов. Юнит-тесты помогут проверить корректность программы после переноса на новую платформу. Но тут есть одна тонкость, о которой Вы должны помнить. Юнит-тестирование может не позволить Вам проверить новые диапазоны входных значений, которые становятся доступные на 64-битных системах. Юнит-тесты классически разрабатываются таким образом, чтобы по возможности проходить за минимальное время. И та функция, которая обычно работает с массивом размеров в десятки мегабайт, в юнит-тестах, скорее всего, будет обрабатывать десятки килобайт. Это обоснованно, так как эта функция в тестах может вызваться много раз с различными наборами входных значений. Но вот перед вами 64-битный вариант программы. И рассматриваемая нами функция теперь обрабатывает уже более 4 гигабайт данных. Соответственно возникает необходимость увеличить входной размер массива и в тестах до размеров более 4 гигабайт. Проблема в том, что время прохождения тестов в таком случае увеличится на несколько порядков. По этому, модифицируя наборы тестов, помните о компромиссе между скоростью выполнения юнитестов и полнотой проверок. К счастью убедиться в работоспособности Ваших приложений могут помочь другие методики. Просмотр кодаПросмотр кода (англ. code review) самая лучшая методика поиска ошибок и улучшения кода. Совместный тщательный просмотр кода может полностью избавить программу от ошибок связанных с особенностями разработки 64-битных приложений. Естественно в начале следует узнать, какие именно ошибки следует искать, иначе просмотр может не дать положительных результатов. Для этого необходимо заранее ознакомиться с этой и другими статьями, посвященных переносу программ с 32-битных систем на 64-битные. Ряд интересных ссылок по данной тематике Вы можете найти в конце статьи. Но у этого подхода к анализу исходного кода есть один существенный недостаток. Он требует очень большого количества времени из-за чего практически неприменим на больших проектах. Компромиссом является использование статических анализаторов. Статический анализатор можно рассматривать как автоматизированную систему просмотра кода, где для программиста создается выборка потенциально опасных мест для проведения им дальнейшего анализа. Но в любом случае желательно провести несколько просмотров кода, с целью совместного обучения команды поиску новых разновидностей ошибок, проявляющих себя на 64-битных системах. Встроенные средства компиляторовЧасть задач с поиском дефектного кода позволяют решать компиляторы. В них часто бывают встроены различные механизмы для диагностирования рассматриваемых нами ошибок. Например, в Microsoft Visual C++ 2005 вам могут быть полезны следующие ключи: /Wp64, /Wall, а в SunStodio C++ ключ -xport64. К сожалению, предоставляемые ими возможности, часто недостаточны и не стоит полагаться только на них. Но в любом случае крайне рекомендуется включить соответствующие опции компилятора для диагностики ошибок в 64-битном коде. Статические анализаторыСтатические анализаторы - прекрасное средство повышения качества и надежности программного кода. Основная сложность, связанная с использованием статических анализаторов заключается в том, что они генерируют довольно много ложных сообщений о потенциальных ошибках. Программисты, будучи по натуре ленивыми, используют этот аргумент, чтобы так или иначе не заниматься исправлениями найденных ошибок. В Microsoft эта проблема решается безусловным внесением обнаруженных ошибок в bug tracking систему. Тем самым у программиста не остается выбора между исправлением кода и попытками избежать этого. Мы считаем, что такие жесткие правила оправданы. Выигрыш от качественного кода существенно покрывает издержки времени на статический анализ и соответствующую модификацию кода. Выигрыш достигается за счет облегчения поддержки кода и уменьшения сроков отладки и тестирования. Статические анализаторы могут с успехом использоваться для диагностирования многих из рассмотренных в статье классов ошибок. Авторам известны 3 статических анализатора, которые заявляют о наличии средств диагностирования ошибок, связанных с переносом программ на 64-битные системы. Хотим сразу предупредить, что можем заблуждаться по поводу возможностей, которыми они обладают, тем более что это развивающиеся продукты и новые версии могут иметь большую функциональность.
ЗаключениеЕсли Вы добрались до этого места в тексте, мы рады Вашему интересу. Надеемся, статья принесла Вам пользу и поможет облегчить разработку и отладку 64-битных приложений. Мы будем рады получить ваши отзывы, замечания, поправки, дополнения и непременно внести их в следующую версию статьи. Чем больше мы будем описывать типовые ошибки, тем с большей пользой сможем использовать опыт друг друга и получать помощь. |