*nix new's

На саммите разработчиков Linux ядра и пользователей, основной разработчик файловых систем семейства ext, Ted Ts'o, представил доклад с идеями по внедрению файловой системы Ext4. План предусматривает альфа-тестирование Ext4 в этом году на ноутбуках нескольких разработчиков, в следующем году к тестированию будут привлечены серверы, в 2010 году предварительный релиз ext4 будет устанавливаться по умолчанию в некоторых популярных дистрибутивах Linux, полная стабилизация ext4 ожидается в 2011 году, а переход enterprise-дистрибутивов вероятно произойдет только в 2012 году.

Что касается btrfs, разрабатываемой при поддержке компании Oracle, то разработка всех запланированных возможностей может быть завершена в 2009 году, после чего начнется длительный период тестирования, оптимизации и отладки. Другим критическим звеном остается разработка утилиты для проверки целостности и восстановления файлов. По словам Ted Ts'o, оставшиеся 20% доработок займут 80% от всех усилий, затраченных при разработке. Andrew Morton предположил, что файловая система Btrfs может быть включена в состав основного Linux ядра уже начиная с версии 2.6.29.

На саммите также была обсуждена проблема работы современных файловых систем в условиях неудержимого роста размера дисковых накопителей - размер дисков удваивается каждые несколько лет. Находящаяся на стадии тестирования файловая система ext4 поддерживает адресацию до 1 эксабайта данных (ext3 поддерживает разделы размером 16 терабайт), файл в ext4 может иметь размер до 16 терабайт (в ext3 - 2 терабайта). Теоретический предел дискового раздела файловой системы BTRFS (на стадии альфа тестирования) равен 18 эксабайтам.

Другим важным направлением развития является адаптация файловых систем для эффективного использования твердотельных накопителей, набирающих популярность.

Организация Linux Foundation представила текст предварительной версии стандарта LSB 4.0 (Linux Standards Base 4.0). Стандарт определяет набор правил, средств разработки, бинарных интерфейсов и библиотек, позволяющих значительно упростить создание продукта, без изменений работающего в любом LSB-совместимом дистрибутиве Linux.

В новой версии стандарта расширены возможности автоматизированного тестового комплекта - добавлено средство для тестирования приложений на предмет совместимости с требованиями стандарта и с дистрибутивами Linux, находящимися в базе данных LSB. Особенно радует, что Application Checker создан российскими разработчиками из института системного программирования Российской Академии Наук (сайт проекта linuxtesting.ru).

Другие новшества:

• В состав LSB 4 вошел комплект средств для разработки (SDK), обеспечивающий совместимость с прошлыми версиями стандарта. Т.е. можно разрабатывать и тестировать приложения, совместимые с LSB 3.0, 3.1 и 3.2, без установки отдельных комплектов для данных версий LSB;
  
• Определены спецификации и тестовый пакет для создания shell-скриптов, работающих с разными реализациями shell-интерпретаторов (например, позволяет создавать скрипты, работающие не только в bash);
  
• Определен рекомендуемый набор библиотек для шифрования данных, выбор сделан в пользу Mozilla Network Security Services (NSS) и Netscape Portable Runtime (NSPR). Данные пакеты были выбраны, так как с добавлением OpenSSL в стандарт имеются серьезные проблемы, вызванные плохой обратной совместимостью версий OpenSSL;
  
• Полностью переработан мини-дистрибутив (образ chroot окружения) LSB Sample Implementation (LSB-SI), позволяющий проводить тестирование приложений в изолированном окружении, удовлетворяющем требованию спецификации LSB. Теперь LSB-SI создан при помощи системы rPath Conary, а на на основе Linux From Scratch, как было раньше;
  
• Расширен набор тестов для создателей Linux дистрибутивов.
  

Ted Ts'o, руководитель по разработке стратегии развития платформы (Chief Platform Strategist) в Linux Foundation, уточнил, что в настоящее время 234 приложения различных вендоров готовы к прохождению LSB 4.0 сертификации.

10 дней назад в Бразилии состоялись выборы префектов и депутатов муниципальных советов, в которых использовалось более 400 тысяч электронных автоматов для голосования с программным обеспечением на базе Linux. Общее число граждан Бразилии, имеющих право голоса, составляет 130 миллионов, что дает право рассматривать данное событие как одно из самых крупных внедрений Linux в истории. Процент принявших участие в голосовании в Бразилии приближается к 100%, так как в случае нескольких пропусков, человек лишается ряда прав, таких как получение загранпаспорта, возможности оформления кредита в банке и т.д.

Бразильский Центральный Избирательный Комитет реализовал проект замены программного обеспечения автоматов для голосования с Windows CE и VirtuOS на GNU/Linux, с целью добиться прозрачности подсчета голосов и увеличения безопасности системы в целом. Представители ЦИК официально разрешили представителями ресурса br-linux.org опубликовать скриншоты и видео процесса загрузки одного из автоматов.

Организация Qt Software (до покупки Нокией известная, как Trolltech) объявила сегодня о том, что концерн LG-Nortel будет использовать платформу Qt Extended при разработке новой линейки коммуникационных устройств, включающей как проводные, так и Wi-Fi телефоны и видеофоны. Qt Extended — это новое название платформы для встраиваемых и мобильных Linux-устройств Qtopia, которая состоит из менеджера управления окнами с функцией интернационализации и локализации, системы синхронизации, распознавания рукописного ввода и множества игровых и мультимедийных программ.

По словам президента ES R&D центра LG-Nortel мистера Sung-Tae Park, использование Qt Extended, завоевавшего репутацию стабильного продукта, позволит консорциуму ускорить разработку и адаптацию ПО и сократить издержки на целую категорию выпускаемых IP устройств связи. Богатый функционалом пользовательский интерфейс Qt Extended используется в более чем 45 моделях мобильных устройств.

Кроме того, крупнейший австралийский авиаперевозчик Qantas будет устанавливать на своих лайнерах мультимедийные центры Panasonic EX2 IFE, использующие ОС Linux. Устройства объединяются в сеть с помощью высокоскоростного оптического канала и будут показывать новости, кино и т.п., обслуживая до 600 пассажиров одновременно. Площадками для развертывания таких мультимедиа систем станут самолеты Airbus A380s, B787 "Dreamline" и B767-300.

Компания Qt Software планирует через несколько недель выпустить первую тестовую версию новой среды разработки на языке C++ - Greenhouse, являющейся воплощением грез об идеальной IDE для Qt-разработчиков. Об этом было объявлено на конференции Qt Developer Days.

Greenhouse создается с расчетом на закаленных программистов, привыкших к использованию таких инструментов как vi и emacs. Интерфейс системы будет максимально быстрым, простым и лишенным излишеств, но позволяющим проконтролировать процесс сборки на любом уровне, а также поддерживать полноценные средства управлений через клавиатурные комбинации, позволяющие обойтись без лишних действий мышью, только отвлекающих от процесса разработки.

Программистам будут доступны несколько режимов работы (полноэкранный и многооконный), которые можно настраивать на свое усмотрение. Система включает в себя средства для отладки, компиляции и визуального создания элементов интерфейса. Редактор кроме традиционной системы подсветки синтаксиса и ошибок, будет снабжен контекстно-зависимой системой интерактивной документации.

Сообщается, что среда разработки будет выпускаться для трех платформ - Windows, Linux и Mac OS X. Исходные тексты Greenhouse будут доступны под лицензией GPL. Разработка IDE ведется уже на протяжении трех лет.

Глобальный экономический кризис предоставляет уникальный шанс и большие возможности для открытого программного обеспечения, уверен исполнительный директор Red Hat Джим Уайтхерст. Сейчас он находится с серией поездок по Азиатско-Тихоокеанскому региону и сегодня выступал в Сиднее.

По его словам, в нынешних условиях с открытым программным обеспечением компании могут консолидировать свою технологическую инфраструктуру и снизить затраты на обслуживание. "Но есть и плохие новости, когда условия становятся жестче, люди перестают инвестировать в будущие технологии. Я ожидаю снижение уровня затрат на новые технические решения", - говорит он.

Все же Уайтхерст отметил, что он довольно много встречается с главами других компаний и видит растущую заинтересованность в открытом программном обеспечении, как реальной альтернативе традиционному коммерческому софту.

"Все что я знаю, так это то, что сейчас открытый софт находится в значительно более выгодном положении в сравнении с нашими конкурентами. Открытое ПО обеспечивает гораздо более выгодную экономическую модель", - уверен CEO RedHat.

Опубликован отчет с завершившегося несколько дней назад саммита, нацеленного на объединение усилий разработчиков ядра и наиболее заинтересованных пользователей. Некоторые наиболее интересные моменты:
Представлен план внедрения файловых систем Ext4 и Btrfs (был освещен в новости от 14 октября). Ожидается внедрение ext4 в течение следующих 10 месяцев в популярные Linux дистрибутивы, развиваемые силами комьюнити. Разработка всех запланированных возможностей Btrfs может быть завершена в 2009 году, альфа-тестирование Btrfs будет производиться в этом году на ноутбуках нескольких разработчиков, в следующем году к тестированию будут привлечены серверы, в 2010 году предварительный релиз Btrfs будет доступен из коробки в некоторых популярных дистрибутивах Linux, полная стабилизация ext4 ожидается в 2011 году, а переход enterprise-дистрибутивов вероятно произойдет только в 2012 году. Btrfs может быть включена в состав основного Linux ядра уже начиная с версии 2.6.29. Разработку Btrfs возглавляет Oracle, при участии программистов из компаний IBM, Intel и Novell.
Новый переработанный "multipath" код в Device Mapper (DM), с улучшенными средствами контроля и обработки ошибок, опробован в продакшин;
Затронута тема улучшения средств поддержания целостности данных в подсистеме ввода/вывода и файловых системах, нацеленных на уменьшение вероятности потери данных в случае сбоя. Например, в новом ядре появился механизм позволяющий добавлять к данным на SCSI устройствах проверочную информацию (контрольные суммы и не только) на блочном уровне или уровне файловой системы и сохранять ее на физическом носителе. Рассматривались работы по добавлению контрольных сумм для данных и мета-данных в файловых системах ext4, BtrFS и XFS, а также методы уменьшения времени выполнения fsck для ext4;
Перспективным направлением является доведение до конца реализации поддержки NFS v4.1 (parallel NFS) и добавления возможности по кэшированию на стороне клиента данных NFS разделов. Интерес в этой области вызван тем, что многие крупные финансовые клиенты используют в датацентрах тысячи серверов, обмен информацией на которых построен на базе NFS или AFS.
Представители сообщества разработчиков призвали крупные компании, использующие Linux, способствовать поддержке и распространению открытых драйверов устройств, разработанных поставщиками данных компаний. Также компаниям предложили участвовать в оценке и тестировании базового ядра, а не только ядер поставляемых в дистрибутивах. Интересно, что предложение не осталось без внимания, один из крупных банков согласился организовать систему тестирования новых ядер на своих мощностях;
На сайте Linux Foundation решено создать базу знаний, в которой будут отражен опыт крупных компаний и рекомендации представителей сообщества разработчиков, по оптимальному использованию различных компонент ядра.

Armijn Hemel из компании Loohuis Consulting представил 26 страничное руководство "The GPL Compliance Engineering Guide" (PDF, 500Кб), в котором обобщил опыт участников ресурса gpl-violations.org по обнаружению GPL кода в бинарных прошивках различных аппаратных устройств.

Многие производители потребительской электроники не гнушаются включением GPL кода в свои проприетарные прошивки, в том числе и основанные на платформе Windows. Некоторые из компаний тщательно скрывают это, другие - не делают из этого тайны и даже распространяют исходные тексты используемых GPL программ, например, на сайте или в составе SDK. При анализе устройств от первых производителей, задача состоит в обнаружении использования GPL кода, а от вторых - поднятие фактов скрытой модификации кода, без публикации внесенных изменений. Получить от производителя все исходные тексты на проверку практически невозможно, поэтому энтузиасты прибегают к выявлению нарушений лицензионного соглашения по косвенным признакам.

Первым делом производится сканирование сетевых возможностей устройства. Тип операционной системы и серверные приложения можно обнаружить по особенностям реализации сетевого стека или протокола, например, при помощи утилиты nmap.

Второй шаг - анализ бинарной прошивки и выявление наличия сигнатур, свойственных определенным открытым программам. Для выявления использования GPL-лицензированных загрузчиков производится оценка особенностей загрузки устройства. Оценив применяемые способы сжатия образа загружаемого ядра, можно выявить применение gzip, bzip2, LZMA и 7z. Далее можно определить тип файловой системы (часто используют squashfs, ext2fs, cramfs, romfs, jffs2) и примонтировать ее для исследования содержимого.

После получения доступа к ФС, без проблем можно сразу выявить нарушение GPL-лицензии для программ написанных на интерпретируемых языках, например, внесение изменений в perl-скрипт бэкапа. После этого можно приступить к изучению бинарных программ, выявляя скрытые программы и исследуя модификации путем сравнения со сборкой эталонной программы.

В случае проблем с получением прошивки, анализ производится через физический доступ к устройству через последовательный порт или JTAG-интерфейс, выводы для которых присутствуют на плате.

Министр связи и массовых коммуникаций РФ, Игорь Щёголев, на пленарном заседании «Информационное общество и современные технологии доставки информации», проведенной в рамках выставки «ИНФОКОМ-2008» заявил:

"В развитии приоритетного национального проекта «Образование» ключевую роль призваны сыграть региональные программы информатизации. Нам предстоит сделать следующий шаг – перейти на использование отечественного пакета свободного программного обеспечения для школ. И на выставке также в частности демонстрируются классы, где проводится обучение пользованию свободным программным обеспечением.

Согласно проекту «Образование» до конца 2009 года пакет свободного программного обеспечения будет установлен на всех школьных компьютерах как альтернатива коммерческому ПО. Таким образом, по истечении 3-х лет школы смогут сделать выбор: использовать платные лицензионные программные продукты, приобретая их за свой счет, или перейти на отечественное свободное программное обеспечение. Этот опыт мы планируем в дальнейшем распространить на другие бюджетные учреждения, в том числе органы государственной власти."

Новый отчет, составленный группой экспертов по заказу некоммерческой организации Linux Foundation, и отражающий примерную стоимость типичного Linux дистрибутива был опубликован на этой неделе. Расчеты показывают, что для того чтобы «с нуля» разработать систему, аналогичную Fedora 9, потребовалось бы затратить 10.8 млрд. долларов. Стоимость же только одного ядра оценивается $1.4 млрд.

Отчет стал продолжением работы, начатой в 2002 году Дэвидом Вилером (David A. Wheeler), который построил свое исследование стоимости Linux на подсчете количества строк исходного кода, взяв за основу дистрибутив Red Hat Linux 7.1. На то время, по меркам разработки проприетарного кода, дистрибутив должен был стоить более 1.2 млрд. долларов.

В работе сделаны акценты на следующие ключевые моменты:

• Используя данные на 2008 год по зарплате разработчиков , создание дистрибутива Fedora 9, потребует 10.8 млрд. долларов. Система содержит 204,5 млн. строк кода распределенного по 5547 пакетам. Трудозатраты оцениваются в 60 тыс. человеко-лет.
  
• Применяя те же критерии к расчету стоимости ядра Linux, в отчете приводятся следующие цифры: 6.8 млн. строк кода, 7.5 тыс. человеко-часов и 1.4 млрд. долларов на разработку.
  
• Совместные усилия, приложенные при разработке дистрибутива, позволили создать непревзойденный по экономической ценности проект. Только за последние 2 года более 3200 разработчиков из 200 компаний внесли свой вклад в улучшение ядра Linux. Много большее количество участников было задействовано в создании всех остальных дистрибутивов Linux.
• Поэтому оценка полной экономической ценности проделанной работы является лишь приблизительной. Все допущения и приближения, а так же причины, по которой была выбрана существующая методология с ее достоинствами и недостатками, так же упомянуты в отчете.

10 наиболее крупных пакетов, из состава Fedora 9:
Пакет - Млн.строк
kernel-2.6.25i686 - 5.9
OpenOffice.org - 4.9
Gcc-4.3.0-2 - 3.1
Enterprise Security Client 1.0.1 - 2.6
eclipse-3.3.2 - 2.2
Mono-1.9.1 - 2.1
firefox-3.0 - 2
bigloo3.0b - 1.8
gcc-3.4.6 - 1.8
ParaView3.2.1 - 1.5