Использование утилиты davfs2 для монтирования сетевых облачных хранилищ по протоколу WebDAVУстановкаНастройкаРезервное копированиеШифрованиеПроблемыСсылки

Настройка монтирования

fstab

Сопоставление адреса облачного диска и точки его монтирования производится за счет информации в файле «/etc/fstab» (см. fstab, fstab). В этот файл следует внести информацию о параметрах монтирования для каждого облачного диска. Для редактирования этого файла можно выполнить команду (требуются административные привилегии)

sudo gedit etcfstab

Файл «/etc/fstab» следует дополнить строкой (дописать в самом конце)

$WebDAV_Address $PathToMountPoint davfs user,rw,noauto  

или

$WebDAV_Address $PathToMountPoint davfs user,rw,_netdev  

где «$WebDAV_Address» надо обязательно заменить на веб-адрес поставщика услуги сетевого облачного диска, а «$PathToMountPoint» обязательно заменить на абсолютный путь к точке монтирования (без переменных среды, начинающихся с символа «$», путь должен начинаться с символа «/»). Опция «noauto» указывает, что монтирование производится вручную (см. ниже), в то время как альтернативная ей опция «_netdev» – что монтирование будет произведено автоматически при наличии подключенного сетевого интерфейса (см. fstab).

Наличие опции noauto или _netdev обязательно, в противном случае считается, что указана опция auto и система будет пытаться подключить сетевой диск до поднятия самого сетевого интерфейса

Например, для распространенных поставщиков облачных дисков (и соответственно подобранного названия точки монтирования) эта строка описана ниже.

• Облачные диски на основе «ownCloud» (см. ownCloud, OwnCloud). Здесь есть особенность, т.к. сервис «ownCloud» может работать на вашем сервере, тогда адрес необходимо прописывать следующим образом

  http://ваш_сервер.ru/owncloud/files/webdav.php

  если вы пользуетесь общим сервером «ownCloud», то строка в «/etc/fstab» примет вид:

  http://getfreecloud.comfileswebdav.php mediaownСloud davfs user,rw,noauto  

  Еще один поставщик облачного диска, работающего на основе «ownCloud», это «OwnCube». Строка в «/etc/fstab» может иметь вид

  https://owncube.comfileswebdav.php mediaOwnCube davfs user,rw,noauto  

При ручном наборе этих строк обратите внимание, на то, что многие поставщики облачных дисков используют протокол HTTPS вместо HTTP.

Проверка монтирования

После завершения данных манипуляций целесообразно проверить монтирование, выполнив команду «mount»

mount $PathToMountPoint

где «$PathToMountPoint» точка монтирования облачного диска описанная в «/etc/fstab». Или

mount $WebDAV_Address

где $WebDAV_Address адрес для доступа к облачному диску, прописанный в «/etc/fstab».

Отмонтировать такой диск можно командой «umount»

umount $PathToMountPoint

или

umount $WebDAV_Address

Яндекс диск API

API (Application Programming Interface) – оболочка, используемая для программирования приложений. При помощи этого ПО Яндекса сторонние разработчики встраивают функционал онлайн-хранилища в собственные программы. Комплект распространяется бесплатно на официальном сайте с поддоменом tech. Помимо совместимости с Windows-приложениями, поддерживаются Mac OS X, мобильные платформы Windows Phone, IOS и Android.

Для веб-программистов Yandex представил пакеты, которые при помощи виджетов легко интегрируют хранилище в работу сайта.

API реализован на открытом протоколе WebDAV, в основе которого лежит HTTP (протокол передачи гипертекста). Программа позволяет моментально загрузить файл на сервер, если такой уже синхронизирован пользователем сервиса. Функционал работает по принципу сверки контрольных сумм. Когда они совпадают, происходит моментальная загрузка. Функция получила название «Дедупликация».

Программисты диска, помимо API для удобства разработчиков выпустили и полноценный пакет SDK Yandex, доступный на Java, а также объектно-ориентированных языках программирования C Sharp и Objective-C.

Предисловие

Кто-нибудь помнит о том, что у Mail.Ru есть собственное облачное хранилище? Оно довольно скромное по сравнению, например, с Диском от Яндекса. Без денежных вложений Облако Mail.Ru предоставляет 8 Гб места, а Яндекс дарит 10 Гб, которые можно «разогнать» приглашениями друзей до 20. Можно было бы забыть про Облако, если бы не акция невиданной щедрости на рубеже 2013-2014 годов — облачное хранилище можно было расширить до аж 1 терабайта раз и навсегда.

До недавнего времени официального способа подключить Облако как сетевой диск не было. 28 ноября вышла в свет программа Диск-О:, оказавшейся, на мой взгляд, сплошным недоразумением. О том, что с ней не так, будет в конце статьи, сейчас же расскажу, как подключить мейлрушное хранилище как сетевой диск. И не одно, а сколько потребуется!

Уровни протоколирования

При необходимости можно настроить количество собщений, выводимых в протокол соединения. Данный параметр не конфигурируется через настройки и должен быть изменён пользователем самостоятельно через ручное редактирование файла MailRuCloud.global.ini (параметр LogLevel).
В плагине существуют следующие уровни протоколирования:
1 (Connect): Включение панели соединения и вывода в протокол. Отключение этого уровня приведёт к полному отсутствию любого протоколирования (TC не включит соответствующую функцию).
2 (FileOperation): Протоколирование стандартных файловых операций + вывод сообщения о свободном месте (при включённой опции Enable space info logging).
4 (Detail): Детальное протоколирование некоторых операций (например, процесса авторизации) и нестандартных файловых операций (например, загрузка с авторазбиением).
8 (Warning): Протоколирование ошибок, не препятствующих дальнейшей работе (ошибки разбиения файла, очистки временных файлов и т.п.).
16 (Error): Протоколирование сбоев и неудачных операций.
32 (Debug): Дополнительное отладочное протоколирование.

Итоговое значение ключа настройки должно равняться сумме значений нужных уровней протоколирования, например для вывода ТОЛЬКО сообщений о файловых операциях (FileOperation) и различных ошибках (Warning + Error), значение LogLevel нужно установить равным 27 (1 + 2 + 8 + 16).
По умолчанию LogLevel принимается как 31 (все сообщения, кроме отладочных).

Загрузка и публикация файлов

После установки программы в проводнике появляется новый диск с именем «Яндекс.Диск». Пользоваться им можно точно так же как обычным диском т.е удалять, копировать, переименовывать файлы и т.д., при этом как только происходит изменение файлов, в панели уведомлений значок ЯД дает о себе знать.

Как выглядит мой Яндекс Диск

Публичный доступ к данным

Наверное самое популярное применение Яндекс.Диск — это возможность публичного доступа к своим данным. Я этой функцией постоянно пользуюсь, наверное как и подавляющее большинство пользователей данной программы. Доступ можно дать как отдельному файлу, так и папке с данными.

Суть заключается в формировании публичной ссылки, переходя по которой, человек, которому вы предоставили ссылку с помощью Веб интерфейса может скачать файлы или папки.

Делается это очень просто — правой мышкой щелкаем на файле / или папке (которую хотим опубликовать) в выпадающем меню на пункте Яндекс Диск выбираем скопировать публичную ссылку, ссылка копируется в буфер обмена, которую далее любым удобным способом передаем нужному человеку.

Даем доступ к данным

Настройка общего доступа

Еще одна очень удобная функция — общий доступ на вашем облачном хранении. Вы создаете какую-нибудь папку на ресурсе и делаете ее общей для выбранных вами людей. После этого люди, которым вы дали доступ могут закачивать в эту папку свои данные.

Доступ может быть полным, либо только для чтения. Приглашение осуществляется путем отправки ссылки на электронный адрес пользователя. Единственное условие — у вашего друга должна быть почта на Яндексе.

Процедура схожа с предыдущей, только выбираем пункт настроить общий доступ. Далее вводим почту приглашаемого, устанавливаем вид доступа (полный или чтение) и нажимаем Пригласить.

Предоставление общего доступа

Configuration

The element is configurable at the global, site, and directory level in the ApplicationHost.config file. WebDAV settings in Web.config files are ignored.

Child Elements

Configuration Sample

The following example lists a sample element for the Default Web Site. This example clears any existing authoring rules, adds a single rule for the administrators group, enables WebDAV authoring, specifies that hidden files are allowed, enables WebDAV locks and specifies the lock provider, and enables WebDAV properties and specifies the default XML namespace for property mapping.

The following example lists a sample element for a WebDAV server. This example defines the built-in simple providers for locks and properties, and enables WebDAV locks for the server.

Настройка доступа к Яндекс диск через WebDAV

Хранилище Яндекс управляет информацией, находящейся на сервере, при помощи изменения файлов в папке программы на компьютере пользователя. К сожалению, такой вариант может не устроить из-за нежелания или невозможности хранения файлов на HDD (жесткий диск), возникающие по причинам нехватки места или использования несовместимой ОС.

Подключение и настройка WebDAV на Windows

При желании использовать хранилище Яндекс на ОС Windows без установки программного обеспечения понадобится подключить сетевой диск. Последовательность действий в этом случае такова:

1. 1. Правой кнопкой мыши кликнуть на ярлыке компьютера, на рабочем столе или в меню «Пуск».
   2. В открывшемся списке выбрать пункт «Подключить сетевой диск».

1. 1. В появившемся окне задать букву диска и адрес сервера сетевого хранилища Яндекса https://webdav.yandex.ru/.

1. 1. Нажать кнопку «Готово» и дождаться подключения сетевого диска.
   2. После непродолжительного ожидания автоматически откроется окно безопасности Windows, в котором потребуется в соответствующих полях ввести данные своей учетной записи с привязанным хранилищем Яндекс.

Доступ к меню подключения сетевого диска присутствует и в проводнике – пункт во вкладке верхнего горизонтального меню «компьютер». Правильно выполнив последовательность действий, появиться новый сетевой диск с файлами. Отвязка каталога Яндекс выполняется через меню «Отключить сетевой диск».

Подключение файлового сервиса через командную строку Windows

Если вариант установки сетевого диска при помощи проводника Windows не устраивает или работает некорректно, существует второе решение задачи при помощи командной строки (CMD). Для начала понадобится запустить ее. Есть два варианта как это сделать:

1. 1. Набрать поисковый запрос «cmd» в меню Пуск, (если установлена Windows Vista, 7 см. Как установить Windows 10 ), после чего windows покажет иконку приложения, которое и необходимо запустить.
   2. Для Windows 8, 8.1 и 10 запустить приложение «Выполнить», которое предусмотрено во всех версиях ОС от Microsoft, при помощи комбинации клавиш “Win + R” и прописать в открывшемся окне команду «cmd».

На этапе, когда командная строка уже запущенна, понадобится поочередно выполнить несколько действий:

1. 1. Набрать команду «Net Use», последовательно прописав букву тома, адрес к сетевой папке Yandex и параметр для восстановления хранилища после перезагрузки (если нужно восстановление – yes, в противоположном случае соответственно – no). Готовая к работе команда выглядит так – «net use j: https://webdav.yandex.ru /persistent:yes».

1. 1. Подтвердить ввод команды клавишей Enter.
   2. После в консоли появится предложение ввести имя пользователя, что и потребуется сделать.
   3. В завершение ввести пароль, не забывая подтвердить ввод.

Теперь в проводнике отобразится сетевой диск. Если в доступе было отказано, необходимо проверить пароль и имя пользователя.

Особое внимание стоит обратить на шаг №4, так как введение секретных символов в cmd не отображается даже в виде звездочек.

Автоматическое монтирование

Опция «noauto» не позволяет диску примонтироваться автоматически при старте системы. Для автоматического монтирования необходимо воспользоваться опцией «_netdev» (см. ), в таком случае попытка примонтировать диск будет произведена при загрузке системы, до входа под конкретным пользователем. Для этого, учетные данные доступа к облачному диску должны хранится в «/etc/davfs2/secrets» (см. ). Такой облачный сетевой диск будет монтироваться для всех пользователей ОС.

Если же диск должен монтироваться только для конкретного пользователя, то наряду с указанием опции «noauto» в «/etc/fstab» следует создать подобный скрипт

#!/bin/bash
sleep 120 && mount https://webdav.yandex.ru

и добавить его в автозагрузку этого пользователя.

Network settings

Network operations timeout (ms)

Позволяет переопределить таймауты сетевого подключения. Большое значение таймаута может предотвратить обрыв связи при плохом соединении, малое — остановить операцию при перегруженном канале. В случае, если указано любое значение меньше 0, используются стандартные системные настройки параметра.

Proxy settings

Набор параметров (тип прокси, адрес, порт, логин и пароль) для соединения с сетью через прокси-сервер. Поддерживаются http/https/socks4/socks5-прокси.

При необходимости пароль прокси-сервера также может быть сохранён в менеджере паролей Total Commander (опция «Store proxy password in TC password manager»).

Download master и Яндекс диск

Такой несложный процесс, как скачивание файла внешним загрузчиком не вызывает вопросов. Но на практике с хранилищем Yandex проблема присутствует. Изучая страницу загрузки на Яндекс диске, можно столкнуться с дилеммой – ссылки для копирования, которая нужна Download Master, нет. Для того чтобы получить ее понадобиться:

1. 1. Начать загрузку в браузере (см. Какой браузер для Windows 10 лучше).
   2. Перейти на вкладку загрузки.
   3. Поставить на паузу для экономии трафика или сразу нажать право клавишей мыши на загруженном объекте.
   4. Выбрать пункт «копировать адрес ссылки».

1. Добавить новую загрузку в Download Master, используя скопированную ссылку.

Стоит подметить, что прямая ссылка на файл динамическая (изменяется во времени). По этой причине размещать на сайтах или передавать друзьям такой URL нет смысла.

Захват ссылок Download master

Есть и другое решение проблемы, если описанный выше вариант не устраивает. Download Master в этом случае настраивается в режим перехвата загрузок. Для этого понадобится:

1. Запустить программу.
2. Перейти в пункт «Настройки» в горизонтальном меню.
3. Нажатием плюс раскрыть тему «Общие» и выбрать подпункт «Интеграция».
4. Отметить галочками: «Отслеживать URL в буфере обмена», «Интеграция в Microsoft Internet Explorer», «Расширенная интеграция».
5. Перезапустить браузер.

Перехват поддерживается только в Internet Explorer. Для корректной работы потребуется версия 6+.

Скачивание приватных файлов

Если файл не имеет настроек общего доступа, то ссылка на него доступна лишь владельцу. Для того чтобы найти URL на личный документ:

1. 1. Необходимо зайти в аккаунт Яндекс диска через браузер.
   2. Выделить файл левой кнопкой мыши, после чего в правой колонке появится миниатюра и описание.
   3. Нажать на иконку загрузки, находящуюся справа от желтой кнопки «Редактировать».

Настроить менеджер закачек:

Далее потребуется, как уже было описано выше, включить захват ссылок Download Master или скопировать ссылку после начала загрузки в браузере.

Вывод

Благодаря гибким возможностям подключения к разным системам онлайн-хранилище Яндекс станет удобным приложением для корпораций и пользователей, желающих получить высокую скорость доступа к файлам из любого уголка планеты, а также бесплатное пространство, которого вполне достаточно для личной документации и фотографий. Еще одно популярное приложение от Яндекса – Яндекс Расписание, благодаря которому пользователь получает последнюю информацию рейсов самолетов, междугородних и пригородных поездов, паромов и автобусов

↓ ↓

Настраиваем публикацию WebDAV в менеджере IIS

На этом этапе мы включим WebDAV для сайта IIS и дадим права на редактирование содержимого локальному администратору.

1. В менеджере IIS Manager, разверните дерево сайтов и выберите Default Web Site.
2. Как показано на рисунке, щелкните по элементу WebDAV Authoring Rules.
3. На странице  WebDAV Authoring Rules щелкните в правой колонке(Actions) по сслыке Enable WebDAV
4. После включения WebDAV, создадим правила доступа к содержимому,  нажав кнопку Add Authoring Rule.
5. В окне Add Authoring Rule укажем:
   • All content – значит, что правило будет применяться для контента всех типов.
   • Выберите «Specified users»и введте имя пользователя «administrator»
   • Права доступа: Read, Source и Write.
   • После настройки, жмите OK.
6. В панели управления IIS выберите опцию Authentication.
7. В окне аутентификации активируйте аутентификацию Windows (Windows Authentication), если IIS будет работать только в качестве сервера WebDAV, анонимную аутентификацию можно отключить.
8. Вернитесь на уровень сайта Default Web Site и выберите Authorization Rules (либо .Net Authorization Rules)
9. Создайте Allow правило (либо убедитесь, что оно уже существует), в котором администратору было бы разрешено получать доступ к серверу (в моем случае, такое правило уже было, и всем пользователям — All Users, в том числе администратору был разрешен доступ к IIS).

Попробуем теперь подключиться к сайту WebDAV c учетной записью администратора, для чего в командной строке наберите:

net use * http://localhost/

В результате в системе появиться новый сетевой диск, подключенный с сервера с помощью WebDAV.

Совет. Если при попытке подключить каталог по WebDav появляется ошибка «System error 67 has occurred. The network name cannot be found.«, в Windows 8 /Windows Server 2012  попробуйте установить компонент Desktop Experience и убедится, что служба Web Client запущена.

Если же нужно расшарить определенную папку на диске, необходимо создать виртуальный каталог IIS.  Для этого щелкните правой кнопкой мыши по сайту и выберите ‘Add New Virtual Directory’:

Укажите алиас (имя виртуального каталога IIS) и путь к папке, к которой необходимо открыть доступ и нажмите OK.

Теперь, чтобы подключить данный каталог, нужно воспользоваться командой:

net use * http://winitpro.ru/projects

Сетевой диск, подключенный по WebDAV выглядит так:

Как вы видите WebDAV  — это отличное средство для удаленного доступа к файлам и папкам в Windows  поверх протокола HTTP,  которое можно использовать, даже через межсетевой экран. Кроме того, так как WebDAV   базируется на службе IIS, это означает, что в такой архитектуре мы можем использовать различные технологии обеспечения безопасности и средства управления IIS, в том числе HTTPS для шифрования передаваемых данных (при использовании обычного HTTP вся информация передается в открытом виде, кроме пароля, который при использовании Windows Authentication шифруется).

Опишем еще несколько аспектов использования WebDAV

• Если вы используете Basic authentication вместе с HTTP, это означит, что ваш пароль будет пересылаться в открытом виде, поэтому лучше использовать протокол HTTPS или все-таки включить аутентификацию Windows.
• Не забудьте, что IIS работает из под учетной записи, у которой нет доступа к большинству каталогов и файлам, поэтому придется назначить NTFS права этой учетной записи вручную.
• Для того, чтобы подключить диск по WebDAV с клиента Windows XP, необходимо убедится, что запущена служба WebClient
• Чтобы подключить каталог WebDAV по HTTPS, воспользуйтесь командой:

  net use x: "https:// winitpro.ru/projects " /User:UserName Password

How To

How to enable WebDAV publishing

1. Open Internet Information Services (IIS) Manager:

   • If you are using Windows Server 2012 or Windows Server 2012 R2:

     On the taskbar, click Server Manager, click Tools, and then click Internet Information Services (IIS) Manager.

   • If you are using Windows 8 or Windows 8.1:

     • Hold down the Windows key, press the letter X, and then click Control Panel.
     • Click Administrative Tools, and then double-click Internet Information Services (IIS) Manager.

   • If you are using Windows Server 2008 or Windows Server 2008 R2:

     On the taskbar, click Start, point to Administrative Tools, and then click Internet Information Services (IIS) Manager.

   • If you are using Windows Vista or Windows 7:

     • On the taskbar, click Start, and then click Control Panel.
     • Double-click Administrative Tools, and then double-click Internet Information Services (IIS) Manager.
2. In the Connections pane, expand the server name, and then go to the site, application, or directory where you want to enable WebDAV publishing.
3. In the Home pane, double-click WebDAV Authoring Rules.
4. In the Actions pane, click Enable WebDAV.

Note

Once you have enabled WebDAV publishing, you will need to add authoring rules before users or groups can publish content to your server. For more information about how to create authoring rules, see the topic.

How to add WebDAV authoring rules

1. Open Internet Information Services (IIS) Manager:

   • If you are using Windows Server 2012 or Windows Server 2012 R2:

     On the taskbar, click Server Manager, click Tools, and then click Internet Information Services (IIS) Manager.

   • If you are using Windows 8 or Windows 8.1:

     • Hold down the Windows key, press the letter X, and then click Control Panel.
     • Click Administrative Tools, and then double-click Internet Information Services (IIS) Manager.

   • If you are using Windows Server 2008 or Windows Server 2008 R2:

     On the taskbar, click Start, point to Administrative Tools, and then click Internet Information Services (IIS) Manager.

   • If you are using Windows Vista or Windows 7:

     • On the taskbar, click Start, and then click Control Panel.
     • Double-click Administrative Tools, and then double-click Internet Information Services (IIS) Manager.
2. In the Connections pane, expand the server name, and then go to the site, application, or directory where you want to enable directory browsing.
3. In the Home pane, double-click WebDAV Authoring Rules.
4. In the Actions pane, click Add Authoring Rule…

5. In the Add Authoring Rule dialog, specify the following options:

   • Allow access to: Specify whether the authoring rule should apply to all content types, or specify specific content types to allow.
   • Allow access to this content to: Specify whether the authoring rule should apply to all users, to specific groups or roles, or to specific users.
   • Permissions: Specify whether the authoring rule should allow Read, Write, or Source access for the specified content types and users.
6. Click OK.

File comments setings

Важно: Total Commander не поддерживает работу с файловыми комментариями в FS-плагинах, поэтому плагин CloudMailRu реализует этот функционал самостоятельно. Поскольку открытого описания формата файловых комментариев не существует, эта реализация может содержать ошибки, ведущие к порче или потере комментариев

Descript.ion files support

При включении опции плагин будет пытаться получить комментарии из файла descript.ion (если он существует в текущем каталоге Облака) и вывести содержимое комментария в контентное поле description/вкладку Description в диалоге свойств.

Enable descript.ion editor

Опция включает редактирование комментариев для файлов в Облаке на вкладке Description в диалоге свойств файла. Если опция отключена, комментарий доступен только для просмотра.

Copy file comments from local filesystem

При включении этой опции при копировании файлов в Облако, плагин будет копировать также и имеющиеся локальные файловые комментарии. Комментарии для каталогов переноситься не будут из-за ограничений API WFX.

Copy file comments from cloud filesystem

При включении этой опции при копировании файлов из Облака, плагин будет копировать также и имеющиеся в Облаке файловые комментарии. Комментарии для каталогов переноситься не будут из-за ограничений API WFX.

Track cloud filesystem changes (file rename, delete, etc)

Эта опция заставляет плагин отслеживать изменения файловой системы в Облаке, и вносить соответствующие изменения в файловые комментарии (аналогично тому, как Total Commander делает это в локальной файловой системе). Например, если переименовать или переместить файл в Облаке, то плагин перенесёт файловый комментарий с учётом нового имени.

Override default comment file name

Этот параметр позволяет переопределить имя файла, в котором плагин будет сохранять файловые комментарии (например, в случае обнаружения конфликтов с поддержкой комментариев в Total Commander). Это имя переопределяется как для Облака, так и для локальной файловой системы.

Compatibility

Note

The WebDAV 7.0 and WebDAV 7.5 modules shipped out-of-band for IIS 7.0, which required downloading and installing the modules from the following URL:

With Windows 7 and Windows Server 2008 R2, the WebDAV 7.5 module ships as a feature for IIS 7.5, so downloading WebDAV is no longer necessary.

Создание точки монтирования

Монтирование возможно только в существующую папку, создать которую можно, например, командой

mkdir $PathToMountPoint

или

sudo mkdir $PathToMountPoint

если для создания папки требуются административные привилегии. Где «$PathToMountPoint» следует заменить допустимым именем в ФС ОС «Ubuntu». Например, «$PathToMountPoint» может принимать следующие значения

• «$HOME/CloudDisk» – точка монтирования размещена в домашней папке пользователя и под-папке «CloudDisk».
• «/media/CloudDisk» – точка монтирования размещена в системной папке «/media» и под-папке «CloudDisk». Для создания требуются административные привилегии. Рекомендуется создавать точку монтирования в папке «/media», потому что при этом облачное хранилище будет доступно к монтированию\размонтированию через Nautilus.

Во избежание конфликтов, такую папку (естественно с другим именем) следует создавать для каждого удаленного облачного диска, который планируется использовать.