За последнее время я перечитала n-ное количество уроков по работе с масками и решила написать тьюториал для сфш. Поскольку работа моя, личная, не перевод и не компиляция, comments, конечно, are love)
Урок очень подробный, с принт скринами и прочими пояснениями, чтобы даже те, кто видит фш впервые в жизни, смогли разобраться. Кто у нас очень умный опытный, пропускайте куски)
И ещё. Мне лениво было искать/вспоминать/писать rus/eng названия ко всем инструментам и функциям, поэтому ко всему есть Prt Sc, чтобы не было вопросов. Если они всё же будут, позднее дополню урок переводами.

Что такое маска и как её накладывать?

Маска – это специальный чёрно-белый слой, который располагается поверх вашего рабочего слоя для того, чтобы спрятать некоторые его части. По сути, идея та же самая, как с полосками для французского маникюра.
Хотя "поверх" – это, конечно, громко сказано, поскольку на самом деле выглядит это так:
http://s07.radikal.ru/i180/0911/63/86e60d023b3bt.jpg
Вот этот белый прямоугольник и означает, что на наш слой наложена маска.
Накладывается маска очень просто: в палитре слоёв мы кликаем на кнопку http://i011.radikal.ru/0911/bb/a9bec0fdd5ee.png и видим, что у нас появился белый прямоугольник, о котором я говорила ранее и палитра цветов изменилась с цветной на чёрно-белую.
http://s53.radikal.ru/i142/0911/7b/4e10126c8e6dt.jpg >>  http://s42.radikal.ru/i096/0911/5c/f3667661e19ft.jpg
Или – кому удобнее ползать по меню – идем в Слой >> Layer Mask >> Reveal all. Можно нажать и Hide All, но тогда ваша картинка "спрячется", а прямоугольник станет не белым, а чёрным.
http://s59.radikal.ru/i166/0911/ad/21a0ca321124t.jpg
Собственно, с этими двумя режимами – видимым и невидимым - мы и будем работать.

Для чего нужны маски?

I. для вырезания части изображения, когда задний фон насыщен мелкими деталями.
Да-да, для этого можно использовать Лассо http://s60.radikal.ru/i170/0911/3b/9154246079ca.png или Перо http://i073.radikal.ru/0911/8b/0f12637d5f6f.png, но это долго и не всегда удобно (Волшебная палочка http://i041.radikal.ru/0911/0c/3cf914f9a041.png в случае нашей картинки, конечно, не подойдёт вообще, поскольку слишком много деталей и многие из них похожи по оттенкам цвета).
Почему маска удобнее старых, добрых, любимых лассо, перо и даже ластика http://s03.radikal.ru/i176/0911/96/6594c9c8c04e.png? Потому что после того, как ты закончил обрисовку контура и при этом "накосячил", при работе с этими инструментами нельзя отменить действие и нужно всё начинать сначала. Ну, или - в случае пера - с той точки, которая ещё отображается в истории. Что же касается маски, мы не стираем изображение на самом деле, мы его просто прячем и если вдруг нам захочется что-то изменить, нужно будет только лишь отредактировать слой-маску.
Итак, приступим.

Далее идёт большой раздел по подготовке изображения. Мастера, вы знаете, что делать ;)
Для начала выберите изображение, которое хотите видеть на вашем аватаре и задний фон для него. Я буду работать с этой фотографией Кайли и этой текстурой, сделанной Downgirl.
http://s60.radikal.ru/i170/0911/66/22655a3ad10dt.jpg  http://i045.radikal.ru/0911/5d/1a56462e2b36t.jpg
При помощи инструмента Прямоугольная область http://i060.radikal.ru/0911/f3/8a68fbb347bb.png выделяем часть изображения, которую хотим видеть на аватаре (она будет обведена пунктирной рамкой), и кадрируем картинку, идём в Изображение >> Кадрировать.
http://s42.radikal.ru/i096/0911/c4/6479375e3a27t.jpg
Изменяем размер изображения до нужного нам, идём в Изображение >> Размер изображения или просто набираем на клавиатуре  Alt+Ctrl+I b и в появившемся окне выставляем нужные нам параметры.
http://i072.radikal.ru/0911/b0/1c252c887feet.jpg
После уменьшения моё изображение стало немного размытым, поэтому я придам ему немного больше резкости. Фильтр >> Резкость >> Контурная резкость. Обычно параметров Эффект 35, Радиус 1, Порог 0 бывает достаточно, но на этот раз мне этого показалось мало, и я продублировала действие.
http://s60.radikal.ru/i167/0911/52/e560f766f8e5t.jpg
Копируем изображение на задний фон, который мы к тому времени уже кадрировали та, как нам нравится. Для этого правой кнопкой мыши кликаем на Заднем плане, выбираем из меню Создать дубликат слоя и в новом окне выбираем название нашего заднего фона. У меня это Безимени-2.
http://s50.radikal.ru/i129/0911/2b/e717c35131dat.jpg
Чтобы мне было удобнее объяснять, я поменяю названия слоёв на Слой 0 и Слой 1 и удалю нижний прозрачный слой. Кстати, название слоя меняется так: правой кнопкой мыши кликаем на нужном нам слое и в меню выбираем Layer properties, а в новом окне забиваем название в графу имя.
http://i076.radikal.ru/0911/72/b17d815bcd25t.jpg
Теперь моя палитра слоёв и история выглядят так:
http://s15.radikal.ru/i188/0911/24/18b7e8845ee4t.jpg

Удостоверьтесь, что в палитре слоёв выбран именно тот слой, что вы будете вырезать, и нажмите кнопку http://i011.radikal.ru/0911/bb/a9bec0fdd5ee.png. Слой-маска добавился. Как мы помним, мы это видим по белому прямоугольнику в графе слоя и палитре цветов, изменившейся на чёрно-белую.
http://s39.radikal.ru/i084/0911/87/6b724c7b2929t.jpg
Дальше мы выбираем кисточку http://i030.radikal.ru/0911/1e/087658fba5eb.png (с мягкими или жесткими краями – это уже как вам удобно) и "закрашиваем" всё то, что не хотим видеть на аватаре. В палитре цветов при этом должен быть выбран чёрный цвет, но, когда бы будете "красить", вы увидите, как изображение будет пропадать, являя нам задний фон, а в графе слоя белый прямоугольник будет постепенно заполняться чёрным цветом.
http://s57.radikal.ru/i155/0911/4b/b5b7e0e3e470t.jpg
Ну вот, в итоге у меня получилось так:
http://i039.radikal.ru/0911/e9/b0b15ea5683f.png
Но, допустим, я была не очень аккуратна и где-то в процессе "стерла" пол-лица Кайли, этого не заметив.
http://s59.radikal.ru/i166/0911/de/cafa2a4dd0a9t.jpg
Ужас, да? Теперь мне придётся начинать всё с самого начала? Нет, не придётся. Помните, что я говорила про то, что маска удобнее ластика? Так вот. Я меняю цвет кисти с чёрного на белый и перекрашиваю маску в изначальный цвет, наблюдая, как изображение магическим ^_^ образом появляется снова.
http://i074.radikal.ru/0911/2a/44b245eb9ae1t.jpg
То есть при работе со слоем-маской чёрный цвет заставляет изображение пропадать, белый – появляться. Ну, а что касается серого (любого его оттенка) – он заставляет изображение пропадать частично, уходя в непрозрачность, и действуя как на чёрный, так и на белый цвет слоя-маски.
http://i065.radikal.ru/0911/da/771ea9f5c139t.jpg
Если вы совершенно точно уверены, что вам больше не понадобится всё то, что окружает выбранный вами кусочек изображения и сейчас скрыто маской, то вы можете удалить эти области. Для этого нужно кликнуть правой кнопкой мыши на изображении маски в графе слоя и выбрать из меню "Применить слой-маску".
http://s47.radikal.ru/i118/0911/99/b7fb54bbc469t.jpg >> http://s56.radikal.ru/i154/0911/8d/4b30b4c40bd4t.jpg

II. для возможности использовать слои-заливки и корректирующие слои только на той части изображения, что хочется вам.
http://i018.radikal.ru/0911/e9/769a5a33769ft.jpg http://s56.radikal.ru/i154/0911/07/83a2c940e3b1t.jpg
По сути, в любой корректирующий и слой-заливку уже встроена функция маски (видите знакомый белый прямоугольник?), поэтому маска действует на них все.
Маску можно наложить и группу слоёв сразу. Для этого нужно создать новую группу, нажав кнопку http://i048.radikal.ru/0911/de/5c1ede219cb5.png в палитре слоев, перенести в неё колорку или создать новую и, встав на графу группы, нажать кнопку маски http://i011.radikal.ru/0911/bb/a9bec0fdd5ee.png.
http://i004.radikal.ru/0911/63/17097a08ab8ct.jpg http://s46.radikal.ru/i112/0911/22/20c2714f97f6t.jpg
Это очень удобно для создания аватаров с несколькими совмещёнными изображениями с разными колоризациями. Как, например, это:
http://i35.tinypic.com/2wnxpps.jpg
Чтобы колорирующая группа окрашивала только передний план (в моём случае Кайли), нужно кликнуть правой кнопкой мыши на изображении маски, выбрать из меню "добавить слой маску к выделенной области", затем сделать инверсию выделенного фрагмента (кликнуть правой кнопкой мыши на изображении внутри пунктирной рамки, выбрать из меню Инверсия выбранной области), встать на графу группы, кликнуть значок маски http://i011.radikal.ru/0911/bb/a9bec0fdd5ee.png и, не снимая выделения, закрасить чёрным задний план.
http://s48.radikal.ru/i121/0911/7e/b9e64259bddbt.jpg >> http://s54.radikal.ru/i146/0911/9e/077ada027037t.jpg >> http://s54.radikal.ru/i145/0911/b4/1d9757c81bc7t.jpg

III. на deviantart, например, маски можно часто встретить в разделе "текстуры". Выглядят они, ну, вот хотя бы так:
http://s15.radikal.ru/i188/0911/ab/a1d019990ae0t.jpg
Применяются по-разному. И как обычные текстуры:
http://s49.radikal.ru/i125/0911/1d/7fbe2862d2a3t.jpg
И для создания таких интересных эффектов:
http://i34.tinypic.com/xq9a2q.jpg
Как - смотрим по истории. Если не сумеете разобраться, я объясню позже.
http://i034.radikal.ru/0911/c9/d5000cc567cat.jpg

На сегодня всё. Ещё что вспомню – дополню.
Create&enjoy ;)