Bog BOS: sitelife: Интернет роботы

Политика доступа роботов к сайту определяется файлом robots.txt в корневой директории сайта (локальный URI - "/robots.txt"). Файл состоит из секций, разделяемых пустыми строками (т.е. пустые строки имеют значение!). Секции состоят из строк:
<имя-поля>:[<пробел>]<значение>[<пробел>]
Имя поля нечувствительно к регистру символов. Символ "#" обозначает начало комментария, продолжающегося до конца строки. Секция начинается с одной или нескольких строк, содержащих поле User-agent ( некоторые роботы считают, что строка м.б. только одна, но в ней можно использовать несколько имен через пробел). За ней (ними) следуют одна или несколько строк, содержащие поле Disallow. Другие поля игнорируются. В конце последней секции лучше поставить пустую строку.

SSL. Получение валидного сертификата.

Наверное многих уже достали неудовства с самоподписанными сертификатами, а ведь есть возможность легально и бесплатно получить подписанный валидный сертификат. Об этом я и постараюсь рассказать ниже.

Теория

Для того, чтобы иметь “правильный” сертификат нужно:

1. Сгенерировать приватный ключ (крайне рекоммендую без пароля)

2. Создать запрос на подпись

3. Получить подписанный сертификат

4. Настроить сервер для работы с https протоколом с помощью ключа (п.1) и подписанного сертификата

итак приступим:

How To Show And Hide Blogger Widgets In Specific Posts Or Pages

If you are a Blogger user, you'd realized that Blogger widgets are set in a way that every single page will display these widgets, let it be the home page, post pages, static pages, specific URL pages or archive pages.

Its really important to control widget Display in Blogger. Some widgets are meant for homepage only while some makes sense when you show it at your Contact Pages, About Me pages or static pages. If you using a lots of widgets can make a blog/site to look unprofessional, increasing page loading time, therefore visitors will lose their patience.

So how do we actually do this. The trick is really simple. You just need to enclose your widgets in few pieces of codes. So lets jump straight on how to manage widgets on different pages in blogger.

Спецификация RSS 2.0

Это — версия 2.0.9 спецификации RSS, опубликованной 5 июня 2007 года RSS Advisory Board. Последняя версия будет всегда доступна по адресу http://www.rssboard.org/rss-specification, также доступен список изменений и других версий.

1. Что такое RSS?

RSS — формат передачи веб-контента. Название технологии — акроним «Really Simple Syndication», то есть, «по-настоящему простая передача информации». Сводную историю формата можно найти по адресу http://www.rssboard.org/rss-history.

RSS — диалект XML. Все файлы RSS обязаны соответствовать спецификации XML 1.0, опубликованной на веб-сайте консорциума WWW (W3C).

На высшем уровне документ RSS представляет собой элемент <rss> с обязательным атрибутом version, указывающим версию RSS. Если документ соответствует этой спецификации, значение этого атрибута должно быть «2.0». Дочерний элемент <rss> — один элемент <channel>, который включает информацию о канале (метаданные) и его содержимое.

 

aria2c - замена wget в Ubuntu

 aria2c – консольный download-менеджер. Поддерживает работу с протоколами HTTP, FTP, BitTorrent, Metalink.По моему мнению, работает лучше, чем предустановленный wget - да его разработка похоже что остановилась. Ориентирован на загрузку файлов большого размера.
В репозитариях Ubuntu последняя версия 1.9.4-1, но мы пойдем другим, более длинным путем и поставим из исходников (нам не привыкать - rtorrent сложнее ставится) версию 1.14.1.
Для этого зайдем на сайт aria2 и сразу же видим большущую кнопка Get 1.14.1 .Справа от нее можно почитать небольшой список опций для примера.  Кликаем по кнопке ,попадаем на страницу загрузки и из предложенного списка выбираем aria2-1.14.1.tar.bz2  . Сохраняем тарболл в Домашнюю папку и начинаем плясать с бубном,завывать и шаманить.Ну а если серьезно - никакого шаманства нет, всё это дело прекрасно собирается.

Простой файловый хостинг на Google App Engine

 

Наверняка каждый из вас в своей жизни находил удобный для себя файловый хостинг, а через какое-то время обнаруживал, что на нем от количества рекламы начинают болеть глаза, условия уже далеко не такие лояльные и вообще пора бы уже найти что-то новое. Вариантов дальнейших действий два — или найти новый, пока еще не раскрученный файлообменник и использовать его, пока он не испортится, или организовать собственное решение. Для второго варианта, в свою очередь, можно приобрести хостинг (придется правда набить шишек, пока не найдется добросовестный хостер с качественными услугами) или воспользоваться облачным сервисом.

Бесплатное увеличение Dropbox аккаунта на 5 ГБ

Dropbox тестирует функцию автоматического расшаривания фото и видео с внешних накопителей. Пока идёт бета-тест за каждые 500 МБ выгруженного контента пользователю бесплатно начисляется 500 МБ дополнительного места вплоть до 5 ГБ.

Мегаполезный мэшап-сервис ifttt: описание и конкретный пример

Представьте себе интернет, когда событие, происходящее в одном месте, приводит к выполнению запланированной последовательности действий.  К счастью, уже не нужно представлять Теперь это реальность благодаря мэшап-сервису ifttt (“if this, then that” — “если это, тогда то”). Данный сервис позволяет создавать простую автоматизированную последовательность операций, которая запускается при выполнении определенного действия. Полезность данного сервиса сложно переоценить, а перечень поддерживающих инструментов, – так называемых Каналов и вовсе превращает данный мэшап ifttt в очень интересный и любопытный инструмент, при этом он чрезвычайно прост в настройке и использовании, варианты комбинаций исчисляются сотнями.

Новое оглавление для Blogger

   

Способ этот подсказан известным специалистом в блогостроении Abu Farhan

Преимущества данного варианта оглавления в том, что вместо длинного списка, все статьи скрыты под соответствующими рубриками, что облегчает поиск нужного материала.Открытая рубрика отличается от закрытой по цвету, а к 10 последним сообщениям добавляется значок New!!

Ещё одно из достоинств предложенного варианта - простота его воплощения.

Советы по оптимизации рекламных блоков от Google AdSense

Несколько полезных советов по оптимизации рекламных блоков от AdSense.

Программа заработка Google AdSense уже существует продолжительное количество времени. И за этот период сотни тысяч веб-мастеров экспериментировали с различными аспектами AdSense с целью максимизировать CTR.

Оптимизация стала искусством

Несмотря на то, что нет чётких советов по расположению, размеру и представлению рекламных блоков, есть несколько общих советов, которые каждый веб-мастер должен знать.

Лучшие схемы часто тонко сбалансированы между проверенным знакомым и новым оригинальным. Оригинальные остроумные дизайны могут работать, но использовать их рискованно.

Подготовка сайта для индексирования в поисковых системах

Индексирующие поисковые системы

- сегодня основные поставщики новых посетителей на сайт. В то же время алгоритмы работы поисковиков никогда не публикуются, на что у разработчиков есть все основания - борьба с замусориванием поисковиков (поисковым спамом или спамдексингом) отнимает много сил и средств у коллектива любого поискового проекта.

Вопрос о том, как попасть на первую страницу результатов поиска по профильным, то есть точно относящимся к тематике сайта, запросам, волнует многих. Явный дефицит популярной информации на эту тему породил большое количество домыслов - о "чудодейственных" методах, о "коррумпированности" и "протекционизме" администраций поисковых систем, "продающих" и раздающих выгодные места своим людям.

Опыт анализа сайтов, владельцы которых испытывают проблемы с посещаемостью из поисковых систем, показывает, что причины, как правило, гораздо проще. Они заключаются в элементарной неинформированности разработчиков и владельцев сайта о самых простых правилах, которые необходимо учитывать, чтобы сайт был хорошо представлен в поисковых системах.

Как подобрать ключевые слова для вашего сайта

В этой статье мы уделим внимание правильному способу определения ключевых слов, под которые вам необходимо оптимизировать сайт для поисковых систем. В этой статье вы найдете формулу Индекса Эффективности Ключевого слова - математической формулы, которая разработана мной, чтобы помочь вам определить ключевые слова для вашего сайта.

Файлы Sitemap для Blogger в инструментах вебмастеров Google

Роботы поисковых систем нуждаются в постоянном внимании и помощи вебмастеров. Особенно это касается блогов на платформе Blogger (blogspot). Хотя компания Google, которой принадлежит Blogger, уделяет постоянное внимание своему детищу - до настоящего совершенства ещё далеко.Так для лучшей индексации всех материалов блога необходимо создать файлы Sitemap и добавить их в инструменты вебмастеров Google.

Создать страницу ошибки 404 для Blogger - просто и эффективно

Речь пойдёт о создании страницы ошибки 404.

Ничего таинственного и загадочного за этим набором цифр не скрывается! На страницу ошибки 404 пользователь Интернета попадает в случае перехода по битой ссылке, или по ссылке на удалённую страницу.
Долгое время эту функцию в Blogger выполнял скучный, унылый блок, который просто сообщал об ошибке и не нёс никакой другой полезной нагрузки. Вследствие этого авторы блогов теряли большое количество потенциальных читателей.

Как настроить теги robots для заголовков Blogger

 


Пришло время обратить внимание на персонализированные теги robots для заголовков сообщений, настройка которых стала доступна дляблог-платформы Blogger совсем недавно.

От безопасных "Описаний" и "Сообщений об ошибке 404" рискнём сделать решительный шаг в раздел "Поисковые роботы и индексация". Стоит обратить внимание на предупреждение о некорректном использовании настроек - оно целиком соответствует действительности.

12 причин не использовать самописные CMS

Чаще всего, самописные системы возникают как «наш ответ Чемберлену» — в пику уже существующим CMS. И этим «заболеванием» страдают 99% разработчиков сайтов — в какой-то момент, в порыве инфантильного максимализма программист, многие десятки часов проведший «в обнимку» с кодом какой-либо системы, восклицает — «Доколе! Сколько можно возиться с этим убожеством?! Я же знаю как сделать лучше!» и мало-помалу«я знаю!» превращается в твердую уверенность «я могу!» и вот уже, глядишь, строчка за строчкой начинает вырисовываться костяк нового детища.

Однако всем хорошо известно чем и куда вымощена соответствующая дорога и потому любая, даже самая прекрасная идея, при неправильном подходе к ее реализации может обернуться проблемами для всех ее пользователей.

Ниже мы рассмотрим те минусы, которыми обременена практически каждая самописная система и причины по которым стоит воздержаться от ее использования.

Вывод Webmoney без комиссий. Часть 3. Зарабатываем на деньгах

В предыдущих статьях серии «Операции с Webmoney» мы оформили карту, получили формальный сертификат, отконвертировали WMU и вывели на карту гривну. Теперь возникает закономерный вопрос — что же делать с полученными деньгами?

Стоп-стоп-стоп. Первый бесконтрольный порыв — «всё срочно потратить на плюшки и радости жизни!» мы подавим и задумаемся над тем как «сохранить и преумножить», чтобы потом этих самых плюшек было гораздо больше.

Долгое время я просто держал их на карте и периодически тратил, расплачиваясь в торговых сетях или Интернет. Но постоянно меня смущала мысль о том, что деньги на карте просто лежат мертвым грузом (1,5% годовых — не в счет) и не приносят мне дохода, позволяя зарабатывать на них лишь банку. Такой вариант меня, само собой, не слишком устраивал и я стал искать варианты применения выведенных средств.

Вывод Webmoney без комиссий. Часть 2. Выводим средства

Итак, в предыдущей части статьимы открыли карту Visa Classic в OTP Bank, на которую планируем выводить деньги и обзавелись формальным сертификатомWebmoney, который позволит нам это сделать.

Сегодня мы детально и со скриншотамирассмотрим саму процедуру вывода денег с WMU-кошелька в гривну и зачисление полученных средств на платежную карту.

С самого начала обращаем внимание на предупреждение на сайте OTP Bank:«операции покупки или вывода титульных знаков WMU возможны только между кошельком и счетом принадлежащими одному и тому же владельцу. Операции проведенные между счетами и кошельками разных лиц будут отклонены без возвращения удержанных комиссий.»

То есть, говоря  «не банковским» языком — формальный аттестат и карта должны быть открыты на одно и то же лицо. Обязательно в этом убедитесь, перед тем как начать процедуру вывода средств.

Вывод Webmoney без комиссий. Часть 1. Подготовительный этап

Не смотря на неуклонно возрастающую популярность Webmoney как средства электронных платежей — все больше магазинов и сервисов позволяют оплачивать товары и услуги с их помощью — два самых частых вопроса, которые мне задают по поводу Webmoney звучат так: «А как ты выводишь Webmoney в гривны?» и«А как вывести Webmoney без комиссий?».

До определенного момента я, как и многие, пользовался услугами «серых» обменников, позволявших за «скромные» 5-10% от суммы, конвертировать виртуальные деньги в реальные хрустящие гривны. Однако в какой-то момент меня окончательно утомила эта «подпольная деятельность», да и, откровенно говоря, захотелось наконец-то сократить ощутимо высокие комиссионные расходы. Следовательно, я начал искать другие варианты вывода.

20+ правил .htaccess, которые должен знать каждый разработчик

При правильном использовании,конфигурационный файл web-сервера Apache — .htaccess (hypertext access) представляет собой очень мощное средство в инструментарии разработчика. По-обыкновению, основной файл располагается в корневой директории вашего web-сервера (также могут присутствовать отдельные файлы в каждой папке — для управления доступом) и может быть откорректирован с помощью любого текстового редактора. В этой статье я покажу вам 20 правил для  .htaccess и поясню для чего их использовать.