Вредоносное ПО (malware) - это назойливые или опасные программы,...
Национальный фонд образовательной робототехники в 2015 году опросил руководителей высшего звена: 81% опрошенных отметили роботизацию главной причиной роста занятости. Во всем мире растет спрос на “интеллектуальные” фабрики и появляется потребность в роботах.
По данным интернет-издания Nearshore Americas, в 2017 году “умное” производство привнесет в мировую экономику около 500 миллиардов долларов. В опросе, проведенном технологической консалтинговой фирмой Capgemini, более половины респондентов заявили, что инвестировали 100 миллионов долларов или более в инициативы, связанные с “умными” заводами в течение последних пяти лет. В исследовании делается вывод о том, что к 2022 году по меньшей мере 21% производственных предприятий станут интеллектуальными.
Бюро статистики США (BLS) сообщает, что за последние 7 лет компании внедрили 136 748 роботов на производственные линии. BLS также определило, что в результате автоматизации было создано 894 000 новых рабочих мест. Авторы книги «Что делать, когда машины делают все» Малкольм Френк, Пол Рериг и Бен Принг предполагают схожую тенденцию: в течение следующих 10-15 лет 19 миллионов рабочих мест будут потеряны из-за автоматизации, но 19 миллионов новых рабочих мест будут созданы также благодаря автоматизации.
Короче говоря, для инженеров-робототехников прямо сейчас открываются новые возможности, а вместе с ними и новые горизонты в образовании и самообразовании.
Потенциал профессий, связанных с робототехникой
В апреле этого года Ассоциация по развитию автоматизации (A3) , в котором говорится, что 80% производителей сообщают о нехватке квалифицированных кадров, что станет причиной потери 11% годового дохода. Однако новые технологии автоматизации повышают производительность и помогают создавать более качественные продукты. А это в свою очередь позволяет предпринимателям развивать свой бизнес и увеличивать рабочие места.
В докладе A3 было отмечено, что роботы увеличивают производительность труда с той же скоростью, что и паровой двигатель: 0,35% в год. Amazon — отличный пример того, как роботы увеличивают рабочие места. В 2014 году на компанию Amazon Robotics работало 45 000 штатных сотрудников. А три года спустя это число удвоилось до 90 000.
Производства оснащают робототехникой, однако робот может автоматизировать задачи, но не полный процесс — управлять роботами в любом случае должны люди. Если количество машин на заводах увеличивается, то и число квалифицированных специалистов, необходимых для программирования, эксплуатации и обслуживания этих роботов, также будет расти.
Для студентов
Для молодого инженера, который хочет войти в робототехнику, есть ключевые области исследований, на которых следует сосредоточиться. Робототехника — это междисциплинарное направление, которое объединяет в себе несколько областей техники, включая машиностроение, компьютерное программирование и электротехнику.
В средней школе будущему инженеру-робототехнику необходимо глубоко изучить математику и физику. Эти базовые предметы составляют основу многих роботизированных курсов. Также уже в средней школе следует пройти курсы по программированию, дизайну и познакомиться с производственными станками.
На университетском уровне многие учебные заведения предлагают робототехнику в качестве самостоятельной области обучения. Выделяют три ключевых направления:
- Тело (машиностроение). Инженер-механик отвечает за физическую систему: части роботов (например, двигатели и приводы). Меры безопасности и операционные протоколы также относятся к этой отрасли техники.
- Нервная система (электротехника). Это электронная основа робота включает встроенные системы, низкоуровневое программирование схем, электрическое сопротивление и теорию управления.
- Мозг (компьютерная инженерия). В этой группе основное внимание уделяется программному языку, а не аппаратным средствам, охватывающим такие темы, как искусственный интеллект (ИИ) и машинное обучение.
В России многие вузы готовят бакалавров по направлению “Мехатроника и робототехника”, а также по смежным дисциплинам. Вот некоторые из них:
- МГТУ им. Н.Э. Баумана
- ТПУ — Национальный исследовательский Томский политехнический университет
- ТГУ — Национальный исследовательский Томский государственный университет
- СПбГПУ — Санкт-Петербургский государственный политехнический университет
- УрФУ — Уральский федеральный университет имени первого Президента России Б.Н. Ельцина
- СПбНИУ ИТМО — Санкт-Петербургский национальный исследовательский университет информационных технологий, механики и оптики
- ДВФУ — Дальневосточный федеральный университет
- НИУ МЭИ — Национальный исследовательский университет «МЭИ»
- БГТУ им. В. Г. Шухова — Белгородский государственный технологический университет им. В. Г. Шухова
- МГТУ СТАНКИН — Московский государственный технологический университет «СТАНКИН»
Российские производители робототехники заинтересованы в качественном обучении будущих инженеров. Компания Promobot разработала несколько курсов по робототехнике для школьников. Сейчас компания развивает универсальную робототехническую платформу Promobot на базе собственной разработки Software Developer Kit (SDK). Платформа позволяет инженерам со всего мира писать для робота новые функциональные модули, обучать Promobot новым сценариям работы и настраивать его под потребности своего бизнеса. На базе Promobot SDK разрабатываются и внедряются образовательные программы для российских и зарубежных школ и технических вузов.
Для профессионалов
В последние годы многие роботостроительные компании создали собственные сертификационные программы для содействия обучению специалистов. Некоторые из них создали университеты и учебные программы на собственных роботизированных платформах.
Universal Robots является одним из основных продавцов роботов. Компания имеет собственную платформу обучения — Universal Robot Academy. Крупные производители роботов, такие как Kuka и FANUC, предлагают программы сертификации. Программа Kooka Official Robotics Education (KORE) предназначена для преподавания в средних школах, колледжах, университетах и профессионально-технических училищах.
Онлайн-курсы от таких компаний, как Bosch, Kuka, iRobot и Lockheed Martin, представлены платформой онлайн-обучения Udacity . Udacity — это новая онлайн-платформа обучения, цель которой — предоставить доступное образование в Интернете. Курсы созданы профессионалами в области образования и спонсируются крупными компаниями отрасли.
Одна из самых крупных платформ — EdX . Тут, например, можно прослушать курс от Колумбийского университета по робототехнике или курсы от MIT. Также существуют платформы в русскоязычными курсами, например, Coursera,
Под понятием интернет и школа я понимаю не только интернет, но и развивающиеся инновационные технологии. Так, скажем, технологии будущей и настоящей школы. В первую очередь это, конечно же, роботы. Люди очень увлечены идеей вдыхания жизни в другое существо. Возможно, все потому, что роботы - удивительные создания. На эту идею меня вдохновил мультфильм «Город героев», в котором рассказывается о Юном Хиро Хамада — прирожденном изобретателе и гении конструирования роботов. Вместе со старшим братом Тадаши они воплощают в жизнь самые передовые идеи в Техническом университете города будущего Сан-Франсокио. После серии загадочных событий друзья оказываются в центре коварного заговора. Отчаявшись, Хиро решает использовать веселого и добродушного экспериментального робота Бэймакса, перепрограммировав его в неуязвимую боевую машину. И ведь,вправду, Бэймакса - удивительный робот, Бэймакс был создан, чтобы заботиться о людях. Этот надувной робот-медбрат с помощью встроенного сканера может измерить температуру тела или давление, оценить уровень боли и вылечить практически любой недуг. Сконструированный Тадаши, Бэймакс стал настоящим прорывом в области прикладной медицины, а для Хиро — лучшим другом.
Я решила узнать как можно больше о роботах. И вот что у меня получилось.
Робот — автоматическое устройство, созданное по принципу живого организма. Действуя по заранее заложенной программе и получая информацию о внешнем мире от датчиков (аналогов органов чувств живых организмов), робот самостоятельно осуществляет производственные и иные операции, обычно выполняемые человеком (либо животными). При этом робот может как и иметь связь с оператором (получать от него команды), так и действовать автономно. У роботов существует 3 закона:
1 - робот не может действием или бездействием принести вред человеку.
2 - робот обязан выполнять все команда человека, кроме тех, что противоречат 1 закону.
3 - робот обязан охранять себя в той мере, в какой это не противоречит 1 и 2 законам.
Раньше я никогда не понимала, почему люди ими так восхищаются? Обычная железяка делает различные функции. Но, разобравшись с внутренним строением роботов и функциями, которые они могут выполнять, я больше так не думаю.
Существует 3 основных типа роботов: механические, биороботы и нанороботы. Я нашла 20 видов роботов (которые происходят от основных): аптечный робот, андроид (человекообразный робот), промышленный робот, транспортный робот, подводный робот, бытовой робот, боевой робот, зооробот, летающий робот, медицинский робот, микроробот, персональный робот, робот-артист, робот-художник, робот-игрушка, робот-официант, робот-хирург, робот-экскурсовод, социальный робот, шаробот.
Всех их объединяет то, что все они человекоподобные. Одним словом, чем больше робот похож на живое существо, тем он лучше. Многие ученые пытаются создать из кучи проводов, железа, пластика и компьютера - живое существо. С каждым годом человечество все ближе подходит к завершению этой цели. Самым человекообразным роботом является андроид (к примеру, Asim).
Чтобы разобраться, как устроены роботы, я предлагаю сравнить его с человеческим строением.
И так человек состоит из:
- Структуры тела;
- Системы мышц (которые приводят тело в движение);
- Системы органов чувств (которая получает информацию о теле и окружающей среде);
- Источника энергии (который питает мышцы и органы чувств);
- Мозговой системы (которая обрабатывает информацию от органов чувств и дающая указания мышцам);
Робот состоит из:
- Подвижной физической структуры;
- Двигателя;
- Системой сенсоров (органов чувств);
- Блока питания;
- Компьютерного «мозга» (который контролирует все эти элементы);
Подвижной физической структурой у роботов, является система передвижения .
Для передвижения по открытой местности чаще всего используют колёсный или гусеничный движитель
(примерами подобных роботов могут служить Warrior и PackBot). Реже используются шагающие
системы (примерами подобных роботов могут служить BigDog и Asimo). Для неровных поверхностей создаются гибридные конструкции, сочетающие колёсный или гусеничный ход со сложной кинематикой движения колёс. Такая конструкция была применена в луноходе.
Внутри помещений, на промышленных объектах роботы передвигаются вдоль монорельсов
, по напольной колее
и т. д. Для перемещения по наклонным или вертикальным плоскостям, по трубам используются системы, аналогичные «шагающим» конструкциям, но с вакуумными присосками
. Также известны роботы, использующие принципы движения живых организмов — змей, червей, рыб, птиц, насекомых и других; соответственно, говорят о ползающих
, инсектоморфных
(от лат. Insecta
‘насекомое’) и других типах роботов бионического происхождения.
Так же в подвижную физическую структуру робота входят исполнительные органы - это манипуляторы, с помощью которых робот может воздействовать на окружающие его предметы. Причем по своей структуре это сложные технические устройства, по аналогии с живыми организмами - это руки и ноги робота.
Двигатели
В настоящее время обычно используются двигатели постоянного тока , двигатели внутреннего сгорания , шаговые электродвигатели и сервоприводы .
Существуют разработки двигателей, не использующих в своей конструкции моторов: например, технология сокращения материала под действием электрического тока (или поля), которая позволяет добиться более точного соответствия движения робота натуральным плавным движениям живых существ.
Система сенсоров (органов чувств)
Системы распознавания
уже способны определять простые трехмерные предметы, их ориентацию и композицию в пространстве, а также могут достраивать недостающие части, пользуясь информацией из своей базы данных (например, собирать конструктор Lego).
Математическая база
Помимо уже широко применяющихся нейросетевых технологий, существуют алгоритмы самообучения взаимодействию робота с окружающими предметами в реальном трёхмерном мире: робот-собака Aibo под управлением таких алгоритмов прошел те же стадии обучения, что и новорожденный младенец, самостоятельно научившись координировать движения своих конечностей и взаимодействовать с окружающими предметами (погремушками в детском манеже). Это дает ещё один пример математического понимания алгоритмов работы высшей нервной деятельности человека.
Навигация
Системы построения модели окружающего пространства по ультразвуку или сканированием лазерным лучом широко используются в гонках роботизированных автомобилей (которые уже успешно и самостоятельно проходят реальные городские трассы и дороги на пересечённой местности с учётом неожиданно возникающих препятствий).
Внешний вид
В Японии не прекращаются разработки роботов, имеющих внешний вид, на первый взгляд неотличимый от человеческого. Развивается техника имитации эмоций и мимики«лица» роботов.
В июне 2009 года ученые Токийского университета представили человекоподобного робота «KOBIAN», способного выражать свои эмоции — счастье, страх, удивление, грусть, гнев, отвращение — с помощью жестов и мимики. Робот способен открывать и закрывать глаза, двигать губами и бровями, использовать руки и ноги.
Датчики
Датчики - это системы технического зрения, слуха, осязания, датчики расстояний, локаторы. Устройства, которые позволяют получить информацию из окружающего мира.
Блок питания роботов - источник электропитания, предназначенный для снабжения узлов робота электрической энергией постоянного тока, путём преобразования напряжения до требуемых значений.
Технология подзарядки
Разработаны технологии, позволяющие роботам самостоятельно осуществлять подзарядку, находя и подсоединяясь к стационарной зарядной станции. В настоящий момент в разных лабораториях проходят испытания различных систем, обеспечивающих бесконтактную подзарядку аккумуляторов в помещениях (например, направленным мощным инфракрасным лазером или индукционным принципом).
Компьютерный мозг
Система управления (компьютерный мозг) - это мозг робота, который должен принимать информацию от датчиков и управлять исполнительными органами.
Интеллектуальность робота - это способность системы решать задачи, сформулированные в общем виде . Робот сам справляется с задачей, без помощи оператора.
Но не все компьютеры владеют подобной системой. Многими роботами управляет оператор (человек). Как радиоуправляемой машинкой - при помощи специального пульта для управления. Так же, робот может быть управляем с помощью компьютера. Оператор садится за компьютер, отправляет команды через компьютер к роботу, а робот выполняет ее.
Недавно в Японии открылся отель Henn-na (Henn-na Hotel), в котором 90% работ выполняют роботы и 10 человек справляются с оставшимися 10% всех дел. Роботов, выпущенных компанией Kokoro, называют актроидами. Они умеют приветствовать и заселять гостей, устанавливая с ними зрительный контакт и реагируя на движения. Некоторые могут общаться на иностранных языках.
Отель Henn-na, что дословно переводится с японского на английский как «странный отель», использует и других роботов, кроме актроидов, например человекоподобных роботов Нао (NAO) и Пеппер (Pepper) от компании Aldebaran Robotics. Роботы встречают гостей у входа и на стойке регистрации, помогают им снять пальто и относят сумки, убираются в комнатах.
Отель Henn-na не единственный в своём роде. В Нью-Йорке существует YOTEL, в котором роботы заботятся о вещах гостей, делают кофе, приносят бельё, убирают номера и выполняют ещё много другой работы.
А в прошлом году гостиничный гигант Starwood представил роботов, которых назвал Botlrs. Обслуживая гостей, эти роботы могут передвигаться по отелю и в лифтах без человеческой помощи. С 1992 года роботы помогают в больницах: разносят подносы с едой и лекарствами, стирают постельное бельё, выкидывают мусор. В сети гипермаркетов Lowe’s робот OSHbot помогает покупателям отыскать нужный товар.
Amazon использует более 15 000 роботов на своих складах, чтобы вовремя доставлять заказы. Даже армия США планирует заменить десятки тысяч солдат роботами. В прошлом году в Бирмингемском университете появился первый робот-охранник Боб высотой 1,8 метра, который сканирует комнаты и сигнализирует, если видит что-то необычное. Если Боб где-то застревает, он может позвать на помощь, а если разряжается - самоcтоятельно отправляется на подзарядку.
Роботы способствуют повышению продуктивности удалённых работников. В бизнес-школе Массачусетского технологического института те сотрудники, которые работают из дома, могут «разгуливать» по офису и общаться с коллегами при помощи роботов.
Как повсеместное внедрение роботов повлияет на нас
Роботы всё чаще появляются рядом с нами на работе, так не отнимут ли они совсем рабочие места? Некоторые считают, что из-за повсеместного внедрения роботов люди могут оказаться на улице. В 2013 году в Оксфорде провели исследование, согласно которому 47% существующих ныне работ повышенного риска будут вскоре автоматизированы. В течение 20 лет люди на этих местах будут заменены роботами.
Однако существует и другое мнение: отдав машинам тяжёлую работу, люди смогут посвятить себя более интересным и высокотехнологичным занятиям. Так считает и Дэвид Канн, глава Double Robotics, компании, которая создала роботов, используемых в Массачусетском технологическом институте.
Роберт Аткинсон, экономист аналитического центра Фонда технологического развития и инноваций, утверждает: выводы о том, что роботы отнимут рабочие места, основаны на крайне поверхностном анализе ситуации. По сути же происходит обратное: внедрение роботов снижается. Аткинсон объясняет это падение двумя причинами:
- Тридцать лет назад США гораздо активнее инвестировали в развитие роботостроения и программного обеспечения, нежели сейчас.
- Низко висящие фрукты вроде автоматов регистрации в аэропорту уже сорваны.
Третьей причиной, по мнению Аткинса, можно назвать то, что в США не существует политики развития продуктивности.
Они могли сделать многое, чтобы повысить уровень производительности в стране, но ничего даже не планируют. В отличие, например, от Австралии, где есть Национальная комиссия по повышению производительности, работа которой заключается в выявлении возможностей роста. А мы только предполагаем, что должно произойти…
А компаниям выгоднее нанимать людей с низкой заработной платой, нежели автоматизироваться. Стимула для замены сотрудников роботами нет никакого. Вот если бы людям нужно было платить больше, тогда компании задумались бы о роботизации.
Допустим, если большинство представителей низкооплачиваемых профессий потребуют повышения зарплаты, как это сделали в Нью-Йорке работники заведений фастфуда, тогда процесс автоматизации ускорится.
Вот что говорит по этому вопросу Гарри Матиасон, президент юридической компании Littler Mendelson, которая специализируется на вопросах трудового права в связи с роботизацией.
Прогресс есть. В Нью-Йорке работники фастфуда уже добились того, что минимальная зарплата теперь будет $15 в час. Вскоре работодателям будет экономически выгодно перекладывать часть работы на роботов. Соответственно, это ускорит процесс повсеместной автоматизации. Таким образом, увидеть роботов повсюду в ближайшие пять лет мы сможем, если будем сами проявлять экономическую активность.
Гарри Матиасон
Роботы могут отнять нашу работу, но это не плохо
Как и Аткинсон, Матиасон считает, что причин для беспокойства нет. Он объясняет, что автоматизация 47% рабочих мест повышенного риска не имеет ничего общего с безработицей.
Начнётся перемещение людей на те должности, которых нет сейчас, но они появятся в будущем. Если мы обратимся к истории, то увидим, что подобная ситуация уже была. Тогда всё происходило не так стремительно, как сейчас, но тем не менее прецеденты имелись. К слову, в 1870 году сельским хозяйством зарабатывало 70–80% населения, а сейчас всего 1%.
И, кстати, снова обращаясь к истории, можно увидеть, что при появлении новых технологий на производстве безработица всегда оставалась на прежнем уровне или даже уменьшалась. Мне очень хочется посмотреть, что произойдёт в течение ближайших 10 лет: для людей на первом месте будет стоять не угроза безработицы, а возможность научиться чему-то новому. И если человек 10 лет выполнял одну низкоквалифицированную работу, так, возможно, необходимость карьерного роста будет ему только в радость.
Гарри Матиасон
Матиасон обещает, что нас ждут увлекательные времена. Придётся вносить поправки в Трудовой кодекс, отвечая на вопросы, связанные с взаимодействием людей и роботов. Например, как регулировать распространение личной информации, ведь роботы будут записывать то, что слышат.
Несмотря на то что неизвестно, насколько быстро проникнет роботизация во все сферы, нет никаких сомнений в том, что это случится. И пока одни продолжают бояться потерять рабочее место, другие мечтают о том, как это улучшит экономику в целом и благосостояние каждого человека. Производительность компаний будет расти, они будут больше зарабатывать и смогут больше платить работникам.
Однако один из споров до сих пор не разрешён: каково это, когда на ресепшене отеля тебя встречает актроид, который жутко похоже имитирует человеческие жесты…
Роботы поисковой системы
Роботы поисковой системы, иногда их называют «пауки» или «кроулеры» (crawler) - это программные модули, занимающиеся поиском web-страниц. Как они работают? Что же они делают в действительности? Почему они важны?
Учитывая весь шум вокруг поисковой оптимизации и индексных баз данных поисковиков, вы, наверное думаете, что роботы должно быть великие и могущественные существа. Неправда. Роботы поисковика обладают лишь базовыми функциями, похожими на те, которыми обладали одни из первых броузеров, в отношении того, какую информацию они могут распознать на сайте. Как и ранние броузеры, роботы попросту не могут делать определенные вещи. Роботы не понимают фреймов, Flash анимаций, изображений или JavaScript. Они не могут зайти в разделы, защищенные паролем и не могут нажимать на все те кнопочки, которые есть на сайте. Они могут "заткнуться" в процессе индексирования динамических адресов URL и работать очень медленно, вплоть до остановки и безсилием над JavaScript-навигацией.
Как работают роботы поисковой машины?
Поисковые роботы стоит воспринимать, как программы автоматизированного получения данных, путешествующие по сети в поисках информации и ссылок на информацию.
Когда, зайдя на страницу "Submit a URL", вы регистрируете очередную web-страницу в поисковике - в очередь для просмотра сайтов роботом добавляется новый URL. Даже если вы не регистрируете страницу, множество роботов найдет ваш сайт, поскольку существуют ссылки из других сайтов, ссылающиеся на ваш. Вот одна из причин, почему важно строить ссылочную популярность и размещать ссылки на других тематических ресурсах.
Прийдя на ваш сайт, роботы сначала проверяют, есть ли файл robots.txt. Этот файл сообщает роботам, какие разделы вашего сайта не подлежат индексации. Обычно это могут быть директории, содержащие файлы, которыми робот не интересуется или ему не следовало бы знать.
Роботы хранят и собирают ссылки с каждой страницы, которую они посещают, а позже проходят по этим ссылкам на другие страницы. Вся всемирная сеть построена из ссылок. Начальная идея создания Интернет сети была в том, что бы была возможность перемещаться по ссылкам от одного места к другому. Вот так перемещаются и роботы.
"Остроумность" в отношении индексирования страниц в реальном режиме времени зависит от инженеров поисковых машин, которые изобрели методы, используемые для оценки информации, получаемой роботами поисковика. Будучи внедрена в базу данных поисковой машины, информация доступна пользователям, которые осуществляют поиск. Когда пользователь поисковой машины вводит поисковый запрос, производится ряд быстрых вычислений для уверенности в том, что выдается действительно правильный набор сайтов для наиболее релевантного ответа.
Вы можете просмотреть, какие страницы вашего сайта уже посетил поисковый робот, руководствуясь лог-файлами сервера, или результатами статистической обработки лог-файла. Идентифицируя роботов, вы увидите, когда они посетили ваш сайт, какие страницы и как часто. Некоторые роботы легко идентифицируются по своим именам, как Google"s "Googlebot". Другие более скрытые, как, например, Inktomi"s "Slurp". Другие роботы так же могут встречаться в логах и не исключено, что вы не сможете сразу их идентифицировать; некоторые из них могут даже оказаться броузерами, которыми управляют люди.
Помимо идентификации уникальных поисковых роботов и подсчета количества их визитов, статистика также может показать вам агрессивных, поглощающих ширину катала пропускания роботов или роботов, нежелательных для посещения вашего сайта.
Как они читают страницы вашего web-сайта?
Когда поисковой робот посещает страницу, он просматривает ее видимый текст, содержание различных тегов в исходном коде вашей страницы (title tag, meta tags, и т.д.), а так же гиперссылки на странице. Судя по словам ссылок, поисковая машина решает, о чем страница. Есть много факторов, используемых для вычисления ключевых моментов страницы «играющих роль». Каждая поисковая машина имеет свой собственный алгоритм для оценки и обработки информации. В зависимости от того, как робот настроен, информация индексируется, а затем доставляется в базу данных поисковой системы.
После этого, информация, доставленная в индексные базы данных поисковой системы, становится частью поисковика и процесса ранжирования в базе. Когда посетитель существляет запрос, поисковик просматривает всю базу данных для выдачи конечного списка, релевантного поисковому запросу.
Базы данных поисковых систем подвергаются тщательной обработке и приведению в соответствие. Если вы уже попали в базу данных, роботы будут навещать вас периодически для сбора любых изменений на страницах и уверенности в том, что обладают самой последней информацией. Количество посещений зависит от установок поисковой машины, которые могут варьироваться от ее вида и назначения.
Иногда поисковые роботы не в состоянии проиндексировать web-сайт. Если ваш сайт упал или на сайт идет большое количество посетителей, робот может быть безсилен в попытках его индексации. Когда такое происходит, сайт не может быть переиндексирован, что зависит от частоты его посещения роботом. В большинстве случаев, роботы, которые не смогли достичь ваших страниц, попытаются позже, в надежде на то, что ваш сайт в ближайшее время будет доступен.
Многие поисковые роботы не могут быть идентифицированы, когда вы просматриваете логи. Они могут посещать вас, но логи утверждают, что кто-то использует Microsoft броузер и т.д. Некоторые роботы идентифицируют себя использованием имени поисковика (googlebot) или его клона (Scooter = AltaVista).
В зависимости от того, как робот настроен, информация индексируется, а затем доставляется в базы данных поисковой машины.
Базы данных поисковых машин подвергаются модификации в различные сроки. Даже директории, имеющие вторичные поисковые результаты используют данные роботов как содержание своего web-сайта.
Собственно, роботы не используются поисковиками лишь для вышеизложенного. Существуют роботы, которые проверяют баз данных на наличие нового содержания, навещают старое содержимое базы, проверяют, не изменились ли ссылки, загружают целые сайты для просмотра и так далее.
По этой причине, чтение лог-файлов и слежение за выдачей поисковой системы помогает вам наблюдать за индексацией ваших проектов.
| Назад |
