Вход

Разработка компонентов модуля для агентного моделирования на основе обучения с подкреплением

Рекомендуемая категория для самостоятельной подготовки:
Дипломная работа*
Код 323438
Дата создания 08 июля 2013
Страниц 96
Мы сможем обработать ваш заказ (!) 27 апреля в 12:00 [мск]
Файлы будут доступны для скачивания только после обработки заказа.
4 610руб.
КУПИТЬ

Содержание

ВВЕДЕНИЕ
ГЛАВА 1. ПОСТАНОВКА ЗАДАЧИ
1.1. Общие сведения о Q-обучении. Обзор алгоритмов
1.2. Постановка задачи разработки модуля
1.3. Выводы
ГЛАВА 2. МАТЕМАТИЧЕСКОЕ ОБЕСПЕЧЕНИЕ БЛОКА МОДЕЛИРОВАНИЯ
2.1. Обучение с подкреплением
2.2. Алгоритмы
2.3. Моделирование
2.4. Выводы
ГЛАВА 3. ПРОГРАММНОЕ ОБЕСПЕЧЕНИЕ МОДУЛЯ
3.1. Среда проектирования
3.2. Описание программы
3.3. Результаты расчетов
ГЛАВА 4. ЭКОНОМИЧЕСКАЯ ЧАСТЬ
4.1. Организация и планирование работ
4.2. Экономическое обоснование дипломного проекта
4.3. Конкурентоспособность разработки
4.4 . Социально-экономический аспект
4.5. Выводы
ГЛАВА 5. БЕЗОПАСНОСТЬ ЖИЗНЕДЕЯТЕЛЬНОСТИ
5.1. Анализ опасных и вредных производственных факторов, воздействующих на программиста при работе на ЭВМ
5.2. Расчёт местного освещения
5.3. Пожарная безопасность
5.4. Экологическая безопасность
ЛИТЕРАТУРА
Приложение 1
Приложение 2

Введение

Разработка компонентов модуля для агентного моделирования
на основе обучения с подкреплением

Фрагмент работы для ознакомления

tО – время отладки (1 месяц = 160 часов).
Стоимость НИОКР по данной теме.
Стоимость НИОКР по данной теме определяется по формуле:
КНИОКРО = См – чо ·tНИОКР = 104.79 ·160 = 16766.4 руб. (10.9)
КНИОКРА = См – ча ·tНИОКР = 102.03 ·320 = 32649.6 руб.,
где:
tНИОКР = TНИОКР – tО (1 месяц = 160 часов

Итоговая величина затрат на этапе разработки.
Итоговая величина затрат на этапе разработки определяется по формуле:
КЗО = КНИОКРО + КОО = 16766.4 +16766.4 = 33532.8 руб., (10.10)
КЗА = КНИОКРА + КОА = 32649.6 +16324.8 = 48974.4 руб.
Современная величина затрат на разработку
Современная величина затрат на разработку определяется по формуле:
ЗРоS = КЗО · V t i · t i = 33532.8 руб.,(10.11)
ЗРаS = КЗА ·V t i · t i = 48974.4 руб.,
где:
 t i = 1 – дисконтный множитель (затраты можно считать разовыми).
Результаты расчётов стоимости машино–часа работ ЭВМ представлены в итоговой таблице 10.5.
Таблица 10.5 - Итоговая таблица стоимости машино – часа работы ЭВМ
Наименование статей затрат
Затраты, руб./час.
основной
альтерна-тивный
Основная заработная плата
46.87
46.87
Дополнительная заработная плата
4.65
4.65
Отчисления на социальное страхование
13.41
13.41
Материалы
5.5
3.7
Амортизация
3.7
3.1
Затраты на электроэнергию
0.2
0.2
Прочие производственные расходы
30.46
30.1
Себестоимость машино–часа работы ЭВМ
104.79
102.03
Для расчёта затрат на всём этапе разработки необходимо затраты, полученные на 1 час (таблица 10.4), умножить на количество часов, необходимых на разработку привода скорости двигателя насоса:
Зi (Всего по теме) = Зi·Т
Для основного варианта реализации:
ЗО (Всего по теме) = ЗО·320 = 46.87·320 = 14998,4 руб.,
ЗД (Всего по теме) = ЗД·320 = 4.65·320 = 1488 руб.,
ЗСС (Всего по теме) = ЗСС·320 = 18.35·320 = 5872 руб.,
ЗМ (Всего по теме) = ЗМ·320 = 5.5·320 = 1760 руб.,
ЗА (Всего по теме) = ЗА·320 = 3.7·320 = 1184 руб.,
ЗЭЭ (Всего по теме) = ЗЭЭ·320 = 0.2·320 = 64 руб.,
ЗПР (Всего по теме) = ЗПР·320 = 30.46·320 = 9747.2 руб.,
С м- ч (Всего по теме) = Зм – ч·320 = 109.73·320 = 33532.8 руб.
Для альтернативного варианта реализации:
ЗО (Всего по теме) = ЗО·480 = 46.87·480 = 22497.6 руб.,
ЗД (Всего по теме) = ЗД·480 = 4.65·480 = 2232 руб.,
ЗСС (Всего по теме) = ЗСС·480 = 13.41·480 = 6436.8 руб.,
ЗМ (Всего по теме) = ЗМ·480 = 3.7·480 = 1776 руб.,
ЗА (Всего по теме) = ЗА·480 = 3.1·480 = 1488 руб.,
ЗЭЭ (Всего по теме) = ЗЭЭ·480 = 0.2·480 = 96 руб.,
ЗПР (Всего по теме) = ЗПР·480 = 30.1·480 = 14448 руб.,
С м- ч (Всего по теме) = Зм – ч·480 = 106.97·480 = 48974.4 руб.
Таблица 10.6 - Итоговая таблица затрат на всём этапе разработки
.Наименование статей затрат
Затраты,
руб.
основной
альтернативный
Основная заработная плата
14998.4
22497.6
Дополнительная заработная плата
1488
2232
Отчисления на социальное страхование
5872
8808
Материалы
1760
1776
Амортизация
1184
1488
Затраты на электроэнергию
64
96
Прочие производственные расходы
9747.2
14448
Себестоимость машино–часа работы ЭВМ
33532.8
48974.4
4.4. Расчёт вложений по годам эксплуатации
На этапе эксплуатации определяются сопутствующие капитальные вложения пользователя разработанного проекта, которые включают:
- расходы на доставку к месту эксплуатации, установку, наладку разработанного привода скорости двигателя насоса;
- стоимость необходимых дополнительных элементов основных фондов, связанных с использованием данной разработки, а также годовые издержки эксплуатации пользователей, состоящие из заработной платы работающего с приводом панорамной РЛС персоналом, затрат на потребляемую энергию, затрат на вспомогательные материалы.
В состав годовых издержек эксплуатации разработанной модели привода скорости двигателя насоса будут входить: заработная плата ИТР, непосредственно работающего с данной разработкой, и стоимость затрат машинного времени.
,
где:
ЗОИП – основная зарплата ИТР, руб.;
Фг= 12 мес/г4 нед/мес5 дн/нед8 час/дн=1920ч - годовой
действительный фонд времени работы ЭВМ (1920 ч.)
НД = 10% - процент дополнительной заработной платы,
,
где:
- дополнительная заработная плата производственных рабочих, руб.
Нсс= 26% - процент отчисления на страхование,
Затраты на материалы.
ЗМО = Ц / ТО = 1758.75/320 = 5.5 руб./час
ЗМА = Ц / ТА = 1758.75/480 = 3.7 руб./час,
где:
Т = 1920·2/12 = 320 ч.- время разработки.
Амортизация.
При сроке эксплуатации 2 года амортизация составляет 12%. С учётом данных, полученных в таблице 10.3, она будет равна:
ан=12%-годовая норма амортизации оборудования;
SбЭВМ= 7104 и 5964 руб./год - балансовая стоимость оборудования;
Фг=1920 ч., тогда затраты на амортизацию будут составлять:
Затраты на электроэнергию.
Затраты на электроэнергию для обоих вариантов реализации будут составлять:
SкВтч= 0.25;
NЭВМ и доп.оборуд.= 0.8;
Зээ=0.250.8=0.2 руб.,
где:
SкВТ.ч – стоимость кВтч электроэнергии;
Nj – потребляемая мощность (таблица 10.3), кВт.
Прочие производственные расходы.

где:
НПР – процент прочих производственных расходов (60%).
Себестоимость машино–часа работы ЭВМ.

Список литературы

1.Таха Х. Введение в исследование операций. М.: 1990.
2.Холланд Дж. Генетические алгоритмы // В мире науки.1992 N 2-10.
3.Тарасов В.Б. От многоагентных систем к интеллектуальным организа-циям: философия, психология, информатика, М.-Эдиториал УРСС, 2002.
4.Терехов С.А. Нейро-динамическое программирование автономных агентов. Научная сессия МИФИ-2004. VI - научно-техническая конфе-ренция "Нейроинформатика - 2004". М: МИФИ,2004,с.111-138.
5.Bertsekas D.P., Tsitsitlis J.N. Neuro-Dynamic Programming, Belmont, MA: Athenas Scientific,1996.
6.Sutton, R. S. (1988). “Learning to predict by methods of temporal differ-ences”, Machine Learning, 3: 9-44.
7.Sutton R. S. and Barto A.G. “Reinforcement learning: an intro-duction”, MIT Press, Cambridge, MA, 1998.
8.RummeryG. A. and Niranjan M. “On-line Q-Learning using con-nectionist systems”, CUED/F-INFENG/TR 166, September 1994.
9.Peng, J. And Williams, R.J. (1994). “Incremental multi-step Q-learning”, in W. Cohen and H. Hirsh (eds.), Machine Learning: Proceedings of the Eleventh International Conference (ML94), Mor-gan Kaufmann, New Brunswick, NJ, USA.
10.Bartо A. G., Sutton R. S. And Anderson C. W. (1983). “Neu-ron-like elements that can solve difficult learning control problems”, IEEE Transactions on Systems, Man and Cybernetics, 13: 835 846.
11.Mahadevan S. And Connell J., (1991). “Automatic Programming of Behav-iour-based Robots using Reinforcement Learning”, Artificial intelligence, 55, 2.
12.Tham C. K. And Prager K. W. (1992). “Reinforcement Learning for Multi-linked Manipulator Control”, CUED/G-INFENG/TR 104.
13.Lin-Long-Ji, Mitchell Tom M. “Memory approaches to reinforcement learn-ing in non-Markovian domains”, CMU-CS-92-138, May 1992.
14.Sutton R. S. (1989). ”Implementation details of TD(?) procedure for case of vector predictions and backpropagation”, TN87-509.1, GTE Laboratories.
15.Wilson S. W. (1985), “Knowlege growth in an artificial animal. Proceedings of the First International Conference on Genetic Algorithms and their Applications”.
16.Prescott T. J. And Mayhew J. E. W. (1992). “Obstacles avoid-ance through reinforcement learning”, Advances in Neural Information Processing system 4, Morgan Kaufmann, San Mateo, CA, pp.523-530.
17.Сайт компании Экс Джей Текнолоджис: http://www.xjtek.ru.
18.Wikipedia: Reinforcement learning
19.http://ru.wikiversity.org/wiki/Q-learning+
20.http://ru.wikipedia.org/wiki/Матлаб


Очень похожие работы
Пожалуйста, внимательно изучайте содержание и фрагменты работы. Деньги за приобретённые готовые работы по причине несоответствия данной работы вашим требованиям или её уникальности не возвращаются.
* Категория работы носит оценочный характер в соответствии с качественными и количественными параметрами предоставляемого материала. Данный материал ни целиком, ни любая из его частей не является готовым научным трудом, выпускной квалификационной работой, научным докладом или иной работой, предусмотренной государственной системой научной аттестации или необходимой для прохождения промежуточной или итоговой аттестации. Данный материал представляет собой субъективный результат обработки, структурирования и форматирования собранной его автором информации и предназначен, прежде всего, для использования в качестве источника для самостоятельной подготовки работы указанной тематики.
bmt: 0.00501
© Рефератбанк, 2002 - 2024