[go: up one dir, main page]

WO2000017811A3 - Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt - Google Patents

Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt Download PDF

Info

Publication number
WO2000017811A3
WO2000017811A3 PCT/DE1999/002846 DE9902846W WO0017811A3 WO 2000017811 A3 WO2000017811 A3 WO 2000017811A3 DE 9902846 W DE9902846 W DE 9902846W WO 0017811 A3 WO0017811 A3 WO 0017811A3
Authority
WO
WIPO (PCT)
Prior art keywords
statuses
sequence
actions
ensues
action
Prior art date
Application number
PCT/DE1999/002846
Other languages
English (en)
French (fr)
Other versions
WO2000017811A2 (de
Inventor
Ralf Neuneier
Oliver Mihatsch
Original Assignee
Siemens Ag
Ralf Neuneier
Oliver Mihatsch
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Ag, Ralf Neuneier, Oliver Mihatsch filed Critical Siemens Ag
Priority to US09/787,698 priority Critical patent/US7047224B1/en
Priority to EP99953714A priority patent/EP1116172A2/de
Priority to JP2000571401A priority patent/JP2002525763A/ja
Publication of WO2000017811A2 publication Critical patent/WO2000017811A2/de
Publication of WO2000017811A3 publication Critical patent/WO2000017811A3/de

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Feedback Control In General (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

Die Ermittlung der Folge von Aktionen erfolgt derart, daß eine aus der Folge von Aktionen resultierende Folge von Zuständen hinsichtlich einer vorgegebenen Optimierungsfunktion optimiert ist. Die Optimierungsfunktion enthält einen variablen Parameter, mit dem ein Risiko einstellbar ist, welches Risiko die resultierende Folge von Zuständen hinsichtlich eines vorgegebenen Zustandes des Systems aufweist.
PCT/DE1999/002846 1998-09-23 1999-09-08 Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt WO2000017811A2 (de)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US09/787,698 US7047224B1 (en) 1998-09-23 1999-09-08 Method and configuration for determining a sequence of actions for a system which comprises statuses, whereby a status transition ensues between two statuses as a result of an action
EP99953714A EP1116172A2 (de) 1998-09-23 1999-09-08 Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt
JP2000571401A JP2002525763A (ja) 1998-09-23 1999-09-08 アクションに基づいて２つの状態の間の状態遷移が行われる、状態を有するシステムに対するアクションのシーケンスをもとめるための方法及び装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE19843620 1998-09-23
DE19843620.3 1998-09-23

Publications (2)

Publication Number Publication Date
WO2000017811A2 WO2000017811A2 (de) 2000-03-30
WO2000017811A3 true WO2000017811A3 (de) 2000-12-07

Family

ID=7881965

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE1999/002846 WO2000017811A2 (de) 1998-09-23 1999-09-08 Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt

Country Status (4)

Country Link
US (1) US7047224B1 (de)
EP (1) EP1116172A2 (de)
JP (1) JP2002525763A (de)
WO (1) WO2000017811A2 (de)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7720761B2 (en) * 2002-11-18 2010-05-18 Jpmorgan Chase Bank, N. A. Method and system for enhancing credit line management, price management and other discretionary levels setting for financial accounts
US7363378B2 (en) * 2003-07-01 2008-04-22 Microsoft Corporation Transport system for instant messaging
WO2007036003A1 (en) * 2005-09-30 2007-04-05 University Of South Australia Reinforcement learning for resource allocation in a communications system
US7930564B2 (en) * 2006-07-31 2011-04-19 Intel Corporation System and method for controlling processor low power states
DE102008007700A1 (de) * 2007-10-31 2009-05-07 Siemens Aktiengesellschaft Verfahren zur rechnergestützten Exploration von Zuständen eines technischen Systems
GB201009974D0 (en) 2010-06-15 2010-07-21 Trinity College Dublin Decentralised autonomic system and method for use inan urban traffic control environment
DE102011075337A1 (de) * 2011-05-05 2012-11-08 Siemens Ag Verfahren und Vorrichtung zur Ansteuerung einer Anlage
US8615962B1 (en) * 2013-01-14 2013-12-31 GM Global Technology Operations LLC Retention feature for automotive deco trim
CN103217899B (zh) * 2013-01-30 2016-05-18 中国科学院自动化研究所 基于数据的q函数自适应动态规划方法
WO2014148564A1 (ja) * 2013-03-19 2014-09-25 株式会社イシダ 定量計量システム及び定量計量方法
US9679258B2 (en) * 2013-10-08 2017-06-13 Google Inc. Methods and apparatus for reinforcement learning
US10871585B2 (en) * 2016-08-03 2020-12-22 Harris Corporation System for processing seismic data based upon linear optimization and related methods
CN109870992B (zh) * 2019-03-26 2021-09-07 合肥工业大学 一种不考虑延时等待的csps系统控制方法
CN110758382B (zh) * 2019-10-21 2021-04-20 南京航空航天大学 一种基于驾驶意图的周围车辆运动状态预测系统及方法
US20220108412A1 (en) * 2020-10-07 2022-04-07 Nec Corporation Adaptive autonomous negotiation method and system of using
US12265592B2 (en) * 2021-12-09 2025-04-01 International Business Machines Corporation Model aggregation for fitted Q-evaluation

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2150924T3 (es) * 1992-04-13 2000-12-16 Pat Gmbh Procedimiento y sistema para vigilar la circulacion en carretera y para informar a los automovilistas.
AT401702B (de) * 1993-11-24 1996-11-25 Siemens Ag Oesterreich Verfahren und anordnung zum routen von verbindungen in einem vermittelnden kommunikationsnetz
US5608843A (en) 1994-08-01 1997-03-04 The United States Of America As Represented By The Secretary Of The Air Force Learning controller with advantage updating algorithm
WO1997046929A2 (en) * 1996-06-04 1997-12-11 Werbos Paul J 3-brain architecture for an intelligent decision and control system
US6336109B2 (en) * 1997-04-15 2002-01-01 Cerebrus Solutions Limited Method and apparatus for inducing rules from data classifiers

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
AOKI Y: "EVALUATION AND OPTIMIZATION OF ENVIRONMENTAL PLANNING UNDER THE RISK-AVERSION OF NON-REPAIRABLE DAMAGE", ENVIRONMENTAL SYSTEMS PLANNING CONFERENCE, 1 August 1977 (1977-08-01) - 5 August 1977 (1977-08-05), pages 847 - 852, XP000922719 *
GUTJAHR W J: "Failure Risk Estimation via Markov Software Usage Models", PROCEEDINGS OF THE 15TH INTERNATIONAL CONFERENCE ON COMPUTER SAFETY, RELIABILITY AND SECURITY, SAFECOMP 96, 23 October 1996 (1996-10-23) - 25 October 1996 (1996-10-25), pages 183 - 192, XP000921432 *
NEUNEIER R: "Enhancing Q-Learning for Optimal Asset Allocation", ADVANCES IN NEURAL INFORMATION PROCESSING SYSTEMS 10-PROCEEDINGS OF THE 1997 CONFERENCE, 1997, pages 936 - 942, XP002144732 *

Also Published As

Publication number Publication date
EP1116172A2 (de) 2001-07-18
JP2002525763A (ja) 2002-08-13
WO2000017811A2 (de) 2000-03-30
US7047224B1 (en) 2006-05-16

Similar Documents

Publication Publication Date Title
WO2000017811A3 (de) Verfahren und anordnung zur ermittlung einer folge von aktionen für ein system, welches zustände aufweist, wobei ein zustandsübergang zwischen zwei zuständen aufgrund einer aktion erfolgt
WO2000016178A3 (en) Analytic network engine and spreadsheet interface system
EP1443689A3 (de) Minimierung der Dispersion von faseroptischen Übertragungsstrecken
WO1997012508A3 (en) Transforming and manipulating program object code
EP0945845A3 (de) Energieverbrauchssteuerung für Anzeigegeräte
WO2000017859A8 (en) Noise suppression for low bitrate speech coder
WO2001039370A3 (en) Signal processing system and method
AU1025399A (en) Method and system of configuring a speech recognition system
WO2001095133A3 (en) A method of modelling a maintenance system
WO2000039755A3 (en) Method, system, and computer program product for modified blending between clip-map tiles
GB2380279B (en) Computer firewall system and method
CA2358416A1 (en) Process facility control systems using an efficient prediction form and methods of operating the same
EP0874477A3 (de) Signalübertragungssystem und Verfahren zur Überwachung davon
EP2429148A3 (de) Inhaltübertragungsverfahren und Inhaltübertragungssystem
WO2006019389A3 (en) System and method for ordering haptic effects
WO2002043463A3 (en) Systems and methods for generating hardware description code
WO2002021239A3 (en) Adaptively controlled resource and method for controlling the behavior of same
WO1998024198A3 (en) Method of setting load goal, and radio system
AU1578495A (en) Method of detecting service interactions in intelligent networks
WO2003019340A3 (en) Method and apparatus for regulating the voltage supplied to a computer system
CA2233732A1 (en) System and method for achieving efficient coordination of protection switching
WO2004010263A3 (en) Method and system for automating business processes
GB0004671D0 (en) Handover in a communication system
FI991448A7 (fi) Lähetystehon säätömenetelmä
Frizelle Getting the measure of complexity

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): JP US

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

121 Ep: the epo has been informed by wipo that ep was designated in this application
DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
AK Designated states

Kind code of ref document: A3

Designated state(s): JP US

AL Designated countries for regional patents

Kind code of ref document: A3

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

WWE Wipo information: entry into national phase

Ref document number: 1999953714

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 09787698

Country of ref document: US

ENP Entry into the national phase

Ref country code: JP

Ref document number: 2000 571401

Kind code of ref document: A

Format of ref document f/p: F

WWP Wipo information: published in national office

Ref document number: 1999953714

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 1999953714

Country of ref document: EP