Lecture Software process improvement: Lesson 29 - Dr. Ghulam Ahmad Farrukh

Lecture Software process improvement: Lesson 29 provide students with knowledge about: software process assessments; software process assessment methodologies; key process areas; key-personnel topics; introduction to some assessment methods;... Please refer to the detailed content of the lecture!

Lecture # 29

• In­house assessments are also common

• Formal software assessments appear to have originated within the IBM corporation in 

the early 1970s

• An assessment finds all the strengths and 

weaknesses associated with software

• The primary goal of software process 

assessments is to gather qualitative 

information about the practices, methods, 

• As the software has become a worldwide 

business phenomenon, the need for 

software process assessments has become more and more important

• Software is a very troublesome and difficult technology

• For large systems, failures outnumber 

• Software process assessment data is 

normally gathered by means of structured interviews with managers and technical 

personnel

• To ensure consistency among enterprises, standard questionnaires are utilized by most 

of the assessment methods, although the 

questions vary from method to method

• A software process assessment is somewhat equivalent to undergoing an annual medical examination

• The annual physical examination is not 

intended to cure any specific disease. The main purpose is to find out about the health 

of the patient

• But without the assessment, many problems would remain invisible

• Assessments should be viewed as nothing more than annual checkups to ensure that 

no new problems have occurred and that 

progress is being made on curing problems found during the last assessment

• Out of a total of 250 factors that can affect the outcome of a software development 

project, an individual  project would be 

affected by 15 to 20 factors

• These factors are collected from projects in the domains of system software, 

information systems, military software, 

• These ten areas are not specific to any 

individual kind of assessment, but are the topics examined by several forms of 

assessment because they have a very 

significant impact on software project 

schedules, productivity, and quality levels

inserted

Key Process Areas

• Software process assessments attempts to identify practices that can lead to successful outcomes on software projects

• Conversely, process assessments also seek 

to identify harmful practices that might lead 

to delays or unacceptable outcomes

• As software projects are very labor 

intensive and require exceptional skills on the part of technical and management 

personnel, software assessments may also examine the factors that are concerned with hiring and supporting software personnel

• Following is a list of ten key personnel­related 

topics that may be examined during software 

process assessments

inserted

Key­Personnel Topics

Introduction to Some Assessment 

Methods

Methods

• Because software development is still a 

largely manual activity performed by 

skilled craftsmen, it is obvious that success 

on software projects requires very capable personnel led by capable managers

• Good teams must also utilize methods and practices that are known to produce 

excellent results, and should avoid practices 

Methods

• Although the assessment and maturity­level concepts can be considered separately, most people regard the two as being a linked set

• Formal SEI assessments are performed by the SEI or by a number of licensed 

consulting companies

• Informal “SEI­style” assessments that 

companies perform on their own or that are done by consultants who are not licensed by the SEI but who use assessment approaches derived from the published SEI materials

• There is a large body of knowledge related 

to SEI assessments

• SEI assessment approach originally dealt 

primarily with the software processes and methodologies used by very large 

companies that produced very large systems

• SEI has now broadened the sets of factors included under the assessment

• Software process improvements cannot be successful if they overlook key topics or 

emphasize one topic and ignore others

• Thus, the broad range of topics included in SEI’s programs emphasize that success in software requires being good in many 

activities

• The SPR assessment interview approach is 

a group activity for each project analyzed

• The SPR consultant meets with the project manager and as many as seven technical 

staff members at the same time

• All the participants have seen the 

questionnaires ahead of time, so they know 

• The “official” assessment questionnaire is filled out by the SPR consultant using the group consensus as the source of 

information

• Sometimes there may be debate or 

polarized opinions among team members, 

as can occur on any human activity. A full set of responses is recorded in this case

• These differences are then resolved

• Once a sample of projects has been 

analyzed using the questionnaires, the 

answers to the questions are input directly into a tool that performs a statistical 

analysis of the results and shows the mean values and standard deviations of all factors

• Although strengths are very laudable, the real value of a process assessment for most clients is the discovery and the objective 

analysis of areas in which the client is 

lagging and needs improvement

• Identifying these areas of weakness is the key to a successful process improvement 

program

• Once an assessment is completed, the 

patterns of strengths and weaknesses 

observed usually lead to a desire to improve software development processes

• Once the areas of weakness have been 

analyzed and discussed, the client is in an excellent position to begin a successful 

• Then organizations can follow a six­stage improvement program

Six­Stage Improvement Program

• These six phases provide an overall 

framework for software improvement 

strategies

• Stage 1 concentrates on management issues, 

which are critical to all downstream activities.  Software process improvement is a fairly 

expensive undertaking that can stretch out over  three to five years

• Unless the management community is at state­ of­the­art levels in cost estimating, value 

analysis, and risk analysis, funding for process  improvement may be denied

Technologies

• Management needs to be trained in critical technologies such as planning, sizing, 

• Stage 2 of improvement programs involves the introduction of specific process 

technologies, e.g., formal code and design inspections

• Stage 2 improvements require training and cultural adjustments, but are not very 

expensive in terms of capital equipment or major investments

productivity, schedules, defect prevention, and defect removal efficiencies, against 

• Stage 3 improvements may involve fairly costly tool suites and capital equipment, 

such as better workstations

• As tools support processes, rather than the other way around, one can see why process improvements precede changes in tool 

suites

project management tools

and Specialization

• This stage addresses issues of organization and specialization, and begins to move 

• However, reuse is a double­edge sword

• If the reusable materials are of top quality, then reuse has the best positive ROI of any software technology

• However, if the reusable materials are error prone and filled with defects, then the ROI 

of software reuse switches from positive to 

measurements, and software management training

• Stage 6 involves using software excellence for competitive purposes, such as winning a Baldrige Award and using this award to aid 

in gaining market share

• Software technical staff of exceptional 

ability

• More specialists than average organizations

• Better than average staff morale levels

• Powerful project management tool suites

• Powerful software development tool suites

Leadership ­ 3

• Powerful quality assurance and testing tool suites

• Powerful geriatric tool for aging software

• Cost elements include training, consulting fees, capital equipment, software licenses, and improvement in office conditions

Improvements

• Software Assessments, Benchmarks, and 

Best Practices by Capers Jones (Chapters 2, 

3, and 6)