<?xml version="1.0" encoding="utf-8"?>
<!DOCTYPE article
  PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.0 20120330//EN" "http://jats.nlm.nih.gov/publishing/1.0/JATS-journalpublishing1.dtd">
<article article-type="research-article" dtd-version="1.0" specific-use="sps-1.8" xml:lang="en" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink">
	<front>
		<journal-meta>
			<journal-id journal-id-type="publisher-id">bbr</journal-id>
			<journal-title-group>
				<journal-title>BBR. Brazilian Business Review</journal-title>
				<abbrev-journal-title abbrev-type="publisher">BBR, Braz. Bus.
					Rev.</abbrev-journal-title>
			</journal-title-group>
			<issn pub-type="ppub">1808-2386</issn>
			<issn pub-type="epub">1807-734X</issn>
			<publisher>
				<publisher-name>Fucape Business School</publisher-name>
			</publisher>
		</journal-meta>
		<article-meta>
			<article-id pub-id-type="doi">10.15728/bbr.2019.16.1.2</article-id>
			<article-id pub-id-type="publisher-id">00002</article-id>
			<article-categories>
				<subj-group subj-group-type="heading">
					<subject>ARTICLES</subject>
				</subj-group>
			</article-categories>
			<title-group>
				<article-title>Vignettes: a data collection technique to handle the differential
					operation of items in surveys</article-title>
					<trans-title-group xml:lang="pt">
					<trans-title>Vignettes: uma técnica de coleta de dados para lidar com o funcionamento diferencial dos itens em levantamentos</trans-title>
				</trans-title-group>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0002-2249-254X</contrib-id>
					<name>
						<surname>Silva</surname>
						<given-names>Antonio Sergio</given-names>
					</name>
					<xref ref-type="aff" rid="aff1">1</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0002-4928-3940</contrib-id>
					<name>
						<surname>Campos-Silva</surname>
						<given-names>Wilerson Lucas</given-names>
					</name>
					<xref ref-type="aff" rid="aff2">2</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0003-4280-3357</contrib-id>
					<name>
						<surname>Gouvea</surname>
						<given-names>Maria Aparecida</given-names>
					</name>
					<xref ref-type="aff" rid="aff3">3</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0003-0551-8282</contrib-id>
					<name>
						<surname>Farina</surname>
						<given-names>Milton Carlos</given-names>
					</name>
					<xref ref-type="aff" rid="aff4">4</xref>
				</contrib>
			</contrib-group>
			<aff id="aff1">
				<label>1</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP, Brazil</institution>
				<institution content-type="normalized">Universidade de São Paulo</institution>
				<institution content-type="orgname">Universidade de São Paulo</institution>
				<addr-line>
					<named-content content-type="city">São Paulo</named-content>
					<named-content content-type="state">SP</named-content>
				</addr-line>
				<country country="BR">Brazil</country>
				 <email>ansesi@usp.br</email>
			</aff>
			<aff id="aff2">
				<label>2</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP, Brazil</institution>
					<institution content-type="normalized">Universidade de São Paulo</institution>
				<institution content-type="orgname">Universidade de São Paulo</institution>
				<addr-line>
					<named-content content-type="city">São Paulo</named-content>
					<named-content content-type="state">SP</named-content>
				</addr-line>
				<country country="BR">Brazil</country>
				 <email>willerson.silva@usp.br</email>
			</aff>
			<aff id="aff3">
				<label>3</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP, Brazil</institution>
					<institution content-type="normalized">Universidade de São Paulo</institution>
				<institution content-type="orgname">Universidade de São Paulo</institution>
				<addr-line>
					<named-content content-type="city">São Paulo</named-content>
					<named-content content-type="state">SP</named-content>
				</addr-line>
				<country country="BR">Brazil</country>
				<email>magouvea@usp.br</email>
			</aff>
			<aff id="aff4">
				<label>4</label>
				<institution content-type="original">Universidade Municipal de São Caetano do Sul,
					São Caetano do Sul, SP, Brazil</institution>
					<institution content-type="normalized">Universidade Municipal de São Caetano do Sul</institution>
				<institution content-type="orgname">Universidade Municipal de São Caetano do
					Sul</institution>
				<addr-line>
					<named-content content-type="city">São Caetano do Sul</named-content>
					<named-content content-type="state">SP</named-content>
				</addr-line>
				<country country="BR">Brazil</country>
				<email>milton_farina@uol.com.br</email>
			</aff>
			<pub-date pub-type="epub-ppub">
				<season>Jan-Feb</season>
				<year>2019</year>
			</pub-date>
			<volume>16</volume>
			<issue>1</issue>
			<fpage>16</fpage>
			<lpage>31</lpage>
			<history>
				<date date-type="received">
					<day>17</day>
					<month>08</month>
					<year>2017</year>
				</date>
				<date date-type="rev-recd">
					<day>02</day>
					<month>08</month>
					<year>2018</year>
				</date>
				<date date-type="accepted">
					<day>22</day>
					<month>03</month>
					<year>2018</year>
				</date>
				<!--<date date-type="pub">
					<day>03</day>
					<month>10</month>
					<year>2018</year>
				</date>-->
			</history>
			<permissions>
				<license license-type="open-access"
					xlink:href="http://creativecommons.org/licenses/by/4.0/" xml:lang="en">
					<license-p>This is an Open Access article distributed under the terms of the
						Creative Commons Attribution License, which permits unrestricted use,
						distribution, and reproduction in any medium, provided the original work is
						properly cited.</license-p>
				</license>
			</permissions>
			<abstract>
				<title>ABSTRACT</title>
				<p>Vignettes are scenarios used in many areas of academic research, whose main
					application is related to situations in which judgments about people are subject
					to biases or distortions. Despite the wide use of vignettes in surveys, the
					recommendations for their creation are limited in the literature. Thus, this
					study aims to review and describe criteria presented in the literature for
					robust textualization of vignettes. This study presents a literature review on
					the use of vignettes and describes a minimum set of criteria (plausibility,
					clarity, simplicity, content validity and analogy between the vignette and the
					construct) for the judicious application of this methodology. They have
					presented four vignettes constructed from the literature review and validated by
					panel of experts, with the purpose of capturing the perception of respondents on
					the protagonists' actions in scenarios about co-creation value in a health
					service. In this way, the study conceives the essential elements for the
					development of this methodology.</p>
			</abstract>
			<trans-abstract xml:lang="pt">
					<title>RESUMO</title>
				<p><italic>Vignettes</italic> são cenários usados em diversas áreas de pesquisas
					acadêmicas cuja principal aplicação se relaciona às situações em que os
					julgamentos sobre as pessoas estão sujeitos a vieses ou distorções. Apesar do
					amplo uso em levantamentos, as recomendações para a sua criação são limitadas na
					literatura. Assim, este estudo objetiva revisar e descrever critérios
					apresentados na literatura para uma textualização robusta de
						<italic>vignettes</italic>. Este trabalho apresenta uma revisão da
					literatura sobre o uso de <italic>vignettes</italic>, além de descrever um
					conjunto mínimo de critérios (plausibilidade, clareza, simplicidade, validade de
					conteúdo e analogia entre a <italic>vignette</italic> e o construto) para a
					aplicação criteriosa dessa metodologia. Foram apresentadas quatro
						<italic>vignettes</italic> construídas a partir da revisão da literatura e
					validadas por um painel de <italic>experts</italic>, com o objetivo de capturar
					a percepção dos respondentes sobre as ações dos protagonistas em cenários sobre
					a cocriação de valores em um serviço de saúde. Desta forma, o estudo concebe os
					elementos essenciais para o desenvolvimento dessa metodologia.</p>
			</trans-abstract>
			<kwd-group xml:lang="en">
				<title>Keywords:</title>
				<kwd>Vignettes</kwd>
				<kwd>Scenarios</kwd>
				<kwd>Data collection</kwd>
				<kwd>Surveys</kwd>
				<kwd>Differential item functioning</kwd>
			</kwd-group>
			<kwd-group xml:lang="pt">
				<title>Palavras-chave:</title>
				<kwd>Vignettes</kwd>
				<kwd>Cenários</kwd>
				<kwd>Coleta de dados</kwd>
				<kwd>Levantamentos</kwd>
				<kwd>Funcionamento diferencial dos itens</kwd>
			</kwd-group>
			<counts>
				<fig-count count="8"/>
				<table-count count="1"/>
				<equation-count count="0"/>
				<ref-count count="38"/>
				<page-count count="16"/>
			</counts>
		</article-meta>
	</front>
	<body>
		<sec sec-type="intro">
			<title>1. INTRODUCTION</title>
			<p>In surveys, it is common to ask people to answer questions about health, policies,
				job satisfaction, life satisfaction, etc. For example, consider the question: "How
				are you satisfied with your life?". In general, the researcher provides the
				informant with a scale whose responses can range from "very dissatisfied" to "very
				satisfied". If the objective of the research is to analyze the real differences
				between the groups, the direct answers to the self-assessments of the respondents
				may be biased, since they can interpret the categories of responses in different
				ways. This heterogeneity in the behavior of informing on survey responses, also
				called differential item functioning (DIF), reflects an interpersonal
				incomparability (<xref ref-type="bibr" rid="B34">VOŇKOVÁ; HULLEGIE,
				2011</xref>).</p>
			<p>An approach to dealing with DIF in surveys was proposed by <xref ref-type="bibr"
					rid="B20">King et al. (2004)</xref>. The authors introduced vignettes, which are
				brief descriptions of hypothetical situations about people's lives, and which are
				important for a certain domain of interest. The concept implies that the respondent
				evaluates both the situation of the person in the hypothetical description and
				his/her own position in relation to the scenario (<xref ref-type="bibr" rid="B13"
					>EVANS et al., 2015</xref>; <xref ref-type="bibr" rid="B15">GROL-PROKOPCZYK;
					FREESE; HAUSER, 2011</xref>). Given that the same scenario is presented to
				several people, similarly, the evaluation of vignettes can provide information on
				respondent styles (<xref ref-type="bibr" rid="B34">VOŇKOVÁ; HULLEGIE,
				2011</xref>).</p>
			<p>In spite of the use of vignettes in surveys, such as in the health area (<xref
					ref-type="bibr" rid="B9">CHRISTEN, HILTON et al., 2016</xref>, <xref
					ref-type="bibr" rid="B28">OREMUS, XIE, GAEBEL, 2016</xref>, <xref
					ref-type="bibr" rid="B32">SILVA et al., 2015</xref>, <xref ref-type="bibr"
					rid="B36">WINSOR, MCLEAN, 2016</xref>), in Sociology (<xref ref-type="bibr"
					rid="B9">CHRISTEN et al, 2016</xref>; <xref ref-type="bibr" rid="B14">GANONG;
					JAMISON; Chapman, 2015</xref>) and empirical research in marketing (<xref
					ref-type="bibr" rid="B10">COVA; PARANQUE, 2016</xref>; <xref ref-type="bibr"
					rid="B38">ZHANG; SIMON, 2016</xref>), the recommendations for its establishment
				are limited in the literature (<xref ref-type="bibr" rid="B35">WASON; POLONSKY;
					HYMAN, 2002</xref>). Thus, this study aims to review and describe criteria
				presented in the literature for robust textualization of vignettes.</p>
		</sec>
		<sec>
			<title>2. DIFFERENTIAL FUNCTIONING OF ITEMS</title>
			<p>Psychometrics recognize the need and importance of standardization of the conditions
				of application of measurement instruments, one of the most important assumptions of
				the evaluation. In relation to the conditions of application of measurement
				instruments, an area of the item response theory dedicates to its study through DIF
					(<xref ref-type="bibr" rid="B2">ANDRADE; LAROS; GOUVEIA, 2010</xref>; <xref
					ref-type="bibr" rid="B3">ANDRIOLA, 2001</xref>).</p>
			<p>The presence of DIF in measurement instruments leads to lack of equity in evaluation
				processes (<xref ref-type="bibr" rid="B15">GROL-PROKOPCZYK; FREESE; HAUSER,
					2011</xref>). For example, consider a situation in which two groups of people
				are submitted to a five-item assessment, whose base text is about football. Group A,
				made up of female people, did not match any item, while people in group B, made up
				of males, matched all items. The hypothesis arises, that the items on soccer would
				favor the male, to the detriment of the female people. It is inferred, therefore,
				that the items have DIF. The DIF, in other words, is an empirical evidence that the
				subgroups do not present the same probability of correctness in the item (<xref
					ref-type="bibr" rid="B2">ANDRADE; LAROS; GOUVEIA, 2010</xref>; <xref
					ref-type="bibr" rid="B3">ANDRIOLA, 2001</xref>; <xref ref-type="bibr" rid="B15"
					>GROL-PROKOPCZYK; FREESE; HAUSER, 2011</xref>).</p>
			<p>Studies on DIF have been widely used to reduce the effects of incomparability among
				people in surveys. Researchers try to improve the problems of interpersonal and
				transcultural incomparability in surveys through careful questioning, translation
				(retranslation), focus group, prior cognitive information, and other techniques
					(<xref ref-type="bibr" rid="B21">KING; WAND, 2007</xref>).</p>
			<p>Among these, anchoring by vignettes is a technique developed to improve the problems
				that occur when different groups of respondents interpret and use the responses of
				an ordinal scale (for example, from full approval to complete disapproval) in a
				varied way (<xref ref-type="bibr" rid="B20">KING et al., 2004</xref>). The anchorage
				with vignettes addresses DIF by introducing supplementary questions so that we are
				able to construct a common scale of measures through respondents (<xref
					ref-type="bibr" rid="B21">KING; WAND, 2007</xref>).</p>
			<p>For <xref ref-type="bibr" rid="B20">King et al. (2004)</xref>, the objective of
				constructing a survey through vignettes is not to create DIF-free questions, but to
				find consistency in responses and equivalence in vignettes. Therefore, a vignette
				must be written to describe, in a clear and concrete language, the character's
				status to the point where the respondent positions himself/herself in all situations
				and is able to compare his/her own status with the character's status (EVANS et al.
					<xref ref-type="bibr" rid="B20">KING et al., 2004</xref>). The next section
				provides a review of what vignettes are, as well as arguments that justify their
				superiority to the use of direct questions in surveys.</p>
		</sec>
		<sec>
			<title>3. VIGNETTES</title>
			<p>A scenario is a story that presents a hypothetical situation that demands action or
				judgment from the respondents (<xref ref-type="bibr" rid="B35">WASON; POLONSKY;
					HYMAN, 2002</xref>). Likewise, a vignette is a brief description of a person or
				a social situation that contains precise references to what is believed to be the
				most important factors for the respondent to make a decision or make a judgment
					(<xref ref-type="bibr" rid="B35">WASON; POLONSKY; HYMAN, 2002</xref>).</p>
			<p>Because they are stimuli used to collect data in surveys, like any other research
				tools, vignettes must be designed properly, otherwise they will produce invalid
				data. The simple adaptation of previously published scenarios can be a problem for
				the researcher, especially if the original research presents faults in its
				constructions. Any changes in the context of the scenarios can have different
				effects on the study variables (<xref ref-type="bibr" rid="B35">WASON; POLONSKY;
					HYMAN, 2002</xref>).</p>
			<p>The vignettes emerge as an analog research model. This type of research constitutes a
				reasoning through an example. As opposed to in vivo research, whose factors the
				researcher cannot manipulate or control, in analogical research we are able to
				control the variables of interest (<xref ref-type="bibr" rid="B22">LANGER,
					2016</xref>).</p>
			<p>Analog research can be done through live models, audio or video recordings, or
				written descriptions of a customer encounter. Written scenarios are also termed as
				vignettes. A set of vignettes can be evaluated over a relatively short period of
				time by the respondents (<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN,
					1984</xref>). In a set of five or more vignettes, for example, it is possible to
				incorporate several factors into each vignette and study them simultaneously. An
				additional advantage in using vignettes relates to the customer's first impression
				bias, such as physical appearance, dressing, speech, etc., being free from such bias
					(<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN, 1984</xref>).</p>
			<p><xref ref-type="bibr" rid="B35">Wason, Polonsky and Hyman (2002)</xref> identified
				six arguments in the literature that justify the superiority of vignettes in
				relation to research with direct questions. For these authors, a vignette: (a)
				provides greater realism because it provides a variety of situational or contextual
				factors; (b) provides a standardized stimulus for all respondents, which increases
				internal validity, measure reliability, and ease of replication; (c) improves the
				validity of the construct because it directs the attention of the respondent to
				specific aspects of the research problem question; (d) it transposes difficulties,
				such as time and expenses, to study real business decisions; (e) reduces the social
				convenience bias, especially if the questions about the intention to behave are
				written in the third or first person; and (f) increases the involvement of
				respondents and dramatizes the issues.</p>
			<p>As an example, <xref ref-type="fig" rid="f1">Figure 1</xref> represents two
				self-assessments (respondents 1 and 2) and three vignettes (characters 1, 2 and 3)
				regarding the level of difficulty in practicing physical activities. The degree of
				self-assessment of the level of difficulty in practicing physical activity is lower
				for respondent 1 than respondent 2 (and both agree on the ordering of the difficulty
				level of the characters).</p>
			<p>
				<fig id="f1">
					<label>Figure 1</label>
					<caption>
						<title>Response scale, vignette technique.</title>
					</caption>
					<graphic xlink:href="f1.jpg"/>
					<attrib>Source: based on <xref ref-type="bibr" rid="B20">King et al.
							(2004)</xref>.</attrib>
				</fig>
			</p>
			<p>Following is a review of the recommendations on the construction of vignettes.</p>
		</sec>
		<sec>
			<title>4. CONSTRUCTION OF VIGNETTES</title>
			<p>The greatest challenge in the construction of vignettes is to strike a balance
				between the rigor of the experimental method and the reality of the environment they
				describe. An ideal set of vignettes should present a descriptive summary that
				resembles the real case stories and whose variation exists only in the factors
				studied (<xref ref-type="bibr" rid="B13">EVANS et al., 2015</xref>, <xref
					ref-type="bibr" rid="B22">LANGER, 2016</xref>). A vignette should be short and
				informative, and reflect an average level of operation, so that there is enough
				variance to reveal the influence of each factor studied (<xref ref-type="bibr"
					rid="B22">LANGER, 2016</xref>). The set of factors should be small and avoid
				sensitive topics such as rape, suicide, euthanasia, etc., as they distort the
				assessment and position people's responses at the extremes of the response scale
					(<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN, 1984</xref>).</p>
			<p>According to <xref ref-type="bibr" rid="B20">King et al. (2004)</xref>, the
				respondent does a self-assessment and evaluation of several hypothetical people
				described in vignettes. Vignettes are arranged on an ordinal scale, from the most
				effective to the least effective. The authors recommend that the self-assessment of
				the respondent be positioned at the end of the scenarios. The authors' approach
				assumes two key assumptions: consistency of response and vignette equivalence.</p>
			<p>The consistency of the response assumes that each person uses the category of
				responses to a particular question of the survey the same way, whether in
				self-assessment or evaluation of hypothetical situations. The type of DIF can vary
				between respondents and even for a single respondent among the questions of a
				survey, but it cannot vary between the self-assessment and the set of vignettes
				associated with a single question for any respondent. This property can be violated
				if the respondent feels inferior in relation to the hypothetical situation (<xref
					ref-type="bibr" rid="B20">KING et al., 2004</xref>).</p>
			<p>The equivalence of vignette assumes that all respondents perceive the level of the
				variable represented in any vignette in the same way, on the same one-dimensional
				scale, independent of the random error. Respondents may differ in how they perceive
				the level of variation established in vignettes, but any difference is random and
				independent of the characteristic being measured. This premise can be violated if
				the respondent interprets the writing of some vignette as directed to some
				particular interest of the researcher (<xref ref-type="bibr" rid="B20">KING et al.,
					2004</xref>).</p>
			<sec>
				<title>4.1. THE RESPONDENT</title>
				<p>The respondent can provide information both inside (<italic>insitu</italic>) and
					outside (<italic>exsitu</italic>) of a real situation. <italic>Insitu</italic>,
					therefore, refers to the information about the respondents coming from real
					situations, created and documented in situations of use.
					<italic>Exsitu</italic>, on the other hand, concerns the seizure of information
					outside the actual use situations, either retrospectively or in advance (<xref
						ref-type="bibr" rid="B11">EDVARDSSON et al., 2012</xref>). In each specific
					context, it creates values in different ways, according to its intention and
					competence. In relation to the context dimension, we can obtain information from
					people who have had (<italic>in context</italic>) or not (<italic>ex
						context</italic>) a real contextual experience (<xref ref-type="bibr"
						rid="B11">EDVARDSSON et al., 2012</xref>).</p>
				<p><xref ref-type="fig" rid="f2">Figure 2</xref> illustrates how these two
					dimensions, from the perspective of <xref ref-type="bibr" rid="B11">Edvardsson
						et al. (2012)</xref>, classify respondent participation to generate
					information.</p>
				<p>
					<fig id="f2">
						<label>Figure 2</label>
						<caption>
							<title>Framework for identifying methods of using customer information
								in service creation.</title>
						</caption>
						<graphic xlink:href="f2.jpg"/>
						<attrib>Source: based on <xref ref-type="bibr" rid="B11">Edvardsson et al.
								(2012)</xref>.</attrib>
					</fig>
				</p>
				<p>Vignettes are analogous to the reflective or idealistic respondent roles proposed
					by <xref ref-type="bibr" rid="B11">Edvardsson et al. (2012)</xref>. We anchor
					the reflective respondent's mode in the context experience of a real resource.
					The information generated by the methods that involve this mode provides valid
					information from respondents who are familiar with the context of the resources.
					Thus, we generate the information after a real situation has occurred and, in
					this way, the respondents have the opportunity to reflect on what happened
						(<xref ref-type="bibr" rid="B11">EDVARDSSON et al., 2012</xref>).</p>
			</sec>
			<sec>
				<title>4.2. VALIDITY AND RELIABILITY OF VIGNETTES</title>
				<p>For <xref ref-type="bibr" rid="B16">Heverly, Fitt and Newman (1984)</xref> the
					construction of vignettes that describe reality and are valid requires:</p>
				<p>
					<list list-type="alpha-lower">
						<list-item>
							<p>Identification of the constructs of interest. The first step is to
								create a blueprint that identifies the constructs of interest that
								are to be transformed into vignettes, as well as their evaluation
								levels. The constructs should be selected from a literature
								review.</p>
						</list-item>
						<list-item>
							<p>Creation of components of vignettes. It identifies sources from which
								the descriptions representing the constructs are derived. This can
								be done by reviewing the empirical literature or by consulting
								experts. Regardless of the approach, empirical validation by an
								independent sample of judges is required.</p>
						</list-item>
						<list-item>
							<p>Validation of vignettes components. The components of vignettes are
								classified to determine which represent the constructs that are
								proposed to represent. Those that are validated form the final set
								that will compose a vignette.</p>
						</list-item>
						<list-item>
							<p>Construction of the vignettes from their components. The components
								of the vignettes should be randomly distributed so that they
								counterbalance all the research factors.</p>
						</list-item>
					</list>
				</p>
				<p>In addition to conventional methods to ensure the validity and reliability of
					surveys, such as pre-testing and validation by a panel of experts, attention is
					drawn to the following aspects regarding the use of vignettes (<xref
						ref-type="bibr" rid="B35">WASON; POLONSKY; HYMAN, 2002</xref>):</p>
				<p>
					<list list-type="alpha-lower">
						<list-item>
							<p>Plausibility. The researcher must evaluate and adjust the internal
								consistency and verisimilitude of vignettes. The vignettes pre-test
								can ensure that respondents actually believe that the simulations
								are realistic and consistent.</p>
						</list-item>
						<list-item>
							<p>Suitability. The detailing of vignettes should be sufficient to
								control as much as possible the idiosyncratic projections of the
								respondents, but without becoming excessively long to the point of
								overloading them.</p>
						</list-item>
						<list-item>
							<p>Tonality. The greater or lesser detailing of a vignette should be
								consistent with the research problem.</p>
						</list-item>
						<list-item>
							<p>Truism. The manipulated variables must be constructed in a clear and
								evident way and that the respondent, therefore, does not overlooked
								it.</p>
						</list-item>
						<list-item>
							<p>Formulation. The framing of a vignette influences the responses.
								Different versions must be formally equivalent, so that any
								variation in textualization does not change the objective
								information or the respondent's perception.</p>
						</list-item>
					</list>
				</p>
				<p>It is also important to evaluate the validity and generalization of the
					evaluation of the results obtained with vignettes. The validity of content
					refers to the semantic correspondence between the conceptual definition of the
					construct and its measure. A fully valid content means that there is a semantic
					identity between the construct and the measure. In other words, the measure
					accurately represents what the construct proposes to define (<xref
						ref-type="bibr" rid="B29">ROSSITER, 2011</xref>).</p>
				<p><xref ref-type="bibr" rid="B35">Wason, Polonsky and Hyman (2002)</xref> describe
					potential problems or deficiencies when considering the use of vignettes, which
					are:</p>
				<p>
					<list list-type="alpha-lower">
						<list-item>
							<p>Selection of suitable method for vignette. Many surveys done with
								vignettes are based on the constant-variable-value-vignette method
								(CVVV), that is, all respondents analyze the same vignette. Some
								disadvantages may arise from this methodology: divergence in the
								perception of the alternatives of evaluation among the respondents,
								the answers do not describe the sequence of thoughts that the
								respondent used to evaluate the behavior, a set of fixed items may
								omit other important items of the construct, besides the bias of
								social convenience.</p>
						</list-item>
						<list-item>
							<p>Adapt the questions to the vignettes. Previously validated scales are
								preferred over new ones. On the other hand, one should not rely
								entirely on pre-existing vignettes. The researcher should ensure
								that the questions thoroughly explore the relevant issues of his/her
								study and look for the presence of DIF.</p>
						</list-item>
						<list-item>
							<p>Certification of the use of all relevant variables. Initially, the
								researcher must identify the dimensions, then the various levels
								included in each dimension and that can affect the judgment or the
								decision.</p>
						</list-item>
						<list-item>
							<p>Use the appropriate number of vignettes. Few vignettes can limit the
								researcher's ability to manipulate critical variables. A large
								number of vignettes, on the other hand, can lead to information
								overload and respondent fatigue.</p>
						</list-item>
						<list-item>
							<p>Control of social convenience bias. The use of vignettes, textualized
								in the third person, projects the respondent into the position of
								the character and can reduce this bias. The use of the first person
								may introduce an attribution error because people tend to believe
								they have more control over the situation than the characters.</p>
						</list-item>
						<list-item>
							<p>Appropriate population survey. The researcher should select
								respondents who can give meaningful answers to all vignettes.</p>
						</list-item>
						<list-item>
							<p>Adequacy of vignettes for respondents. The researcher should ask for
								eventual respondents of the population to disclose relevant
								situations that involve the study variables and can be done in a
								qualitative way in a focus group, for example.</p>
						</list-item>
						<list-item>
							<p>Application of joint analysis with a theoretical and practical
								platform. The essential question is to establish a set of attributes
								and their levels. For <xref ref-type="bibr" rid="B25">Malhotra
									(2008)</xref> the attributes must be: determinants; easy to
								measure and communicate; realistic; compensatory; arranged so that
								one level is preferable to another level; as a whole, it must
								properly define the situation chosen; and should not be
								redundant.</p>
						</list-item>
					</list>
				</p>
				<p>It is also important that respondents do not perceive the results as a personal
					threat. Conducting a poorly conducted survey with vignettes can bring more harm
					than good. Special attention should be paid so that situations do not arise that
					affect the morality of the respondents (<xref ref-type="bibr" rid="B16">HEVERLY;
						FITT; NEWMAN, 1984</xref>).</p>
				<p>Regarding the judgment of specialists, <xref ref-type="bibr" rid="B29">Rossiter
						(2011)</xref> recommends a sample with three <italic>experts</italic>, five
					managers with less education or ten respondents with less education to carry out
					an initial pre-test to choose the items of the questionnaire and the format of
					the answers.</p>
				<p><xref ref-type="bibr" rid="B27">McCrow et al. (2013)</xref> proposed a
					questionnaire to assist researchers in creating vignettes with reliable
					analogies of the desired clinical scenarios. The questionnaire was applied to
					the experts with characteristics of "blind and independent review". These should
					rank in order (ranking) the items clarity and simplicity, and make a discrete
					choice between plausibility of content, content validity and analogy of vignette
					with the construct. A modification of the checklist proposed by <xref
						ref-type="bibr" rid="B27">McCrow et al. (2013)</xref> can be seen below, in
					the results section, in <xref ref-type="fig" rid="f5">Figure 5</xref>.</p>
				<p>
					<fig id="f3">
						<label>Figure 3</label>
						<caption>
							<title>Visual analog scale.</title>
						</caption>
						<graphic xlink:href="f3.jpg"/>
						<attrib>Source: prepared by the authors.</attrib>
					</fig>
				</p>
				<p>
					<fig id="f4">
						<label>Figure 4</label>
						<caption>
							<title>Example of vignette creation for the flexibility
								construct.</title>
						</caption>
						<graphic xlink:href="f4.jpg"/>
						<attrib>Source: <xref ref-type="bibr" rid="B31">Silva
							(2014)</xref>.</attrib>
					</fig>
				</p>
				<p>
					<fig id="f5">
						<label>Figure 5</label>
						<caption>
							<title>Result of panel of experts on flexibility vignette.</title>
						</caption>
						<graphic xlink:href="f5.jpg"/>
						<attrib>Source: <xref ref-type="bibr" rid="B31">Silva
							(2014)</xref>.</attrib>
					</fig>
				</p>
				<p>There is no consensus on the adequate number of vignettes in a survey (<xref
						ref-type="bibr" rid="B4">BACHMANN et al., 2008</xref>). Some studies,
					however, suggest that as the number of attributes, choices, and vignettes
					increases, the reliability of the response decreases. In general, the number of
					attributes in a vignette should not exceed eight (<xref ref-type="bibr"
						rid="B24">LOUVIERE; EAGLE; COHEN, 2005</xref>) and the number of vignettes
					should not exceed twenty (<xref ref-type="bibr" rid="B19">JOHNSON; ORME,
						1996</xref>). The next section describes the methodology applied in this
					study.</p>
			</sec>
		</sec>
		<sec sec-type="methods">
			<title>5. METHODOLOGY</title>
			<p>In this section, we present the development of an application of the method for
				creating vignettes to a survey of value co-creation in health services. It should be
				noted, that this study does not aim to demonstrate how vignettes minimize the
				effects of DIF in surveys. For this, we recommend a review of the study by <xref
					ref-type="bibr" rid="B20">King et al. (2004)</xref>, where such authors
				demonstrate these properties. The research proposes to identify elements of the
				literature that contribute to the robust construction of vignettes, whose nature
				approaches a more prescriptive rather than descriptive approach to the method.</p>
			<p>Initially, we construct a <italic>blueprint</italic> in the model of structural
				equations modeling to propose a hypothetical model considering the constructs
				flexibility, responsiveness and co-innovation of the front-line employees of a
				health service who are positively associated with the value creation construct
					(<xref ref-type="bibr" rid="B32">SILVA et al., 2015</xref>).</p>
			<p>Each construct has a <italic>cluster</italic> of evaluation items (measurement model)
				that were the objects of the survey. The flexibility construct, for example, has six
				items. We apply the final questionnaire with the 4 vignettes and the 27 items to the
				model that will be presented in <xref ref-type="fig" rid="f3">Figure 3</xref> (<xref
					ref-type="bibr" rid="B31">SILVA, 2014</xref>). However, details regarding
				structural equation modeling fall outside the scope of this article, whose main
				objective directed the focus to describe the vignettes method. We will describe the
				items of each of the constructs in the following sections.</p>
			<p>After the definition of the model, with the specification of the evaluation items for
				each construct, the second step consisted of creating the components of the
				scenarios that represented each of the items of the constructs, which were validated
				by an independent panel of ten experts. All have more than 5 years' experience in
				supervising and/or coordinating clinical services. These qualifications and
				experiences with health services position them as experts with adequate levels of
				knowledge about clinical situations to assess the quality of vignettes.</p>
			<p>The vignettes were reviewed until there was agreement among the experts that the
				scenarios described clinical contexts of interactions between clients (patients) and
				front-line staff (physician, nurse, nurse practitioner, physiotherapist, etc.). In
				addition, the experts also reviewed the semantic correspondence between the
				components of the vignettes and the constructs reviewed by the literature. <xref
					ref-type="bibr" rid="B27">McCrow et al. (2013)</xref> used a cutoff of 90%
				agreement among experts to consider that there should be no changes in the
				textualization vignettes.</p>
			<sec>
				<title>5.1. DESCRIPTION OF CONSTRUCTS</title>
				<p><xref ref-type="table" rid="t1">Table 1</xref> presents the items of the
					constructs that we apply in this research.</p>
				<table-wrap id="t1">
					<label>Table 1</label>
					<caption>
						<title>Constructs and their respective evaluation items.</title>
					</caption>
					<alternatives>
						<graphic xlink:href="t1.jpg"/>
					<table frame="box" rules="groups" style="border-color:#2465b0">
						<colgroup>
							<col width="25%"/>
							<col width="25%"/>
							<col width="25%"/>
							<col width="25%"/>
						</colgroup>
						<thead>
							<tr>
								<th align="left">Flexibility</th>
								<th align="left">Co-innovation</th>
								<th align="left">Responsiveness</th>
								<th align="left">Co-creation</th>
							</tr>
						</thead>
						<tbody>
							<tr>
								<td align="left">F1 - Volume</td>
								<td align="left">I1 - Services</td>
								<td align="left">R1 - Dignity </td>
								<td align="left">C1 - Cooperation </td>
							</tr>
							<tr>
								<td align="left">F2 - Reactivity</td>
								<td align="left">I2 - Scratch</td>
								<td align="left">R2 - Confidentiality</td>
								<td align="left">C2 - Information cataloging</td>
							</tr>
							<tr>
								<td align="left">F3 - Expansion</td>
								<td align="left">I3 - Architecture</td>
								<td align="left">R3 - Autonomy</td>
								<td align="left">C3 - Complementing complementary therapies </td>
							</tr>
							<tr>
								<td align="left">F4 - Communication</td>
								<td align="left">I4 - Value</td>
								<td align="left">R4 - Immediate attention</td>
								<td align="left">C4 - Learning together </td>
							</tr>
							<tr>
								<td align="left">F5 - Routing</td>
								<td align="left">I5 - Customer base</td>
								<td align="left">R5 - Tangible aspects</td>
								<td align="left">C5 - Lifestyle changes </td>
							</tr>
							<tr>
								<td align="left">F6 - Function</td>
								<td align="left">I6 - Business Models</td>
								<td align="left">R6 - Access to social media support</td>
								<td align="left">C6 - Connectivity </td>
							</tr>
							<tr>
								<td align="left">&#x00A0;</td>
								<td align="left">&#x00A0;</td>
								<td align="left">R7 - Choice of service provider</td>
								<td align="left">C7 - Coproduction</td>
							</tr>
							<tr>
								<td align="left">&#x00A0;</td>
								<td align="left">&#x00A0;</td>
								<td align="left">&#x00A0;</td>
								<td align="left">C8 - Brain stimulation workshops</td>
							</tr>
						</tbody>
					</table>
				</alternatives>
						<attrib>Source: prepared by the authors.</attrib>
				</table-wrap>
				<p>Since flexibility is a construct to deal with unforeseen changes, we should
					consider the system dynamics technology in the planning, forecasting,
					communication and implementation capabilities in its measurement (<xref
						ref-type="bibr" rid="B8">CHOU; CHUA, TEO, 2010</xref>; <xref ref-type="bibr"
						rid="B30">SCHNEEWEISS; SCHNEIDER, 1999</xref>).</p>
				<p>Innovation through creativity is a dynamic process in which a person interacts
					with various factors within a social structure. That is, it results from a
					product of a social system, not merely the capacity of a person or a group of
					people (<xref ref-type="bibr" rid="B18">JACOBS, 2013</xref>). Thus, it becomes
					crucial to maintain a strong and sustainable competitive position to develop the
					ability to co-operate with other organizations (<xref ref-type="bibr" rid="B6"
						>BOSSINK, 2002</xref>).</p>
				<p>We can define responsiveness, in the context of a system, as the outcome that can
					be achieved when institutions and institutional relationships are designed to be
					able to respond adequately to people's legitimate and universal expectations
						(<xref ref-type="bibr" rid="B33">SILVA, 1999</xref>). Customer value
					co-creation is a benefit realized from the integration of resources through
					activities and interactions with employees in the customer service network
						(<xref ref-type="bibr" rid="B26">MCCOLL-KENNEDY et al., 2012</xref>).</p>
			</sec>
			<sec>
				<title>5.2. VIGNETTES: SCALES AND AFFIRMATIONS</title>
				<p>Based on the review of the previous literature, we constructed four vignettes.
					Each of the vignettes represents a scenario associated to one of the four
					constructs of the structural model: flexibility (scenario 1); co-innovation
					(scenario 2); responsiveness (scenario 3); and, co-creation (scenario 4).</p>
				<p>The scenarios represent situations of <italic>exsitu</italic> use, that is, they
					concern the seizure of information outside the situations of real use,
					retrospectively or in advance (<xref ref-type="bibr" rid="B11">EDVARDSSON et
						al., 2012</xref>) of the front-line staff (doctors, nurses,
					physiotherapists, technicians nursing, etc.). In relation to the context
					dimension, we can obtain information from the people who have been <italic>in
						contexto</italic> (<xref ref-type="bibr" rid="B11">EDVARDSSON et al.,
						2012</xref>). Respondents are familiar with context situations.</p>
				<p>For each scenario, a set of statements (items) asks the respondent to report
					their level of approval or disapproval of each statement in the scenario. Thus,
					frontline employees are positioned, in this research, in the classification by
						<xref ref-type="bibr" rid="B11">Edvardsson et al. (2012)</xref>, as
					reflective clients: they have experience in the real context of the service, but
					they are not experiencing a real situation of value creation.</p>
				<p>A nine-point visual analogue scale measures the items. Analog visual scales
					produce results that are closer to a continuous measure (<xref ref-type="bibr"
						rid="B12">ERNSTG&#x00C5;RD; BOTTAI, 2012</xref>). The grade of disapproval
					or approval on the visual analogue scale is graded from 1 (totally disapprove)
					to 9 (fully approve) (<xref ref-type="fig" rid="f3">Figure 3</xref>). Numbering
					in the 1-5, 1-7, 1-9 or 1-11 format should be avoided because the sequence
					obscures the bipolar nature of the attribute for the respondent. We should
					always evaluate with a single item (<xref ref-type="bibr" rid="B29">ROSSITER,
						2011</xref>).</p>
				<p>The selection of statements should be such that people with different points of
					view regarding the attitude of interest in the survey respond in different ways
						(<xref ref-type="bibr" rid="B23">LIKERT, 1932</xref>). We must observe the
					following criteria in the construction of statements: (a) all statements should
					express desired behaviors, not statements about facts; (b) statements should be
					clear, concise and honest, with the simplest vocabulary possible; (c) in
					general, it would be desirable for the modal reaction of each statement to be
					averaged in relation to the possible responses; (d) statements must be in a
					bipolar distribution, so that half of the assertions are favorable and the other
					half unfavorable to the research attitude; (e) the different alternatives should
					refer to a single attitude, never to multiple attitudes.</p>
				<p>We pre-tested the final questionnaire, composed of four vignettes and 27 items
					with representatives of the population of interest to verify the adequacy of the
					proposed model. The following is an illustration of the vignettes that represent
					the researched constructs and the evaluation checklist of the flexibility
					construct.</p>
			</sec>
		</sec>
		<sec sec-type="results">
			<title>6. RESULTS</title>
			<p>Regarding the content of the four constructs, there was 100% agreement among the
				experts about the appropriate context for the population of interest, indication of
				the behaviors of the client and the front-line staff, as well as indication of the
				communication between the front-line staff. After the adjustments indicated by the
				experts' observations, there was unanimity of agreement for the clarity, the
				simplicity and the correspondence between the domains of the four constructs. The
				four vignettes, from the perspective of all the experts, corresponded to the
				semantic meaning of the respective constructs. The following are the vignettes of
				the four researched constructs.</p>
			<sec>
				<title>6.1. VIGNETTE OF THE FLEXIBILITY CONSTRUCT</title>
				<p><xref ref-type="fig" rid="f4">Figure 4</xref> illustrates the description of the
					vignette corresponding to the flexibility construct and its associated items.
						<xref ref-type="fig" rid="f5">Figure 5</xref> presents the final result of
					the panel of experts about this construct, and for the others the results are
					similar. Experts 1 to 4 (EXP1 ... EXP4), are physicians; those from 5 to 7,
					nurses; and the 8 to 10, physiotherapists. In the second column (<xref
						ref-type="fig" rid="f5">Figure 5</xref>) are the criteria for evaluating
					vignettes and their items, while in the latter there is the degree of agreement
					among the experts about content, clarity, simplicity, content validity and the
					analogy between vignette and the corresponding construct.</p>
				<p>We can see flexibility, as a feature of the organization, under three conceptual
					components: employee skills, employee behavior, and the organization's human
					resource practices (<xref ref-type="bibr" rid="B5">BHATTACHARYA; GIBSON; DOTY,
						2005</xref>). These characteristics are present, to some degree, in the
					concepts of items F5 (routing flexibility) and F6 (function flexibility) (<xref
						ref-type="fig" rid="f4">Figure 4</xref>). These items describe,
					respectively, alternative routes for service delivery (responding to the
					visitor's intercurrence in the apartment instead of the client be moved to the
					emergency room) and capabilities of employees to perform new operations (the
					staff of the apartments, in hospitals, have specific operations directed to
					hospitalized clients).</p>
				<p>Item F1 (<xref ref-type="fig" rid="f4">Figure 4</xref>) refers to the temporary
					movement in a system to change its state in response to a variation in the
					demand for the service (the visitor demanded an unexpected service in the unit,
					so that the employees made a temporary move to attend to this demand), while
					item F2 refers to how fast the system performs this movement (employees attended
					quickly to the demand of the visitor, as opposed to a routine in which the
					customer could be moved to the first aid, demand the opening of an answer card
					and waiting to be answered). Employees, in this scenario, have not only
					demonstrated interest, as well as skills for temporary movement.</p>
			</sec>
			<sec>
				<title>6.2. VIGNETTE OF THE CO-INNOVATION, RESPONSIVENESS AND CO-CREATION
					CONSTRUCTS</title>
				<p>The innovation in services is a set of practices to create value for the
					stakeholders through improvements or new proposals, processes and service
					business models (<xref ref-type="bibr" rid="B37">YEN et al., 2012</xref>). In
					addition to paying attention to customer needs, it is also important to
					understand their preferences. The decision falls on a trade-off between risks
					and utilities, distinct between old and new customers (<xref ref-type="bibr"
						rid="B7">CHIU; LEUNG; LAM, 2009</xref>). <xref ref-type="fig" rid="f6"
						>Figure 6</xref> presents the description of the hypothetical scenario
					associated with the co-innovation construct.</p>
				<p>
					<fig id="f6">
						<label>Figure 6</label>
						<caption>
							<title>Example of vignette creation for the coinovation
								construct.</title>
						</caption>
						<graphic xlink:href="f6.jpg"/>
						<attrib>Source: <xref ref-type="bibr" rid="B31">Silva
							(2014)</xref>.</attrib>
					</fig>
				</p>
				<p>The construct is related to the user's perception of how health services deliver
					the elements that are not directly linked to the client's health or illness, for
					example, cleanliness of waiting places, offices, examination sites and restrooms
						(<xref ref-type="bibr" rid="B1">ANDRADE, VAITSMAN, FARIAS, 2010</xref>).
						<xref ref-type="fig" rid="f7">Figure 7</xref> presents the description of
					the hypothetical scenario associated with the construct responsiveness. <xref
						ref-type="fig" rid="f8">Figure 8</xref> presents the description of the
					hypothetical scenario associated to the co-construction construct.</p>
				<p>
					<fig id="f7">
						<label>Figure 7</label>
						<caption>
							<title>Example of vignette creation for responsiveness
								construct.</title>
						</caption>
						<graphic xlink:href="f7.jpg"/>
						<attrib>Source: <xref ref-type="bibr" rid="B31">Silva
							(2014)</xref>.</attrib>
					</fig>
				</p>
				<p>
					<fig id="f8">
						<label>Figure 8</label>
						<caption>
							<title>Example of vignette creation for the co-creation
								construct.</title>
						</caption>
						<graphic xlink:href="f8.jpg"/>
						<attrib>Source: <xref ref-type="bibr" rid="B31">Silva
							(2014)</xref>.</attrib>
					</fig>
				</p>
				<p>The pre-test of the questionnaire, applied to a group of 15 individuals of the
					population of interest, revealed that the final textualization of the vignettes
					described realistic situations about the domains of interest of each
					construct.</p>
			</sec>
		</sec>
		<sec sec-type="conclusions">
			<title>7. FINAL CONSIDERATIONS</title>
			<p>This research aimed to review and describe criteria presented in the literature for a
				robust vignettes texturing. One of the main goals in the study of judgments and
				decision making directs the focus to identify the variables that influence the
				attitude of the service providers on the clients. For example, in the professional
				meeting of the health-client, it is important to understand how health professionals
				judge or make decisions about their clients (patients). Many of these studies are
				based on analogical research, in which the researcher controls the stimuli for the
				respondents.</p>
			<p>Vignettes emerge as an analog research model in which the researcher controls the
				variables of interest so that we can omit or keep external factors constant.
				Nevertheless, the first draft of a vignette should be based on a review of the
				literature or on the judgment of experts, we recommend that a blind review be
				carried out to improve its validity and reliability.</p>
			<p>The presence of DIF in surveys affects the effectiveness of the instruments, so the
				anchorage with vignettes is presented as a method to repair the measurement problems
				arising from the interpretation of the scales. Through the vignettes are added
				anchors in the questions seeking to achieve consistency in the answers and
				equivalence in the vignettes, allowing the respondent to position himself/herself
				comparatively to the status of the character.</p>
			<p>This study presented some guidelines for the construction of vignettes with a view
				aimed at methodological rigor in relation to the validity and reliability of the
				data. A minimum set of criteria (plausibility, clarity, simplicity, content validity
				and analogy between the vignette and the construct) conceives the essential elements
				for the judicious development of this methodology. Nevertheless, we developed the
				application of the process in this study in scenarios involving health services, and
				since vignettes represent scenarios of real-life situations, it is useful to explore
				the application of the method in other areas of research, including in
				administration.</p>
			<p>We developed the four hypothetical vignettes following the recommendations presented.
				A meticulous review of the literature on value creation attempted to make the
				content of the vignettes describe a real context of health services and thus built
				up a blueprint for the model. Experts evaluated textualized vignettes regarding the
				validation of the scenarios and the semantic equivalence of the vignettes, obtaining
				agreement superior to the recommended cutoff of 90%.</p>
			<p>As a theoretical contribution, this research looked at the recommendations on the
				design of research using the vignettes method. Thus, researchers will rely on a
				survey of criteria and recommendations for a robust textualization and application
				of a method to deal with DIF in surveys. In addition, the research explores a model
				on the background of the experience of value creation for a health service in order
				to illustrate the application of the method according to the criteria and
				recommendations presented. In practice, the results of this research contribute to
				increasing the knowledge about the creation of values in health services by
				proposing a pattern of development of operative resources that facilitates the
				creation of strategies to operationalize the concept of value creation with
				clients.</p>
			<p>As the vignettes were applied to three different categories of professionals
				(physicians, physiotherapists and nurses) to express their opinion on the scenarios,
				one limitation of this research was the absence of hypothesis tests to verify if the
				perception of the scenarios diverges or does not due demographic differences and
				professional backgrounds. In this sense, surveys on attitudes are highly sensitive
				to textualization; the same questions may have different meanings for respondents
				when they are in different contexts. In addition, the theoretical and operational
				platform of this research does not explore the totality of constructs that
				potentially associate with the experience of value creation in health services.</p>
			<p>Although this is a limitation, it also provides an opportunity to verify if there is
				in fact no difference of perception between the groups of respondents. It is also of
				interest to future research, the application and development of these criteria to
				improve the mechanisms for reducing the incomparability of data in interpersonal
				contexts.</p>
		</sec>
	</body>
	<back>
		<ref-list>
			<title>8. REFERENCES</title>
			<ref id="B1">
				<mixed-citation>ANDRADE, G. R. B.; VAITSMAN, J.; FARIAS, L. O. Metodologia de
					elaboração do Índice de Responsividade do Serviço (IRS). <italic>Cad. saúde
						pública</italic>, v. 26, n. 3, p. 523-534, 2010.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>ANDRADE</surname>
							<given-names>G. R. B.</given-names>
						</name>
						<name>
							<surname>VAITSMAN</surname>
							<given-names>J.</given-names>
						</name>
						<name>
							<surname>FARIAS</surname>
							<given-names>L. O.</given-names>
						</name>
					</person-group>
					<article-title>Metodologia de elaboração do Índice de Responsividade do Serviço
						(IRS)</article-title>
					<source>Cad. saúde pública</source>
					<volume>26</volume>
					<issue>3</issue>
					<fpage>523</fpage>
					<lpage>534</lpage>
					<year>2010</year>
				</element-citation>
			</ref>
			<ref id="B2">
				<mixed-citation>ANDRADE, J. M.; LAROS, J. A.; GOUVEIA, V. V. O uso da teoria de
					resposta ao item em avaliações educacionais: diretrizes para pesquisadores.
						<italic>Aval. Psicol.</italic>, v. 9, n. 3, p. 421-435,
					2010.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>ANDRADE</surname>
							<given-names>J. M.</given-names>
						</name>
						<name>
							<surname>LAROS</surname>
							<given-names>J. A.</given-names>
						</name>
						<name>
							<surname>GOUVEIA</surname>
							<given-names>V. V.</given-names>
						</name>
					</person-group>
					<article-title>O uso da teoria de resposta ao item em avaliações educacionais:
						diretrizes para pesquisadores</article-title>
					<source>Aval. Psicol.</source>
					<volume>9</volume>
					<issue>3</issue>
					<fpage>421</fpage>
					<lpage>435</lpage>
					<year>2010</year>
				</element-citation>
			</ref>
			<ref id="B3">
				<mixed-citation>ANDRIOLA, W. B. Descrição dos principais métodos para detectar o
					funcionamento diferencial dos itens (DIF). <italic>Psicologia: Reflexão e
						Crítica</italic>, v. 14, n. 3, p. 643-652, 2001.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>ANDRIOLA</surname>
							<given-names>W. B.</given-names>
						</name>
					</person-group>
					<article-title>Descrição dos principais métodos para detectar o funcionamento
						diferencial dos itens (DIF)</article-title>
					<source>Psicologia: Reflexão e Crítica</source>
					<volume>14</volume>
					<issue>3</issue>
					<fpage>643</fpage>
					<lpage>652</lpage>
					<year>2001</year>
				</element-citation>
			</ref>
			<ref id="B4">
				<mixed-citation>BACHMANN, L. M. et al. Vignette studies of medical choice and
					judgement to study caregivers' medical decision behaviour: systematic review.
						<italic>BMC medical research methodology</italic>, v. 8, n. 1, p. 50,
					2008.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>BACHMANN</surname>
							<given-names>L. M.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Vignette studies of medical choice and judgement to study
						caregivers' medical decision behaviour: systematic review</article-title>
					<source>BMC medical research methodology</source>
					<volume>8</volume>
					<issue>1</issue>
					<fpage>50</fpage>
					<lpage>50</lpage>
					<year>2008</year>
				</element-citation>
			</ref>
			<ref id="B5">
				<mixed-citation>BHATTACHARYA, M.; GIBSON, D. E.; DOTY, D. H. The effects of
					flexibility in employee skills, employee behaviors, and human resource practices
					on firm performance. <italic>Journal of Management</italic>, v. 31, n. 4, p.
					622-640, 2005.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>BHATTACHARYA</surname>
							<given-names>M.</given-names>
						</name>
						<name>
							<surname>GIBSON</surname>
							<given-names>D. E.</given-names>
						</name>
						<name>
							<surname>DOTY</surname>
							<given-names>D. H.</given-names>
						</name>
					</person-group>
					<article-title>The effects of flexibility in employee skills, employee
						behaviors, and human resource practices on firm performance</article-title>
					<source>Journal of Management</source>
					<volume>31</volume>
					<issue>4</issue>
					<fpage>622</fpage>
					<lpage>640</lpage>
					<year>2005</year>
				</element-citation>
			</ref>
			<ref id="B6">
				<mixed-citation>BOSSINK, B. A. G. The development of co-innovation strategies:
					stages and interaction patterns in interfirm innovation. <italic>R&amp;D
						Management</italic>, v. 32, n. 4, p. 311-320, 2002.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>BOSSINK</surname>
							<given-names>B. A. G.</given-names>
						</name>
					</person-group>
					<article-title>The development of co-innovation strategies: stages and
						interaction patterns in interfirm innovation</article-title>
					<source>R&amp;D Management</source>
					<volume>32</volume>
					<issue>4</issue>
					<fpage>311</fpage>
					<lpage>320</lpage>
					<year>2002</year>
				</element-citation>
			</ref>
			<ref id="B7">
				<mixed-citation>CHIU, D. K. W.; LEUNG, H.-F.; LAM, K.-M. On the making of service
					recommendations: An action theory based on utility, reputation, and risk
					attitude. <italic>Expert Systems with Applications</italic>, v. 36, n. 2, p.
					3293-3301, 2009.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>CHIU</surname>
							<given-names>D. K. W.</given-names>
						</name>
						<name>
							<surname>LEUNG</surname>
							<given-names>H.-F.</given-names>
						</name>
						<name>
							<surname>LAM</surname>
							<given-names>K.-M.</given-names>
						</name>
					</person-group>
					<article-title>On the making of service recommendations: An action theory based
						on utility, reputation, and risk attitude</article-title>
					<source>Expert Systems with Applications</source>
					<volume>36</volume>
					<issue>2</issue>
					<fpage>3293</fpage>
					<lpage>3301</lpage>
					<year>2009</year>
				</element-citation>
			</ref>
			<ref id="B8">
				<mixed-citation>CHOU, M. C.; CHUA, G. A.; TEO, C.-P. On range and response:
					Dimensions of process flexibility. <italic>European Journal of Operational
						Research</italic>, v. 207, n. 2, p. 711-724, 2010.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>CHOU</surname>
							<given-names>M. C.</given-names>
						</name>
						<name>
							<surname>CHUA</surname>
							<given-names>G. A.</given-names>
						</name>
						<name>
							<surname>TEO</surname>
							<given-names>C.-P.</given-names>
						</name>
					</person-group>
					<article-title>On range and response: Dimensions of process
						flexibility</article-title>
					<source>European Journal of Operational Research</source>
					<volume>207</volume>
					<issue>2</issue>
					<fpage>711</fpage>
					<lpage>724</lpage>
					<year>2010</year>
				</element-citation>
			</ref>
			<ref id="B9">
				<mixed-citation>CHRISTEN, M. et al. Using thesauruses as a heuristics for mapping
					values. <italic>Cognitive Systems Research</italic>, v. 40, p. 59-74,
					2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>CHRISTEN</surname>
							<given-names>M.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Using thesauruses as a heuristics for mapping
						values</article-title>
					<source>Cognitive Systems Research</source>
					<volume>40</volume>
					<fpage>59</fpage>
					<lpage>74</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B10">
				<mixed-citation>COVA, B.; PARANQUE, B. Value slippage in brand transformation: a
					conceptualization. <italic>Journal of Product &amp; Brand Management</italic>,
					v. 25, n. 1, p. 3-10, 2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>COVA</surname>
							<given-names>B.</given-names>
						</name>
						<name>
							<surname>PARANQUE</surname>
							<given-names>B.</given-names>
						</name>
					</person-group>
					<article-title>Value slippage in brand transformation: a
						conceptualization</article-title>
					<source>Journal of Product &amp; Brand Management</source>
					<volume>25</volume>
					<issue>1</issue>
					<fpage>3</fpage>
					<lpage>10</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B11">
				<mixed-citation>EDVARDSSON, B. et al. Customer integration within service
					development-A review of methods and an analysis of insitu and exsitu
					contributions. <italic>Technovation</italic>, v. 32, n. 7, p. 419-429,
					2012.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>EDVARDSSON</surname>
							<given-names>B.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Customer integration within service development-A review of
						methods and an analysis of insitu and exsitu contributions</article-title>
					<source>Technovation</source>
					<volume>32</volume>
					<issue>7</issue>
					<fpage>419</fpage>
					<lpage>429</lpage>
					<year>2012</year>
				</element-citation>
			</ref>
			<ref id="B12">
				<mixed-citation>ERNSTG&#x00C5;RD, L.; BOTTAI, M. Visual analogue scales: how can we
					interpret them in experimental studies of irritation in the eyes, nose, throat
					and airways? <italic>Journal of Applied Toxicology</italic>, v. 32, n. 10, p.
					777-782, 2012.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>ERNSTG&#x00C5;RD</surname>
							<given-names>L.</given-names>
						</name>
						<name>
							<surname>BOTTAI</surname>
							<given-names>M.</given-names>
						</name>
					</person-group>
					<article-title>Visual analogue scales: how can we interpret them in experimental
						studies of irritation in the eyes, nose, throat and airways?</article-title>
					<source>Journal of Applied Toxicology</source>
					<volume>32</volume>
					<issue>10</issue>
					<fpage>777</fpage>
					<lpage>782</lpage>
					<year>2012</year>
				</element-citation>
			</ref>
			<ref id="B13">
				<mixed-citation>EVANS, S. C. et al. Vignette methodologies for studying clinicians'
					decision-making: Validity, utility, and application in ICD-11 field studies.
						<italic>International Journal of Clinical and Health Psychology</italic>, v.
					15, n. 2, p. 160-170, 2015.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>EVANS</surname>
							<given-names>S. C.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Vignette methodologies for studying clinicians' decision-making:
						Validity, utility, and application in ICD-11 field studies</article-title>
					<source>International Journal of Clinical and Health Psychology</source>
					<volume>15</volume>
					<issue>2</issue>
					<fpage>160</fpage>
					<lpage>170</lpage>
					<year>2015</year>
				</element-citation>
			</ref>
			<ref id="B14">
				<mixed-citation>GANONG, L.; JAMISON, T.; CHAPMAN, A. Assessing differences in
					intimate partner obligations based on relationship status, gender, and parental
					status. <italic>J. Soc. Pers. Relat.</italic>, p. 1-25, 2015.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>GANONG</surname>
							<given-names>L.</given-names>
						</name>
						<name>
							<surname>JAMISON</surname>
							<given-names>T.</given-names>
						</name>
						<name>
							<surname>CHAPMAN</surname>
							<given-names>A.</given-names>
						</name>
					</person-group>
					<article-title>Assessing differences in intimate partner obligations based on
						relationship status, gender, and parental status</article-title>
					<source>J. Soc. Pers. Relat.</source>
					<fpage>1</fpage>
					<lpage>25</lpage>
					<year>2015</year>
				</element-citation>
			</ref>
			<ref id="B15">
				<mixed-citation>GROL-PROKOPCZYK, H.; FREESE, J.; HAUSER, R. M. Using Anchoring
					Vignettes to Assess Group Differences in General Self-Rated Health.
						<italic>Journal of Health and Social Behavior</italic>, v. 52, n. 2, p.
					246-261, 2011.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>GROL-PROKOPCZYK</surname>
							<given-names>H.</given-names>
						</name>
						<name>
							<surname>FREESE</surname>
							<given-names>J.</given-names>
						</name>
						<name>
							<surname>HAUSER</surname>
							<given-names>R. M.</given-names>
						</name>
					</person-group>
					<article-title>Using Anchoring Vignettes to Assess Group Differences in General
						Self-Rated Health</article-title>
					<source>Journal of Health and Social Behavior</source>
					<volume>52</volume>
					<issue>2</issue>
					<fpage>246</fpage>
					<lpage>261</lpage>
					<year>2011</year>
				</element-citation>
			</ref>
			<ref id="B16">
				<mixed-citation>HEVERLY, M. A.; FITT, D. X.; NEWMAN, F. L. Constructing case
					vignettes for evaluating clinical judgment: an empirical model.
						<italic>Evaluation and Program Planning</italic>, v. 7, n. 1, p. 45-55,
					1984.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>HEVERLY</surname>
							<given-names>M. A.</given-names>
						</name>
						<name>
							<surname>FITT</surname>
							<given-names>D. X.</given-names>
						</name>
						<name>
							<surname>NEWMAN</surname>
							<given-names>F. L.</given-names>
						</name>
					</person-group>
					<article-title>Constructing case vignettes for evaluating clinical judgment: an
						empirical model</article-title>
					<source>Evaluation and Program Planning</source>
					<volume>7</volume>
					<issue>1</issue>
					<fpage>45</fpage>
					<lpage>55</lpage>
					<year>1984</year>
				</element-citation>
			</ref>
			<ref id="B17">
				<mixed-citation>HILTON, P. et al. Understanding variations in patient screening and
					recruitment in a multicentre pilot randomised controlled trial: a vignette-based
					study. <italic>Trials</italic>, v. 17, n. 1, p. 522, 2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>HILTON</surname>
							<given-names>P.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Understanding variations in patient screening and recruitment in
						a multicentre pilot randomised controlled trial: a vignette-based
						study</article-title>
					<source>Trials</source>
					<volume>17</volume>
					<issue>1</issue>
					<fpage>522</fpage>
					<lpage>522</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B18">
				<mixed-citation>JACOBS, H. Co-innovation through multiple social identity processes:
					the story of a South African co-op owned business. <italic>European Business
						Review</italic>, v. 25, n. 1, p. 42-64, 2013.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>JACOBS</surname>
							<given-names>H.</given-names>
						</name>
					</person-group>
					<article-title>Co-innovation through multiple social identity processes: the
						story of a South African co-op owned business</article-title>
					<source>European Business Review</source>
					<volume>25</volume>
					<issue>1</issue>
					<fpage>42</fpage>
					<lpage>64</lpage>
					<year>2013</year>
				</element-citation>
			</ref>
			<ref id="B19">
				<mixed-citation>JOHNSON, R. M.; ORME, B. K. How many questions should I ask in
					choice-based conjoint studies. <italic>Sawtooth Software Research
						Papers</italic>, 1996.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>JOHNSON</surname>
							<given-names>R. M.</given-names>
						</name>
						<name>
							<surname>ORME</surname>
							<given-names>B. K.</given-names>
						</name>
					</person-group>
					<article-title>How many questions should I ask in choice-based conjoint
						studies</article-title>
					<source>Sawtooth Software Research Papers</source>
					<year>1996</year>
				</element-citation>
			</ref>
			<ref id="B20">
				<mixed-citation>KING, G. et al. Enhancing the validity and cross-cultural
					comparability of measurement in survey research. <italic>American political
						science review</italic>, v. 98, n. 1, p. 191-207, 2004.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>KING</surname>
							<given-names>G.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Enhancing the validity and cross-cultural comparability of
						measurement in survey research</article-title>
					<source>American political science review</source>
					<volume>98</volume>
					<issue>1</issue>
					<fpage>191</fpage>
					<lpage>207</lpage>
					<year>2004</year>
				</element-citation>
			</ref>
			<ref id="B21">
				<mixed-citation>KING, G.; WAND, J. Comparing incomparable survey responses:
					Evaluating and selecting anchoring vignettes. <italic>Political
						Analysis</italic>, v. 15, n. 1, p. 46-66, 2007.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>KING</surname>
							<given-names>G.</given-names>
						</name>
						<name>
							<surname>WAND</surname>
							<given-names>J.</given-names>
						</name>
					</person-group>
					<article-title>Comparing incomparable survey responses: Evaluating and selecting
						anchoring vignettes</article-title>
					<source>Political Analysis</source>
					<volume>15</volume>
					<issue>1</issue>
					<fpage>46</fpage>
					<lpage>66</lpage>
					<year>2007</year>
				</element-citation>
			</ref>
			<ref id="B22">
				<mixed-citation>LANGER, P. C. The Research Vignette: Reflexive Writing as
					Interpretative Representation of Qualitative Inquiry--A Methodological
					Proposition. <italic>Qualitative Inquiry</italic>, v. 22, n. 9, p. 735-744,
					2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>LANGER</surname>
							<given-names>P. C.</given-names>
						</name>
					</person-group>
					<article-title>The Research Vignette: Reflexive Writing as Interpretative
						Representation of Qualitative Inquiry--A Methodological
						Proposition</article-title>
					<source>Qualitative Inquiry</source>
					<volume>22</volume>
					<issue>9</issue>
					<fpage>735</fpage>
					<lpage>744</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B23">
				<mixed-citation>LIKERT, R. A technique for the measurement of attitudes.
						<italic>Archives of psychology</italic>, 1932.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>LIKERT</surname>
							<given-names>R.</given-names>
						</name>
					</person-group>
					<article-title>A technique for the measurement of attitudes</article-title>
					<source>Archives of psychology</source>
					<year>1932</year>
				</element-citation>
			</ref>
			<ref id="B24">
				<mixed-citation>LOUVIERE, J. J.; EAGLE, T. C.; COHEN, S. H. Conjoint analysis:
					Methods, myths and much more. <italic>Documento de trabajo del Censoc</italic>,
					n. 5-1, p. 31, 2005.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>LOUVIERE</surname>
							<given-names>J. J.</given-names>
						</name>
						<name>
							<surname>EAGLE</surname>
							<given-names>T. C.</given-names>
						</name>
						<name>
							<surname>COHEN</surname>
							<given-names>S. H.</given-names>
						</name>
					</person-group>
					<article-title>Conjoint analysis: Methods, myths and much more</article-title>
					<source>Documento de trabajo del Censoc</source>
					<issue>5-1</issue>
					<fpage>31</fpage>
					<lpage>31</lpage>
					<year>2005</year>
				</element-citation>
			</ref>
			<ref id="B25">
				<mixed-citation>MALHOTRA, N. K. <italic>Marketing research</italic>: An applied
					orientation. 5. ed. [s.l.] Prentice Hall, 2008.</mixed-citation>
				<element-citation publication-type="book">
					<person-group person-group-type="author">
						<name>
							<surname>MALHOTRA</surname>
							<given-names>N. K.</given-names>
						</name>
					</person-group>
					<source><italic>Marketing research</italic>: An applied orientation</source>
					<edition>5</edition>
					<comment>[s.l.]</comment>
					<publisher-name>Prentice Hall</publisher-name>
					<year>2008</year>
				</element-citation>
			</ref>
			<ref id="B26">
				<mixed-citation>MCCOLL-KENNEDY, J. R. et al. Health care customer value cocreation
					practice styles. <italic>J. Serv. Res.</italic>, p. 1-20, 2012.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>MCCOLL-KENNEDY</surname>
							<given-names>J. R.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Health care customer value cocreation practice
						styles</article-title>
					<source>J. Serv. Res.</source>
					<fpage>1</fpage>
					<lpage>20</lpage>
					<year>2012</year>
				</element-citation>
			</ref>
			<ref id="B27">
				<mixed-citation>MCCROW, J. et al. Development and review of vignettes representing
					older people with cognitive impairment. <italic>Geriatr. Nurs.</italic>, v. 34,
					n. 2, p. 128-137, 2013.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>MCCROW</surname>
							<given-names>J.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Development and review of vignettes representing older people
						with cognitive impairment</article-title>
					<source>Geriatr. Nurs.</source>
					<volume>34</volume>
					<issue>2</issue>
					<fpage>128</fpage>
					<lpage>137</lpage>
					<year>2013</year>
				</element-citation>
			</ref>
			<ref id="B28">
				<mixed-citation>OREMUS, M.; XIE, F.; GAEBEL, K. Development of Clinical Vignettes to
					Describe Alzheimer's Disease Health States: A Qualitative Study. <italic>PloS
						one</italic>, v. 11, n. 9, p. e0162422, 2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>OREMUS</surname>
							<given-names>M.</given-names>
						</name>
						<name>
							<surname>XIE</surname>
							<given-names>F.</given-names>
						</name>
						<name>
							<surname>GAEBEL</surname>
							<given-names>K.</given-names>
						</name>
					</person-group>
					<article-title>Development of Clinical Vignettes to Describe Alzheimer's Disease
						Health States: A Qualitative Study</article-title>
					<source>PloS one</source>
					<volume>11</volume>
					<issue>9</issue>
					<elocation-id>e0162422</elocation-id>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B29">
				<mixed-citation>ROSSITER, J. R. <italic>Measurement for the social
						sciences:</italic> The C-OAR-SE method and why it must replace
					psychometrics. 1. ed. New York: Springer-Verlag New York, 2011.</mixed-citation>
				<element-citation publication-type="book">
					<person-group person-group-type="author">
						<name>
							<surname>ROSSITER</surname>
							<given-names>J. R.</given-names>
						</name>
					</person-group>
					<source><italic>Measurement for the social sciences:</italic> The C-OAR-SE
						method and why it must replace psychometrics</source>
					<edition>1</edition>
					<publisher-loc>New York</publisher-loc>
					<publisher-name>Springer-Verlag New York</publisher-name>
					<year>2011</year>
				</element-citation>
			</ref>
			<ref id="B30">
				<mixed-citation>SCHNEEWEISS, C.; SCHNEIDER, H. Measuring and designing flexibility
					as a generalized service degree. <italic>European Journal of Operational
						Research</italic>, v. 112, n. 1, p. 98-106, 1999.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>SCHNEEWEISS</surname>
							<given-names>C.</given-names>
						</name>
						<name>
							<surname>SCHNEIDER</surname>
							<given-names>H.</given-names>
						</name>
					</person-group>
					<article-title>Measuring and designing flexibility as a generalized service
						degree</article-title>
					<source>European Journal of Operational Research</source>
					<volume>112</volume>
					<issue>1</issue>
					<fpage>98</fpage>
					<lpage>106</lpage>
					<year>1999</year>
				</element-citation>
			</ref>
			<ref id="B31">
				<mixed-citation>SILVA, A. S. <italic>Um modelo de antecedentes para a cocriação de
						valores em serviços de geriatria na cidade de São Paulo</italic>: uma
					aplicação da modelagem de equações estruturais. 2014. 277 f. Dissertação
					(mestrado em administração) - Universidade Municipal de São Caetano do Sul, São
					Caetano do Sul, 2014</mixed-citation>
				<element-citation publication-type="thesis">
					<person-group person-group-type="author">
						<name>
							<surname>SILVA</surname>
							<given-names>A. S.</given-names>
						</name>
					</person-group>
					<source><italic>Um modelo de antecedentes para a cocriação de valores em
							serviços de geriatria na cidade de São Paulo</italic>: uma aplicação da
						modelagem de equações estruturais</source>
					<year>2014</year>
					<size units="pages">277 f</size>
					<comment>mestrado em administração</comment>
					<publisher-name>Universidade Municipal de São Caetano do Sul</publisher-name>
					<publisher-loc>São Caetano do Sul</publisher-loc>
				</element-citation>
			</ref>
			<ref id="B32">
				<mixed-citation>SILVA, A. S. et al. A Model of Antecedents for the Co-Creation of
					Value in Health Care: An Application of Structural Equation Modeling.
						<italic>Brazilian Business Review</italic>, v. 12, n. 6, p. 121-149,
					2015.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>SILVA</surname>
							<given-names>A. S.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>A Model of Antecedents for the Co-Creation of Value in Health
						Care: An Application of Structural Equation Modeling</article-title>
					<source>Brazilian Business Review</source>
					<volume>12</volume>
					<issue>6</issue>
					<fpage>121</fpage>
					<lpage>149</lpage>
					<year>2015</year>
				</element-citation>
			</ref>
			<ref id="B33">
				<mixed-citation>SILVA, A. DE. <italic>A framework for measuring
						responsiveness</italic>. Geneva: World Health Organization Geneva, 1999.
					(GPE Discussion Paper Series: No. 32)</mixed-citation>
				<element-citation publication-type="book">
					<person-group person-group-type="author">
						<name>
							<surname>SILVA</surname>
							<given-names>A. DE.</given-names>
						</name>
					</person-group>
					<source>A framework for measuring responsiveness</source>
					<publisher-loc>Geneva</publisher-loc>
					<publisher-name>World Health Organization Geneva</publisher-name>
					<year>1999</year>
					<comment>(GPE Discussion Paper Series: No. 32)</comment>
				</element-citation>
			</ref>
			<ref id="B34">
				<mixed-citation>VOŇKOVÁ, H.; HULLEGIE, P. Is the anchoring vignette method sensitive
					to the domain and choice of the vignette? <italic>Journal of the Royal
						Statistical Society: Series A (Statistics in Society)</italic>, v. 174, n.
					3, p. 597-620, 2011.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>VOŇKOVÁ</surname>
							<given-names>H.</given-names>
						</name>
						<name>
							<surname>HULLEGIE</surname>
							<given-names>P.</given-names>
						</name>
					</person-group>
					<article-title>Is the anchoring vignette method sensitive to the domain and
						choice of the vignette?</article-title>
					<source>Journal of the Royal Statistical Society: Series A (Statistics in
						Society)</source>
					<volume>174</volume>
					<issue>3</issue>
					<fpage>597</fpage>
					<lpage>620</lpage>
					<year>2011</year>
				</element-citation>
			</ref>
			<ref id="B35">
				<mixed-citation>WASON, K. D.; POLONSKY, M. J.; HYMAN, M. R. Designing Vignette
					Studies in Marketing. <italic>Australasian Marketing Journal</italic>, v. 10, n.
					3, p. 41-58, 2002.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>WASON</surname>
							<given-names>K. D.</given-names>
						</name>
						<name>
							<surname>POLONSKY</surname>
							<given-names>M. J.</given-names>
						</name>
						<name>
							<surname>HYMAN</surname>
							<given-names>M. R.</given-names>
						</name>
					</person-group>
					<article-title>Designing Vignette Studies in Marketing</article-title>
					<source>Australasian Marketing Journal</source>
					<volume>10</volume>
					<issue>3</issue>
					<fpage>41</fpage>
					<lpage>58</lpage>
					<year>2002</year>
				</element-citation>
			</ref>
			<ref id="B36">
				<mixed-citation>WINSOR, T.; MCLEAN, S. Residential group care workers' recognition
					of depression: Assessment of mental health literacy using clinical vignettes.
						<italic>Children and Youth Services Review</italic>, v. 68, p. 132-138,
					2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>WINSOR</surname>
							<given-names>T.</given-names>
						</name>
						<name>
							<surname>MCLEAN</surname>
							<given-names>S.</given-names>
						</name>
					</person-group>
					<article-title>Residential group care workers' recognition of depression:
						Assessment of mental health literacy using clinical
						vignettes</article-title>
					<source>Children and Youth Services Review</source>
					<volume>68</volume>
					<fpage>132</fpage>
					<lpage>138</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
			<ref id="B37">
				<mixed-citation>YEN, H. R. et al. Service innovation readiness: Dimensions and
					performance outcome. <italic>Decis. Support Syst.</italic>, v. 53, n. 4, p.
					813-824, 2012.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>YEN</surname>
							<given-names>H. R.</given-names>
						</name>
						<etal/>
					</person-group>
					<article-title>Service innovation readiness: Dimensions and performance
						outcome</article-title>
					<source>Decis. Support Syst.</source>
					<volume>53</volume>
					<issue>4</issue>
					<fpage>813</fpage>
					<lpage>824</lpage>
					<year>2012</year>
				</element-citation>
			</ref>
			<ref id="B38">
				<mixed-citation>ZHANG, C.; SIMON, J. C. An Empirical Investigation of Decision
					Making in IT-Related Dilemmas: Impact of Positive and Negative Consequence
					Information. <italic>Journal of Organizational and End User Computing
						(JOEUC)</italic>, v. 28, n. 4, p. 73-90, 2016.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>ZHANG</surname>
							<given-names>C.</given-names>
						</name>
						<name>
							<surname>SIMON</surname>
							<given-names>J. C.</given-names>
						</name>
					</person-group>
					<article-title>An Empirical Investigation of Decision Making in IT-Related
						Dilemmas: Impact of Positive and Negative Consequence
						Information</article-title>
					<source>Journal of Organizational and End User Computing (JOEUC)</source>
					<volume>28</volume>
					<issue>4</issue>
					<fpage>73</fpage>
					<lpage>90</lpage>
					<year>2016</year>
				</element-citation>
			</ref>
		</ref-list>
	</back>
	<!--<sub-article article-type="translation" id="s1" xml:lang="pt">
		<front-stub>
			<article-categories>
				<subj-group subj-group-type="heading">
					<subject>ARTIGO</subject>
				</subj-group>
			</article-categories>
			<title-group>
				<article-title><italic>Vignettes</italic>: uma técnica de coleta de dados para lidar
					com o funcionamento diferencial dos itens em levantamentos</article-title>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0002-2249-254X</contrib-id>
					<name>
						<surname>Silva</surname>
						<given-names>Antonio Sergio</given-names>
					</name>
					<xref ref-type="aff" rid="aff5">1</xref>
					<xref ref-type="corresp" rid="c5">†</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0002-4928-3940</contrib-id>
					<name>
						<surname>Campos-Silva</surname>
						<given-names>Wilerson Lucas</given-names>
					</name>
					<xref ref-type="aff" rid="aff6">2</xref>
					<xref ref-type="corresp" rid="c6">Ω</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0003-4280-3357</contrib-id>
					<name>
						<surname>Gouvea</surname>
						<given-names>Maria Aparecida</given-names>
					</name>
					<xref ref-type="aff" rid="aff7">3</xref>
					<xref ref-type="corresp" rid="c7">¥</xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0003-0551-8282</contrib-id>
					<name>
						<surname>Farina</surname>
						<given-names>Milton Carlos</given-names>
					</name>
					<xref ref-type="aff" rid="aff8">4</xref>
					<xref ref-type="corresp" rid="c8">‡</xref>
				</contrib>
			</contrib-group>
			<aff id="aff5">
				<label>1</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP,
					Brasil</institution>
			</aff>
			<aff id="aff6">
				<label>2</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP,
					Brasil</institution>
			</aff>
			<aff id="aff7">
				<label>3</label>
				<institution content-type="original">Universidade de São Paulo, São Paulo, SP,
					Brasil</institution>
			</aff>
			<aff id="aff8">
				<label>4</label>
				<institution content-type="original">Universidade Municipal de São Caetano do Sul,
					São Caetano do Sul, SP, Brasil</institution>
			</aff>
			<author-notes>
				<corresp id="c5"><label><sup>†</sup></label>Universidade de São Paulo, São Paulo,
					SP, Brasil. E-mail: <email>ansesi@usp.br</email></corresp>
				<corresp id="c6"><label><sup>Ω</sup></label>Universidade de São Paulo, São Paulo,
					SP, Brasil. E-mail: <email>willerson.silva@usp.br</email></corresp>
				<corresp id="c7"><label><sup>¥</sup></label>Universidade de São Paulo, São Paulo,
					SP, Brasil. E-mail: <email>magouvea@usp.br</email></corresp>
				<corresp id="c8"><label><sup>‡</sup></label>Universidade Municipal de São Caetano do
					Sul, São Caetano do Sul, SP, Brasil. E-mail:
						<email>milton_farina@uol.com.br</email></corresp>
			</author-notes>
			<abstract>
				<title>RESUMO</title>
				<p><italic>Vignettes</italic> são cenários usados em diversas áreas de pesquisas
					acadêmicas cuja principal aplicação se relaciona às situações em que os
					julgamentos sobre as pessoas estão sujeitos a vieses ou distorções. Apesar do
					amplo uso em levantamentos, as recomendações para a sua criação são limitadas na
					literatura. Assim, este estudo objetiva revisar e descrever critérios
					apresentados na literatura para uma textualização robusta de
						<italic>vignettes</italic>. Este trabalho apresenta uma revisão da
					literatura sobre o uso de <italic>vignettes</italic>, além de descrever um
					conjunto mínimo de critérios (plausibilidade, clareza, simplicidade, validade de
					conteúdo e analogia entre a <italic>vignette</italic> e o construto) para a
					aplicação criteriosa dessa metodologia. Foram apresentadas quatro
						<italic>vignettes</italic> construídas a partir da revisão da literatura e
					validadas por um painel de <italic>experts</italic>, com o objetivo de capturar
					a percepção dos respondentes sobre as ações dos protagonistas em cenários sobre
					a cocriação de valores em um serviço de saúde. Desta forma, o estudo concebe os
					elementos essenciais para o desenvolvimento dessa metodologia.</p>
			</abstract>
			<kwd-group xml:lang="pt">
				<title>Palavras-chave:</title>
				<kwd>Vignettes</kwd>
				<kwd>Cenários</kwd>
				<kwd>Coleta de dados</kwd>
				<kwd>Levantamentos</kwd>
				<kwd>Funcionamento diferencial dos itens</kwd>
			</kwd-group>
		</front-stub>
		<body>
			<sec sec-type="intro">
				<title>1. INTRODUÇÃO</title>
				<p>Em levantamentos, é comum que as pessoas sejam solicitadas para responder a
					questões sobre saúde, políticas, satisfação com o trabalho, satisfação com a
					vida, etc. Por exemplo, considere a pergunta: "<italic>em que medida você está
						satisfeito com a sua vida</italic>?" Em geral, o pesquisador disponibiliza
					para o informante uma escala cujas respostas podem variar de <italic>"muito
						insatisfeito</italic>" até <italic>"muito satisfeito"</italic>. Caso o
					objetivo da pesquisa seja analisar as diferenças reais entre os grupos, as
					respostas diretas das autoavaliações dos respondentes podem estar enviesadas,
					pois estes podem interpretar as categorias das respostas de modos distintos.
					Essa heterogeneidade no comportamento de informar sobre as respostas em
					levantamentos, também denominada de funcionamento diferencial dos itens (DIF),
					do inglês <italic>differential item functioning</italic>, reflete uma
					incomparabilidade interpessoal (<xref ref-type="bibr" rid="B34">VOŇKOVÁ;
						HULLEGIE, 2011</xref>).</p>
				<p>Uma abordagem para lidar com o DIF, em levantamentos, foi proposta por <xref
						ref-type="bibr" rid="B20">King et al. (2004)</xref>. Os autores introduziram
						<italic>vignettes</italic>, que são descrições breves de situações
					hipotéticas sobre a vida das pessoas e que são importantes para um certo domínio
					de interesse. O conceito implica que o respondente avalia tanto a situação da
					pessoa na descrição hipotética quanto a sua própria posição em relação ao
					cenário (<xref ref-type="bibr" rid="B13">EVANS et al., 2015</xref>; <xref
						ref-type="bibr" rid="B15">GROL-PROKOPCZYK; FREESE; HAUSER, 2011</xref>).
					Dado que o mesmo cenário é apresentado para diversas pessoas, da mesma forma, a
					avaliação das <italic>vignettes</italic> pode fornecer informações sobre os
					estilos dos respondentes (<xref ref-type="bibr" rid="B34">VOŇKOVÁ; HULLEGIE,
						2011</xref>).</p>
				<p>Apesar do uso de <italic>vignettes</italic> em levantamentos, por exemplo, na
					área de saúde (<xref ref-type="bibr" rid="B17">HILTON et al., 2016</xref>; <xref
						ref-type="bibr" rid="B28">OREMUS; XIE; GAEBEL, 2016</xref>; <xref
						ref-type="bibr" rid="B32">SILVA et al., 2015</xref>; <xref ref-type="bibr"
						rid="B36">WINSOR; MCLEAN, 2016</xref>), da sociologia (<xref ref-type="bibr"
						rid="B9">CHRISTEN et al., 2016</xref>; <xref ref-type="bibr" rid="B14"
						>GANONG; JAMISON; CHAPMAN, 2015</xref>) e em pesquisas empíricas na área de
					marketing (<xref ref-type="bibr" rid="B10">COVA; PARANQUE, 2016</xref>; <xref
						ref-type="bibr" rid="B38">ZHANG; SIMON, 2016</xref>), as recomendações para
					a sua criação são limitadas na literatura (<xref ref-type="bibr" rid="B35"
						>WASON; POLONSKY; HYMAN, 2002</xref>). Assim, este estudo tem como objetivo
					revisar e descrever critérios apresentados na literatura para uma textualização
					robusta de <italic>vignettes</italic>.</p>
			</sec>
			<sec>
				<title>2. FUNCIONAMENTO DIFERENCIAL DOS ITENS</title>
				<p>A psicometria reconhece a necessidade e a importância da padronização das
					condições de aplicação dos instrumentos de medida, um dos mais importantes
					pressupostos da avaliação. Em relação às condições de aplicação dos instrumentos
					de medida, uma área da teoria da resposta ao item dedica-se ao seu estudo por
					meio do DIF (<xref ref-type="bibr" rid="B2">ANDRADE; LAROS; GOUVEIA,
					2010</xref>; <xref ref-type="bibr" rid="B3">ANDRIOLA, 2001</xref>).</p>
				<p>A presença de DIF, em instrumentos de medida, acarreta falta de equidade em
					processos de avaliação (<xref ref-type="bibr" rid="B15">GROL-PROKOPCZYK; FREESE;
						HAUSER, 2011</xref>). Por exemplo, considere uma situação em que dois grupos
					de pessoas são submetidos a uma avaliação com cinco itens, cujo texto base versa
					sobre futebol. O grupo A, formado por pessoas do sexo feminino, não acertou
					nenhum item, enquanto as pessoas do grupo B, formado por indivíduos do sexo
					masculino, acertaram todos os itens. Levanta-se a hipótese de que os itens sobre
					futebol favoreceriam as pessoas do sexo masculino em detrimento daquelas do sexo
					feminino. Infere-se, pois, que os itens apresentam DIF. O DIF, dito de outra
					forma, é uma evidência empírica de que os subgrupos não apresentam a mesma
					probabilidade de acerto no item (<xref ref-type="bibr" rid="B2">ANDRADE; LAROS;
						GOUVEIA, 2010</xref>; <xref ref-type="bibr" rid="B3">ANDRIOLA, 2001</xref>;
						<xref ref-type="bibr" rid="B15">GROL-PROKOPCZYK; FREESE; HAUSER,
					2011</xref>).</p>
				<p>Estudos sobre DIF têm sido amplamente usados para reduzir os efeitos da
					incomparabilidade entre pessoas nos levantamentos. Os pesquisadores tentam
					melhorar os problemas da incomparabilidade interpessoal e transcultural em
					levantamentos por meio da cuidadosa elaboração das questões, tradução
					(retradução), <italic>focus group</italic>, informações cognitivas prévias e
					outras técnicas (<xref ref-type="bibr" rid="B21">KING; WAND, 2007</xref>).</p>
				<p>Dentre essas, a ancoragem por <italic>vignettes</italic> é uma técnica
					desenvolvida para melhorar os problemas que ocorrem quando grupos diferentes de
					respondentes interpretam e usam as respostas de uma escala ordinal (por exemplo,
					de aprovo totalmente a desaprovo totalmente) de modo variado entre si (<xref
						ref-type="bibr" rid="B20">KING et al., 2004</xref>). A ancoragem com
						<italic>vignettes</italic> aborda o DIF introduzindo questões suplementares
					de modo que se torna possível construir uma escala comum de medidas através dos
					respondentes (<xref ref-type="bibr" rid="B21">KING; WAND, 2007</xref>).</p>
				<p>Para <xref ref-type="bibr" rid="B20">King et al. (2004)</xref>, o objetivo em
					construir um levantamento por meio de <italic>vignettes</italic> não está em
					criar questões livres de DIF, mas em encontrar consistência nas respostas e
					equivalência nas <italic>vignettes</italic>. Desta forma, uma
						<italic>vignette</italic> deve ser escrita para descrever, em uma linguagem
					clara e concreta, o <italic>status</italic> da pessoa personagem a ponto de o
					respondente posicionar-se em todas as situações e poder comparar seu próprio
						<italic>status</italic> com o <italic>status</italic> da pessoa personagem
						(<xref ref-type="bibr" rid="B13">EVANS et al., 2015</xref>; <xref
						ref-type="bibr" rid="B20">KING et al., 2004</xref>). A próxima seção traz
					uma revisão sobre o que são as <italic>vignettes</italic>, bem como argumentos
					que justificam sua superioridade ao uso de perguntas diretas nos
					levantamentos.</p>
			</sec>
			<sec>
				<title>3. <italic>VIGNETTES</italic></title>
				<p>Um cenário é uma história que apresenta uma situação hipotética a qual demanda
					uma ação ou um julgamento dos respondentes (<xref ref-type="bibr" rid="B35"
						>WASON; POLONSKY; HYMAN, 2002</xref>). Igualmente, uma
						<italic>vignette</italic> é uma descrição breve de uma pessoa ou de uma
					situação social que contém referências precisas do que se acredita ser os
					fatores mais importantes para o respondente tomar uma decisão ou fazer um
					julgamento (<xref ref-type="bibr" rid="B35">WASON; POLONSKY; HYMAN,
					2002</xref>).</p>
				<p>Por serem estímulos usados para coletar dados em levantamentos, à semelhança de
					quaisquer outras ferramentas de pesquisa, as <italic>vignettes</italic> devem
					ser projetadas de modo adequado, do contrário produzirão dados inválidos. A
					simples adaptação de cenários previamente publicados pode ser um problema para o
					pesquisador, principalmente se a pesquisa original apresentar falhas nas suas
					construções. Quaisquer mudanças no contexto dos cenários podem trazer diferentes
					efeitos sobre as variáveis de estudo (<xref ref-type="bibr" rid="B35">WASON;
						POLONSKY; HYMAN, 2002</xref>).</p>
				<p>As <italic>vignettes</italic> emergem como um modelo de pesquisa analógica. Tal
					tipo de pesquisa constitui-se em um raciocínio por meio de um exemplo. Em
					oposição à pesquisa <italic>in vivo</italic>, cujos fatores não podem ser
					manipulados ou controlados pelo pesquisador, na pesquisa analógica é possível
					controlar as variáveis de interesse (<xref ref-type="bibr" rid="B22">LANGER,
						2016</xref>).</p>
				<p>A pesquisa analógica pode ser realizada por meio de modelos vivos, gravações em
					áudio ou em vídeo ou descrições por escrito de um encontro com o cliente. Os
					cenários escritos são também denominados de <italic>vignettes</italic>. Um
					conjunto de delas pode ser avaliado em período de tempo relativamente curto
					pelos respondentes (<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN,
						1984</xref>). Em um conjunto de cinco ou mais <italic>vignettes</italic>,
					por exemplo, é possível incorporar vários fatores em cada uma e estudá-los
					simultaneamente. Uma vantagem adicional no seu uso diz respeito ao viés da
					primeira impressão do cliente, tais como a aparência física, a maneira de
					vestir-se, o modo de falar, etc.<italic>,</italic> estando livres desse tipo de
					viés (<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN, 1984</xref>).</p>
				<p><xref ref-type="bibr" rid="B35">Wason, Polonsky e Hyman (2002)</xref>
					identificaram seis argumentos na literatura que justificam a superioridade das
						<italic>vignettes</italic> em relação às pesquisas com perguntas diretas.
					Para esses autores, uma <italic>vignette</italic>: (a) proporciona maior
					realismo porque disponibiliza uma variedade de fatores situacionais ou
					contextuais; (b) fornece um estímulo padronizado para todos os respondentes, o
					que aumenta a validade interna, a confiabilidade da medida e a facilidade de
					replicação; (c) melhora a validade do construto porque direciona a atenção do
					respondente para aspectos específicos da pergunta problema da pesquisa; (d)
					transpõe dificuldades, como tempo e despesas, por estudar decisões de negócios
					reais; (e) reduz o viés da conveniência social, sobretudo se as perguntas sobre
					a intenção de comportamentos são redigidas na terceira ou na primeira pessoa; e
					(f) aumenta o envolvimento dos respondentes e dramatiza as questões.</p>
				<p>Como exemplo, a <xref ref-type="fig" rid="f9">Figura 1</xref> representa duas
					autoavaliações (respondentes 1 e 2) e três <italic>vignettes</italic>
					(personagens 1, 2 e 3) a respeito do nível de dificuldade para praticar
					atividades físicas. O grau de autoavaliação do nível de dificuldade para
					praticar atividade física é menor para o respondente 1 em relação ao respondente
					2 (e ambos concordam no ordenamento do nível de dificuldade dos
					personagens).</p>
				<p>
					<fig id="f9">
						<label>Figura 1</label>
						<caption>
							<title>Escala de respostas, técnica de
								<italic>vignette</italic>.</title>
						</caption>
						<graphic xlink:href="1808-2386-bbr-16-01-0016-gf01-pt.tif"/>
						<attrib>Fonte: baseado em <xref ref-type="bibr" rid="B20">King et al.
								(2004)</xref>.</attrib>
					</fig>
				</p>
				<p>A seguir, há uma revisão sobre as recomendações sobre a construção de
						<italic>vignettes</italic>.</p>
			</sec>
			<sec>
				<title>4. A CONSTRUÇÃO DE <italic>VIGNETTES</italic></title>
				<p>O maior desafio na construção das <italic>vignettes</italic> consiste em gerar um
					equilíbrio entre o rigor do método experimental e a realidade do ambiente que
					descrevem. Um conjunto ideal de <italic>vignettes</italic> deve apresentar um
					resumo descritivo que se assemelha às histórias de casos reais e cuja variação
					existe apenas nos fatores estudados (<xref ref-type="bibr" rid="B13">EVANS et
						al., 2015</xref>; <xref ref-type="bibr" rid="B22">LANGER, 2016</xref>). Uma
						<italic>vignette</italic> deve ser curta e informativa, além de refletir um
					nível médio de funcionamento, de modo que haja variância suficiente para revelar
					a influência de cada fator estudado (<xref ref-type="bibr" rid="B22">LANGER,
						2016</xref>). O conjunto de fatores deve ser pequeno e convém evitar temas
					sensíveis, tais como estupro, suicídio, eutanásia, etc., pois distorcem a
					avaliação e posicionam as respostas das pessoas nos extremos da escala de
					resposta (<xref ref-type="bibr" rid="B16">HEVERLY; FITT; NEWMAN,
					1984</xref>).</p>
				<p>Segundo <xref ref-type="bibr" rid="B20">King et al. (2004)</xref>, o respondente
					faz uma autoavaliação e uma avaliação de várias pessoas hipotéticas descritas
					nas <italic>vignettes</italic>, as quais são dispostas numa escala ordinal, do
					mais eficaz para o menos eficaz. Os autores recomendam que a autoavaliação do
					respondente seja posicionada no final dos cenários. A abordagem dos autores
					assume duas premissas-chave: consistência da resposta e equivalência da
						<italic>vignette</italic>.</p>
				<p>A consistência da resposta pressupõe que cada pessoa usa a categoria de respostas
					para uma pergunta em particular do levantamento do mesmo modo, seja na
					autoavaliação ou na avaliação das situações hipotéticas. O tipo de DIF pode
					variar entre os respondentes e até mesmo para um único respondente entre as
					questões de um levantamento, mas não pode variar entre a autoavaliação e o
					conjunto de <italic>vignettes</italic> associadas a uma única questão para
					qualquer respondente. Essa propriedade pode ser violada se o respondente se
					sentir inferior em relação à situação hipotética (<xref ref-type="bibr"
						rid="B20">KING et al., 2004</xref>).</p>
				<p>A equivalência de <italic>vignette</italic> pressupõe que o nível da variável
					representada em qualquer <italic>vignette</italic> seja percebido por todos os
					respondentes do mesmo modo, na mesma escala unidimensional, independentemente do
					erro aleatório. Os respondentes podem divergir entre si em relação ao modo como
					percebem o nível de variação estabelecido nas <italic>vignettes</italic>, mas
					qualquer diferença é aleatória e independente da característica que está sendo
					medida. Tal premissa pode ser violada se o respondente interpretar a redação de
					alguma <italic>vignette</italic> como direcionada para algum interesse
					particular do pesquisador (<xref ref-type="bibr" rid="B20">KING et al.,
						2004</xref>).</p>
				<sec>
					<title>4.1. O RESPONDENTE</title>
					<p>O respondente pode fornecer informações tanto dentro
						(<italic>insitu</italic>) quanto fora (<italic>exsitu</italic>) de uma
						situação real. <italic>Insitu</italic>, portanto, diz respeito às
						informações sobre os respondentes advindas de situações reais, criadas e
						documentadas em situações de uso. <italic>Exsitu</italic>, ao contrário, diz
						respeito à apreensão da informação fora das situações de uso reais,
						retrospectivamente ou por antecipação (<xref ref-type="bibr" rid="B11"
							>EDVARDSSON et al., 2012</xref>). Em cada contexto específico, ele cria
						valores de modos diferentes, conforme sua intenção e competência. Em relação
						à dimensão contexto, a informação pode ser conseguida das pessoas que
						tiveram (<italic>in contexto</italic>) ou não (<italic>ex contexto</italic>)
						uma experiência contextual real (<xref ref-type="bibr" rid="B11">EDVARDSSON
							et al., 2012</xref>).</p>
					<p>A <xref ref-type="fig" rid="f10">Figura 2</xref> ilustra como essas duas
						dimensões, sob a perspectiva de <xref ref-type="bibr" rid="B11">Edvardsson
							et al. (2012)</xref>, classificam a participação do respondente para
						gerar informação.</p>
					<p>
						<fig id="f10">
							<label>Figura 2</label>
							<caption>
								<title><italic>Framework</italic> para identificação dos métodos de
									uso de informação dos clientes na criação de serviços.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf02-pt.tif"/>
							<attrib>Fonte: baseado em <xref ref-type="bibr" rid="B11">Edvardsson et
									al. (2012)</xref>.</attrib>
						</fig>
					</p>
					<p>As <italic>vignettes</italic> são análogas aos papéis de respondente
						reflexivo ou idealista propostos por <xref ref-type="bibr" rid="B11"
							>Edvardsson et al. (2012)</xref>. O modo do respondente reflexivo é
						ancorado na experiência do contexto de um recurso real. A informação gerada
						pelos métodos que envolvem esse modo fornece informações válidas de
						respondentes os quais estão familiarizados com o contexto dos recursos.
						Assim, a informação é gerada depois que uma situação real ocorreu e, desta
						forma, os respondentes têm a oportunidade de refletir sobre o que aconteceu
							(<xref ref-type="bibr" rid="B11">EDVARDSSON et al., 2012</xref>).</p>
				</sec>
				<sec>
					<title>4.2. VALIDADE E CONFIABILIDADE DAS <italic>VIGNETTES</italic></title>
					<p>Para <xref ref-type="bibr" rid="B16">Heverly, Fitt e Newman (1984)</xref>, a
						construção de <italic>vignettes</italic> que descrevam a realidade e sejam
						válidas requer:</p>
					<p>
						<list list-type="alpha-lower">
							<list-item>
								<p>Identificação dos construtos de interesse. O primeiro passo
									consiste em criar um <italic>blueprint</italic> o qual
									identifica os construtos de interesse que vão ser transformados
									em <italic>vignettes</italic>, bem como seus níveis de
									avaliação. Os construtos devem ser selecionados com base em uma
									revisão da literatura.</p>
							</list-item>
							<list-item>
								<p>Criação dos componentes das <italic>vignettes</italic>.
									Identificam-se fontes a partir das quais são derivadas as
									descrições representativas dos construtos. Isso pode ser feito
									mediante a revisão da literatura empírica ou por consulta a
										<italic>experts</italic>. Independentemente da abordagem,
									faz-se necessária uma validação empírica por uma amostra
									independente de juízes.</p>
							</list-item>
							<list-item>
								<p>Validação dos componentes das <italic>vignettes</italic>. Os
									componentes das <italic>vignettes</italic> são classificados
									para determinar quais representam os construtos que se propõem
									representar. Os que forem validados formam o conjunto final o
									qual comporá uma <italic>vignette</italic>.</p>
							</list-item>
							<list-item>
								<p>Construção das <italic>vignettes</italic> a partir de seus
									componentes. Os componentes das <italic>vignettes</italic> devem
									ser distribuídos aleatoriamente de modo que contrabalancem todos
									os fatores da pesquisa.</p>
							</list-item>
						</list>
					</p>
					<p>Além de métodos convencionais para assegurar a validade e a confiabilidade
						dos levantamentos, tais como o pré-teste e a validação por um painel de
						especialistas, recomenda-se atenção para os seguintes aspectos, em relação
						ao uso das <italic>vignettes</italic> (<xref ref-type="bibr" rid="B35"
							>WASON; POLONSKY; HYMAN, 2002</xref>):</p>
					<p>
						<list list-type="alpha-lower">
							<list-item>
								<p>Plausibilidade. O pesquisador deve avaliar e ajustar a
									consistência interna e a verossimilidade das
										<italic>vignettes</italic>. O pré-teste das
										<italic>vignettes</italic> pode assegurar que os
									respondentes acreditam de fato que as simulações são realísticas
									e consistentes.</p>
							</list-item>
							<list-item>
								<p>Adequabilidade. O detalhamento das <italic>vignettes</italic>
									deve ser suficiente para controlar o máximo possível as
									projeções idiossincráticas dos respondentes, porém sem tornar-se
									excessivamente longo a ponto de sobrecarregá-los.</p>
							</list-item>
							<list-item>
								<p>Tonalidade. O maior ou menor detalhamento de uma
										<italic>vignette</italic> deve ser consistente com o
									problema de pesquisa.</p>
							</list-item>
							<list-item>
								<p>Obviedade. As variáveis manipuladas devem ser construídas de modo
									claro e bem evidenciadas e que, portanto, não sejam
									despercebidas pelo respondente.</p>
							</list-item>
							<list-item>
								<p>Formulação. O <italic>framing</italic> (textualização) de uma
										<italic>vignette</italic> influencia as respostas. Versões
									diferentes devem ser formalmente equivalentes, de modo que
									qualquer variação na textualização não mude a informação
									objetiva nem a percepção do respondente.</p>
							</list-item>
						</list>
					</p>
					<p>Também importa avaliar a validade e a generalização da avaliação dos
						resultados obtidos com as <italic>vignettes</italic>. A validade de conteúdo
						refere-se à correspondência semântica entre a definição conceitual do
						construto e sua medida. Um conteúdo válido totalmente significa que há uma
						identidade semântica entre o construto e a medida. Dito de outro modo, a
						medida representa com exatidão o que o construto se propõe a definir (<xref
							ref-type="bibr" rid="B29">ROSSITER, 2011</xref>).</p>
					<p><xref ref-type="bibr" rid="B35">Wason, Polonsky e Hyman (2002)</xref>
						descrevem problemas potenciais ou deficiências quando se considera o uso de
							<italic>vignettes</italic>, as quais são:</p>
					<p>
						<list list-type="alpha-lower">
							<list-item>
								<p>Seleção do método adequado para a <italic>vignette</italic>.
									Muitas pesquisas feitas com <italic>vignettes</italic>
									fundamentam-se no método
										constante-variável-valor-<italic>vignette</italic> (CVVV),
									ou seja, todos os respondentes analisam a mesma
										<italic>vignette</italic>. Algumas desvantagens podem advir
									dessa metodologia: divergência na percepção das alternativas de
									avaliação entre os respondentes, as respostas não descrevem a
									sequência de pensamentos que o respondente usou para avaliar o
									comportamento, um conjunto de itens fixos podem omitir outros
									itens importantes do construto, além do viés da conveniência
									social.</p>
							</list-item>
							<list-item>
								<p>Adaptação das questões para as <italic>vignettes</italic>.
									Escalas previamente validadas são preferíveis em relação à
									criação de novas. Por outro lado, não se deve confiar totalmente
									em <italic>vignettes</italic> pré-existentes. O pesquisador deve
									assegurar-se de que as perguntas exploram exaustivamente as
									questões relevantes de seu estudo e atentar para a presença de
									DIF.</p>
							</list-item>
							<list-item>
								<p>Certificação do uso de todas as variáveis relevantes.
									Inicialmente, o pesquisador deve identificar as dimensões,
									depois os diversos níveis incluídos em cada dimensão e que podem
									afetar o julgamento ou a decisão.</p>
							</list-item>
							<list-item>
								<p>Uso do número adequado de <italic>vignettes</italic>. Poucas
									podem limitar a capacidade do pesquisador para manipular
									variáveis críticas. Um número grande <italic>delas</italic>, por
									outro lado, pode levar a uma sobrecarga de informação e à fadiga
									dos respondentes.</p>
							</list-item>
							<list-item>
								<p>Controle do viés da conveniência social. O uso de
										<italic>vignettes</italic> textualizadas na terceira pessoa
									projeta o respondente na posição da personagem e pode reduzir
									esse viés. O uso da primeira pessoa pode introduzir um erro de
									atribuição porque as pessoas tendem a acreditar que têm mais
									controle sobre a situação do que as personagens.</p>
							</list-item>
							<list-item>
								<p>Levantamento da população adequada. O pesquisador deve selecionar
									respondentes que possam dar respostas significativas para todas
									as <italic>vignettes</italic>.</p>
							</list-item>
							<list-item>
								<p>Adequação das <italic>vignettes</italic> aos respondentes. O
									pesquisador deve pedir para eventuais respondentes da população
									descreverem situações relevantes que envolvem as variáveis de
									estudo, podendo ser feito de modo qualitativa em um
										<italic>focus group</italic>, por exemplo.</p>
							</list-item>
							<list-item>
								<p>Aplicação de análise conjunta com uma plataforma teórica e
									prática. A questão essencial é estabelecer um conjunto de
									atributos e seus níveis. Para <xref ref-type="bibr" rid="B25"
										>Malhotra (2008)</xref>, os atributos devem ser:
									determinantes; fáceis para medir e comunicar; realísticos;
									compensatórios; dispostos de modo que um nível seja preferível a
									um outro nível; como um conjunto, devem definir adequadamente a
									situação escolhida; e não devem ser redundantes.</p>
							</list-item>
						</list>
					</p>
					<p>Igualmente importa que os respondentes não percebam os resultados como uma
						ameaça pessoal. A realização de um levantamento malconduzido com
							<italic>vignettes</italic> pode trazer mais danos do que benefícios.
						Atenção especial deve ser dispensada para que não surjam situações que
						afetam a moralidade dos respondentes (<xref ref-type="bibr" rid="B16"
							>HEVERLY; FITT; NEWMAN, 1984</xref>).</p>
					<p>Em relação ao julgamento de especialistas, <xref ref-type="bibr" rid="B29"
							>Rossiter (2011)</xref> recomenda uma amostra com três
							<italic>experts</italic>, cinco gestores com menor escolaridade ou dez
						respondentes com menor escolaridade para realizar um pré-teste inicial a fim
						de escolher os itens do questionário e o formato das respostas.</p>
					<p><xref ref-type="bibr" rid="B27">McCrow et al. (2013)</xref> propuseram um
						questionário para auxiliar os pesquisadores na criação de
							<italic>vignettes</italic> com analogias confiáveis dos cenários
						clínicos desejados. O questionário foi aplicado com características de
							"<italic>blind and independent review</italic>" aos
							<italic>experts</italic>. Estes devem classificar em ordem
							(<italic>ranking</italic>) os itens clareza e simplicidade, e realizar
						uma escolha discreta entre plausibilidade do conteúdo, validade de conteúdo
						e analogia da <italic>vignette</italic> com o construto. Uma modificação do
							<italic>checklist</italic> proposto por <xref ref-type="bibr" rid="B27"
							>McCrow et al. (2013)</xref> pode ser vista mais adiante, na seção
						resultados, na <xref ref-type="fig" rid="f13">Figura 5</xref>.</p>
					<p>
						<fig id="f11">
							<label>Figura 3</label>
							<caption>
								<title>Escala analógica visual.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf03-pt.tif"/>
							<attrib>Fonte: elaborado pelos autores</attrib>
						</fig>
					</p>
					<p>
						<fig id="f12">
							<label>Figura 4</label>
							<caption>
								<title>Exemplo da criação da <italic>vignette</italic> para o
									construto flexibilidade.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf04-pt.tif"/>
							<attrib>Fonte: <xref ref-type="bibr" rid="B31">Silva
								(2014)</xref>.</attrib>
						</fig>
					</p>
					<p>
						<fig id="f13">
							<label>Figura 5</label>
							<caption>
								<title>Resultado do painel de <italic>experts</italic> sobre o
										<italic>vignette</italic> flexibilidade.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf05-pt.tif"/>
							<attrib>Fonte: <xref ref-type="bibr" rid="B31">Silva
								(2014)</xref>.</attrib>
						</fig>
					</p>
					<p>Não há um consenso sobre o número adequado de <italic>vignettes</italic> em
						um levantamento (<xref ref-type="bibr" rid="B4">BACHMANN et al.,
						2008</xref>). Alguns estudos, entretanto, sugerem que, a medida que aumenta
						o número de atributos, de escolhas e de <italic>vignettes</italic>, diminui
						a confiabilidade da resposta. De modo geral, o número de atributos em uma
							<italic>vignette</italic> não convém exceder a oito (<xref
							ref-type="bibr" rid="B24">LOUVIERE; EAGLE; COHEN, 2005</xref>) e o
						número delas não deve exceder a vinte (<xref ref-type="bibr" rid="B19"
							>JOHNSON; ORME, 1996</xref>). A próxima seção descreve a metodologia
						aplicada neste estudo.</p>
				</sec>
			</sec>
			<sec sec-type="methods">
				<title>5. METODOLOGIA</title>
				<p>Nesta seção é apresentado o desenvolvimento de uma aplicação do método para a
					criação de <italic>vignettes</italic> para um levantamento sobre cocriação de
					valor em serviços da saúde. Destaca-se que este estudo não teve por objetivo
					demonstrar como as <italic>vignettes</italic> minimizam os efeitos do DIF em
					levantamentos. Para tanto, recomenda-se uma revisão dos trabalhos de <xref
						ref-type="bibr" rid="B20">King et al. (2004)</xref>, onde tais autores
					demonstram tais propriedades. A pesquisa se propõe a identificar elementos da
					literatura que contribuem para a construção robusta de
						<italic>vignettes</italic>, cuja natureza se aproxima de uma abordagem mais
					prescritiva do que descritiva sobre o método.</p>
				<p>Inicialmente, construiu-se um <italic>blueprint</italic> no formato de modelagem
					de equações estruturais para propor um modelo hipotético considerando os
					construtos flexibilidade, responsividade e coinovação dos funcionários da linha
					de frente de um serviço de saúde que se associam positivamente ao construto da
					cocriação de valor (<xref ref-type="bibr" rid="B32">SILVA et al.,
					2015</xref>).</p>
				<p>Cada construto tem um <italic>cluster</italic> de itens de avaliação (modelo de
					mensuração) que foram objetos da pesquisa. O construto flexibilidade, por
					exemplo, apresenta seis itens. O questionário final com as quatro
						<italic>vignettes</italic> e os 27 itens foram aplicados para o modelo que
					será apresentado na <xref ref-type="fig" rid="f11">Figura 3</xref> (<xref
						ref-type="bibr" rid="B31">SILVA, 2014</xref>). Entretanto, detalhes em
					relação a modelagem de equação estrutural fogem ao escopo deste artigo, cujo
					objetivo principal direcionou o foco para descrever o método das
						<italic>vignettes</italic>. Os itens de cada um dos construtos serão
					descritos nas próximas seções.</p>
				<p>Após a definição do modelo, com a especificação dos itens de avaliação para cada
					constructo, o segundo passo consistiu na criação dos componentes dos cenários
					que representassem cada um dos itens dos construtos, cuja validação foi feita
					por um painel independente composto por dez <italic>experts</italic>. Todos têm
					experiência em supervisão e ou coordenação de serviços clínicos há mais de 5
					anos. Essas qualificações e experiências com os serviços da saúde os posicionam
					como <italic>experts</italic> com níveis de conhecimentos adequados sobre
					situações clínicas para avaliar a qualidade das <italic>vignettes</italic>.</p>
				<p>As <italic>vignettes</italic> foram revisadas até que houvesse concordância entre
					os <italic>experts</italic> de que os cenários descreviam contextos clínicos de
					interações entre os clientes (pacientes) e o <italic>staff</italic> da linha de
					frente (médico, enfermeiro, técnico de enfermagem, fisioterapeuta, etc.).
					Ademais, os <italic>experts</italic> também revisaram a correspondência
					semântica entre os componentes das <italic>vignettes</italic> e os construtos
					revisados pela literatura. <xref ref-type="bibr" rid="B27">McCrow et al.
						(2013)</xref> utilizaram um <italic>cutoff</italic> de 90% de concordância
					entre os <italic>experts</italic> para considerar que não deveria haver mudanças
					na textualização das <italic>vignettes</italic>.</p>
				<sec>
					<title>5.1. DESCRIÇÃO DOS CONSTRUCTOS</title>
					<p>O <xref ref-type="table" rid="t2">Quadro 1</xref> apresenta os itens dos
						constructos que foram aplicados nesta pesquisa.</p>
					<table-wrap id="t2">
						<label>Quadro 1</label>
						<caption>
							<title>Constructos e seus respectivos itens de avaliação.</title>
						</caption>
						<table frame="box" rules="groups" style="border-color:#2465b0">
							<colgroup>
								<col width="25%"/>
								<col width="25%"/>
								<col width="25%"/>
								<col width="25%"/>
							</colgroup>
							<thead>
								<tr>
									<th align="left">Flexibilidade</th>
									<th align="left">Coinovação</th>
									<th align="left">Responsividade</th>
									<th align="left">Cocriação</th>
								</tr>
							</thead>
							<tbody>
								<tr>
									<td align="left">F1 - Volume</td>
									<td align="left">I1 - Produtos e serviços</td>
									<td align="left">R1 - Dignidade </td>
									<td align="left">C1 - Cooperação </td>
								</tr>
								<tr>
									<td align="left">F2 - Reatividade</td>
									<td align="left">I2 - Riscos</td>
									<td align="left">R2 - Confidencialidade</td>
									<td align="left">C2 - Catalogação de informação </td>
								</tr>
								<tr>
									<td align="left">F3 - Expansão</td>
									<td align="left">I3 - Arquitetura</td>
									<td align="left">R3 - Autonomia</td>
									<td align="left">C3 - Complementação de terapias complementares</td>
								</tr>
								<tr>
									<td align="left">F4 - Comunicação</td>
									<td align="left">I4 - Valor</td>
									<td align="left">R4 - Atenção imediata</td>
									<td align="left">C4 - Aprendizagem em conjunto </td>
								</tr>
								<tr>
									<td align="left">F5 - Roteamento</td>
									<td align="left">I5 - Base de clientes</td>
									<td align="left">R5 - Aspectos tangíveis</td>
									<td align="left">C5 - Mudanças no estilo de vida </td>
								</tr>
								<tr>
									<td align="left">F6 - Função</td>
									<td align="left">I6 - Modelos de negócios</td>
									<td align="left">R6 - Acesso de suporte a rede social</td>
									<td align="left">C6 - Conectividade </td>
								</tr>
								<tr>
									<td align="left">&#x00A0;</td>
									<td align="left">&#x00A0;</td>
									<td align="left">R7 - Escolha do prestador de serviços</td>
									<td align="left">C7 - Coprodução </td>
								</tr>
								<tr>
									<td align="left">&#x00A0;</td>
									<td align="left">&#x00A0;</td>
									<td align="left">&#x00A0;</td>
									<td align="left">C8 - Oficinas de estimulação cerebral</td>
								</tr>
							</tbody>
						</table>
						<table-wrap-foot>
							<attrib>Fonte: elaborados pelos autores.</attrib>
						</table-wrap-foot>
					</table-wrap>
					<p>Dado que a flexibilidade representa um construto para lidar com mudanças
						imprevistas, além da tecnologia dinâmica do sistema devem ser considerados o
						planejamento, a previsão, a comunicação e as capacidades de implementação em
						sua mensuração (<xref ref-type="bibr" rid="B8">CHOU; CHUA; TEO, 2010</xref>;
							<xref ref-type="bibr" rid="B30">SCHNEEWEISS; SCHNEIDER,
						1999</xref>).</p>
					<p>A inovação por meio da criatividade é um processo dinâmico no qual uma pessoa
						interage com vários fatores dentro de uma estrutura social. Isto é, resulta
						de um produto de um sistema social, não meramente da capacidade de uma
						pessoa ou de um grupo de pessoas (<xref ref-type="bibr" rid="B18">JACOBS,
							2013</xref>). Assim, torna-se crucial, para que se mantenha uma posição
						competitiva forte e sustentável, desenvolver a capacidade de coinovação com
						outras organizações (<xref ref-type="bibr" rid="B6">BOSSINK,
						2002</xref>).</p>
					<p>A responsividade pode ser definida, no contexto de um sistema, como o
						resultado que pode ser alcançado quando instituições e relações
						institucionais são planejadas a ponto de serem capazes de responder
						adequadamente às expectativas legítimas e universais das pessoas (<xref
							ref-type="bibr" rid="B33">SILVA, 1999</xref>). A cocriação de valor do
						cliente é um benefício realizado a partir da integração de recursos por meio
						de atividades e interações com os colaboradores na rede de serviços do
						cliente (<xref ref-type="bibr" rid="B26">MCCOLL-KENNEDY et al.,
						2012</xref>).</p>
				</sec>
				<sec>
					<title>5.2. AS <italic>VIGNETTES</italic>: ESCALAS E AFIRMAÇÕES</title>
					<p>Com base na revisão da literatura precedente, foram construídas quatro
							<italic>vignettes</italic>. Cada uma das <italic>vignettes</italic>
						representa um cenário associado a um dos quatro construtos do modelo
						estrutural: flexibilidade (cenário 1); coinovação (cenário 2);
						responsividade (cenário 3); e, cocriação (cenário 4).</p>
					<p>Os cenários representam situações de uso <italic>exsitu</italic>, ou seja,
						referem-se à apreensão da informação fora das situações de uso real,
						retrospectivamente ou por antecipação (<xref ref-type="bibr" rid="B11"
							>EDVARDSSON et al., 2012</xref>) do <italic>staff</italic> da linha de
						frente (médicos, enfermeiros, fisioterapeutas, técnicos de enfermagem etc.).
						Em relação à dimensão contexto, a informação pode ser conseguida das pessoas
						que estiveram <italic>in contexto</italic> (<xref ref-type="bibr" rid="B11"
							>EDVARDSSON et al., 2012</xref>). Os respondentes estão familiarizados
						com as situações do contexto.</p>
					<p>Para cada cenário há um conjunto de afirmações (itens) em que o respondente
						foi convidado a assinalar seu grau de aprovação ou desaprovação com cada
						afirmativa em relação ao cenário. Assim, os funcionários da linha de frente
						posicionam-se, nesta pesquisa, na classificação de <xref ref-type="bibr"
							rid="B11">Edvardsson et al. (2012)</xref>, como clientes reflexivos: têm
						experiência em contexto real do serviço, mas não estão vivenciando uma
						situação real de criação de valor.</p>
					<p>Os itens foram medidos por uma escala analógica visual de nove pontos. As
						escalas analógicas visuais produzem resultados mais próximos de uma medida
						contínua (<xref ref-type="bibr" rid="B12">ERNSTG&#x00C5;RD; BOTTAI,
							2012</xref>). A classificação do grau de desaprovação ou aprovação na
						escala analógica visual foi graduada de 1 (desaprovo totalmente) até 9
						(aprovo totalmente) (<xref ref-type="fig" rid="f11">Figura 3</xref>). Convém
						evitar a numeração no formato 1-5, 1-7, 1-9 ou 1-11, pois a sequência
						obscurece a natureza bipolar do atributo para o respondente. Sempre deve ser
						avaliada com um único item (<xref ref-type="bibr" rid="B29">ROSSITER,
							2011</xref>).</p>
					<p>A seleção das afirmações deve ser de tal sorte que as pessoas com pontos de
						vistas diferentes em relação à atitude de interesse da pesquisa respondam de
						modos diferentes (<xref ref-type="bibr" rid="B23">LIKERT, 1932</xref>). Os
						seguintes critérios devem ser observados na construção das afirmações: (a)
						todas as afirmações devem expressar comportamentos desejados, não afirmações
						sobre fatos; (b) as afirmações devem ser claras, concisas e honestas, com o
						vocabulário mais simples possível; (c) em geral, seria desejável que a
						reação modal de cada afirmação fosse posicionada medianamente em relação às
						respostas possíveis; (d) as afirmações devem estar em uma distribuição
						bipolar, de modo que metade delas seja favorável e a outra metade,
						desfavorável em relação à atitude em investigação; (e) as diferentes
						alternativas devem fazer referência a uma única atitude, jamais a múltiplas
						atitudes.</p>
					<p>O questionário final, composto por quatro <italic>vignettes</italic> e 27
						itens foi pré-testado com representantes da população de interesse para
						verificar a adequação do modelo proposto. A seguir estão como ilustração as
							<italic>vignettes</italic> que representam os construtos pesquisados e o
							<italic>checklist</italic> de avaliação do constructo flexibilidade.</p>
				</sec>
			</sec>
			<sec sec-type="results">
				<title>6. RESULTADOS</title>
				<p>Em relação ao conteúdo dos quatro construtos, houve 100% de concordância entre os
						<italic>experts</italic> sobre o contexto adequado para a população de
					interesse, indicação dos comportamentos do cliente e do <italic>staff</italic>
					da linha de frente, bem como da indicação da comunicação entre o
						<italic>staff</italic> da linha de frente. Após os ajustes indicados pelas
					observações dos <italic>experts</italic>, houve unanimidade de concordância para
					a clareza, para a simplicidade e para a correspondência entre os domínios dos
					quatro construtos. As quatro <italic>vignettes</italic>, sob a perspectiva de
					todos os <italic>experts</italic>, corresponderam ao significado semântico dos
					respectivos construtos. A seguir são apresentadas as <italic>vignettes</italic>
					dos quatros constructos pesquisados.</p>
				<sec>
					<title>6.1. <italic>VIGNETTE</italic> DO CONSTRUCTO FLEXIBILIDADE</title>
					<p>A <xref ref-type="fig" rid="f12">Figura 4</xref> ilustra a descrição da
							<italic>vignette</italic> correspondente ao construto flexibilidade e
						seus itens associados. A <xref ref-type="fig" rid="f13">Figura 5</xref>
						apresenta o resultado final do painel de <italic>experts</italic> sobre esse
						construto, e para os demais os resultados foram análogos. Os
							<italic>experts</italic> de 1 a 4 (EXP1... EXP4) são médicos; os de 5 a
						7, enfermeiros; e os de 8 a 10, fisioterapeutas. Na segunda coluna (<xref
							ref-type="fig" rid="f13">Figura 5</xref>), estão os critérios para
						avaliação das <italic>vignettes</italic> e seus itens, enquanto na última
						está o grau de concordância entre os <italic>experts</italic> sobre o
						conteúdo, a clareza, a simplicidade, a validade de conteúdo e a analogia
						entre a <italic>vignette</italic> e o construto correspondente.</p>
					<p>A flexibilidade, como uma característica da organização, pode ser vista sob
						três componentes conceituais: as habilidades do funcionário, o comportamento
						do funcionário e as práticas de recursos humanos da organização (<xref
							ref-type="bibr" rid="B5">BHATTACHARYA; GIBSON; DOTY, 2005</xref>). A
						flexibilidade de habilidades representa o número potencial de alternativas
						de uso das habilidades de um funcionário e o quão rápido as pessoas com
						diferentes habilidades podem ser reposicionadas (<xref ref-type="bibr"
							rid="B5">BHATTACHARYA; GIBSON; DOTY, 2005</xref>). Essas características
						estão presentes, em algum grau, nos conceitos dos itens F5 (flexibilidade de
						roteamento) e F6 (flexibilidade de função) (<xref ref-type="fig" rid="f12"
							>Figura 4</xref>), dado que eles descrevem, respectivamente, vias
						alternativas para entrega do serviço (<italic>atender à intercorrência da
							visitante no apartamento, ao invés de a cliente ser deslocada para o
							pronto-socorro</italic>) e capacidades dos funcionários para realizar
						novas operações (<italic>os funcionários dos apartamentos, nos hospitais,
							têm operações específicas direcionadas para clientes
						internados</italic>).</p>
					<p>O item F1 (<xref ref-type="fig" rid="f12">Figura 4</xref>) refere-se à
						movimentação temporária em um sistema para mudar seu estado diante de uma
						variação na demanda pelo serviço (<italic>a visitante demandou um serviço
							não esperado na unidade, de modo que os funcionários realizaram uma
							movimentação temporária para atender a essa demanda</italic>), enquanto
						o item F2 é relativo à rapidez com que o sistema realiza essa movimentação
							(<italic>os funcionários atenderam com rapidez a demanda da visitante,
							ao contrário de uma rotina em que a cliente poderia ser deslocada até o
							pronto-socorro, demandar a abertura de uma ficha de atendimento e
							aguardar para ser atendida</italic>). Os funcionários, neste cenário,
						não só demonstraram interesse, como habilidades para a movimentação
						temporária.</p>
				</sec>
				<sec>
					<title>6.2. <italic>VIGNETTE</italic> DOS CONSTRUCTOS COINOVAÇÃO, RESPONSIVIDADE
						E COCRIAÇÃO</title>
					<p>A inovação em serviços é um conjunto de práticas para criar valor para os
							<italic>stakeholders</italic> por meio de melhorias ou de novas
						propostas, processos e modelos de negócios de serviços (<xref
							ref-type="bibr" rid="B37">YEN et al., 2012</xref>). Além de atentar para
						as necessidades do cliente, também é importante entender suas preferências.
						A decisão recai sobre um <italic>trade-off</italic> entre riscos e
						utilidades, distintos entre clientes antigos e novos (<xref ref-type="bibr"
							rid="B7">CHIU; LEUNG; LAM, 2009</xref>). A <xref ref-type="fig"
							rid="f14">Figura 6</xref> apresenta a descrição do cenário hipotético
						associado ao construto coinovação.</p>
					<p>
						<fig id="f14">
							<label>Figura 6</label>
							<caption>
								<title>Exemplo da criação da <italic>vignette</italic> para o
									construto coinovação.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf06-pt.tif"/>
							<attrib>Fonte: <xref ref-type="bibr" rid="B31">Silva
								(2014)</xref>.</attrib>
						</fig>
					</p>
					<p>O construto está relacionado à percepção do usuário sobre como os serviços da
						saúde entregam os elementos que não estão diretamente vinculados à saúde ou
						à doença do cliente, por exemplo, a limpeza dos locais de espera, dos
						consultórios, dos locais de exame e dos banheiros (<xref ref-type="bibr"
							rid="B1">ANDRADE; VAITSMAN; FARIAS, 2010</xref>). A <xref ref-type="fig"
							rid="f15">Figura 7</xref> apresenta a descrição do cenário hipotético
						associado ao construto responsividade. Já a <xref ref-type="fig" rid="f16"
							>Figura 8</xref> apresenta a descrição do cenário hipotético associado
						ao construto cocriação.</p>
					<p>
						<fig id="f15">
							<label>Figura 7</label>
							<caption>
								<title>Exemplo da criação da <italic>vignette</italic> para o
									construto responsividade.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf07-pt.tif"/>
							<attrib>Fonte: <xref ref-type="bibr" rid="B31">Silva
								(2014)</xref>.</attrib>
						</fig>
					</p>
					<p>
						<fig id="f16">
							<label>Figura 8</label>
							<caption>
								<title>Exemplo da criação da <italic>vignette</italic> para o
									construto cocriação.</title>
							</caption>
							<graphic xlink:href="1808-2386-bbr-16-01-0016-gf08-pt.tif"/>
							<attrib>Fonte: <xref ref-type="bibr" rid="B31">Silva
								(2014)</xref>.</attrib>
						</fig>
					</p>
					<p>O pré-teste do questionário, aplicado para um grupo de 15 indivíduos da
						população de interesse, revelou que a textualização final das
							<italic>vignettes</italic> descreveram situações realísticas acerca dos
						domínios de interesse de cada construto.</p>
				</sec>
			</sec>
			<sec sec-type="conclusions">
				<title>7. CONSIDERAÇÕES FINAIS</title>
				<p>Esta pesquisa teve como objetivo revisar e descrever critérios apresentados na
					literatura para uma textualização robusta de <italic>vignettes</italic>. Um dos
					principais objetivos no estudo sobre julgamentos e tomadas de decisão direciona
					o foco para identificar as variáveis que influenciam a atitude dos prestadores
					de serviços sobre os clientes. Por exemplo, no encontro profissional da
					saúde-cliente, interessa compreender como os profissionais de saúde julgam ou
					tomam decisões sobre seus clientes (pacientes). Muitos desses estudos
					fundamentam-se em pesquisas analógicas, nas quais o pesquisador controla os
					estímulos para os respondentes.</p>
				<p>As <italic>vignettes</italic> emergem como um modelo de pesquisa analógica, no
					qual o pesquisador controla as variáveis de interesse, de modo que fatores
					externos possam ser omitidos ou mantidos constantes. Não obstante, o primeiro
					esboço de uma <italic>vignette</italic> deve estar fundamentado numa revisão da
					literatura ou no julgamento de <italic>experts</italic>, e convém uma revisão
					por um grupo independente (<italic>blind review</italic>) para melhorar a sua
					validade e a confiabilidade.</p>
				<p>A presença de DIF em levantamentos afeta a efetividade dos instrumentos, dessa
					forma a ancoragem com <italic>vignettes</italic> é apresentada como um método
					para reparar os problemas de medição advindos da interpretação das escalas. Por
					meio das <italic>vignettes</italic> são adicionadas âncoras nas perguntas
					buscando-se alcançar consistência nas respostas e equivalência nas
						<italic>vignettes,</italic> permitindo o respondente se posicionar
					comparativamente ao status da personagem.</p>
				<p>Este estudo apresentou algumas diretrizes para a construção de
						<italic>vignettes</italic> com um olhar direcionado para o rigor
					metodológico em relação à validade e à confiabilidade dos dados. Um conjunto
					mínimo de critérios (plausibilidade, clareza, simplicidade, validade de conteúdo
					e analogia entre a <italic>vignette</italic> e o construto) concebe os elementos
					essenciais para o desenvolvimento criterioso dessa metodologia. Não obstante a
					aplicação do processo, neste trabalho, ter sido desenvolvida em cenários que
					envolvem serviços da saúde, e, dado que as <italic>vignettes</italic>
					representam cenários de situações da vida real, convém explorar a aplicação do
					método em outras áreas de pesquisa, inclusive em administração.</p>
				<p>As quatro <italic>vignettes</italic> hipotéticas foram desenvolvidas seguindo as
					recomendações apresentadas. Uma revisão meticulosa da literatura sobre cocriação
					de valores atentou para que o conteúdo das <italic>vignettes</italic>
					descrevesse um contexto real de serviços na área da saúde e assim construiu-se
					um <italic>blueprint</italic> para o modelo. As <italic>vignettes</italic>
					textualizadas foram avaliadas por <italic>experts</italic> em relação à
					validação dos cenários e à equivalência semântica das
						<italic>vignettes,</italic> obtendo concordância superior ao
						<italic>cutoof</italic> recomendado de 90%.</p>
				<p>Como contribuição teórica, esta pesquisa atentou para as recomendações sobre o
						<italic>design</italic> de pesquisas com aplicação do método de
						<italic>vignettes</italic>. Assim, pesquisadores vão contar com um
					levantamento de critérios e recomendações para uma textualização e aplicação
					robusta de um método para lidar com o DIF em levantamentos. Adicionalmente, a
					pesquisa explora um modelo sobre os antecedentes da experiência da cocriação de
					valores para um serviço de saúde a fim de ilustrar a aplicação do método de
					acordo com os critérios e recomendações apresentados. De forma prática, os
					resultados desta pesquisa contribuem para ampliar os conhecimentos sobre a
					criação de valores em serviços da saúde ao propor um padrão de desenvolvimento
					de recursos operantes que facilite a criação de estratégias para operacionalizar
					o conceito da cocriação de valores com os clientes.</p>
				<p>Como as <italic>vignettes</italic> foram aplicadas para três categorias
					diferentes de profissionais (médicos, fisioterapeutas e enfermeiros) para que
					expressassem sua opinião sobre os cenários, uma limitação desta pesquisa foi a
					ausência de testes de hipóteses para verificar se a percepção dos cenários
					diverge ou não em função de diferenças demográficas e formações profissionais.
					Nesse sentido, levantamentos sobre atitudes são altamente sensíveis à
					textualização; as mesmas questões podem ter significados diferentes para os
					respondentes quando eles estão em contextos diferentes. Adicionalmente, a
					plataforma teórica e operacional desta pesquisa não explora a totalidade de
					construtos que potencialmente se associam à experiência da cocriação de valores
					em serviços da saúde.</p>
				<p>Não obstante seja uma limitação, também enseja uma oportunidade para se verificar
					se de fato não há diferença de percepção entre os grupos de respondentes. Também
					interessa às pesquisas futuras a aplicação e o desenvolvimento desses critérios
					para que sejam aprimorados os mecanismos de redução da incomparabilidade de
					dados em contextos interpessoais.</p>
			</sec>
		</body>
	</sub-article>-->
</article>
