મારો સ્પર્ધક ChatGPT અને Perplexityમાં દેખાય છે અને હું નથી દેખાતો. કારણ કેવી રીતે શોધવું?
ક્રમસર આગળ વધો: પહેલાં ખાતરી કરો કે આસિસ્ટન્ટના સર્ચ ક્રૉલર તમારાં પેજ સુધી પહોંચી અને તેને વાંચી શકે છે, પછી તમારા પેજને એ પેજ સાથે સરખાવો જે તેઓ સ્પર્ધક માટે ટાંકે છે. તપાસો કે એ પેજ પ્રશ્નનો જવાબ સીધો અને શરૂઆતમાં આપે છે કે નહીં, કિંમતો, સુવિધાઓ અને સ્થળો સાદા લખાણમાં જણાવે છે કે નહીં, બીજી સાઇટ બિઝનેસનું જે વર્ણન કરે છે તેની સાથે મેળ ખાય છે કે નહીં, અને આસિસ્ટન્ટ ટાંકે એવા રિવ્યૂ અને યાદીઓનો તેને ટેકો છે કે નહીં. કોઈ આસિસ્ટન્ટ પોતાની રેન્કિંગ પદ્ધતિ પ્રકાશિત કરતો નથી, તેથી આ સૂત્ર નહીં, બાકાત રાખવાની રીતથી નિદાન છે.
તમે ChatGPT કે Perplexityને તમારી કૅટેગરીનો શ્રેષ્ઠ વિકલ્પ પૂછો છો અને લિંક સાથે સ્પર્ધકનું નામ આવે છે, જ્યારે તમારો ઉલ્લેખ પણ નથી. કારણનો અંદાજ લગાવવાનું મન થાય. વધુ સારી રીત એ છે કે કારણોને એક પછી એક બાકાત કરો: પહેલાં એવાં કારણો જે હા કે ના જેવાં અને સાબિત કરવામાં સહેલાં છે, જેમ કે બ્લૉક થયેલો ક્રૉલર, અને પછી કન્ટેન્ટ અને પ્રતિષ્ઠા સંબંધિત કારણો. આ દરમિયાન સ્પર્ધકનું ટાંકેલું પેજ તમારો શ્રેષ્ઠ પુરાવો છે કે આસિસ્ટન્ટને શું ઉપયોગી લાગ્યું.
આ પેજ પર
- ChatGPT મારી સાઇટ કેમ શોધી શકતું નથી?
- શું તમારી સાઇટ પરનું કોઈ પેજ બરાબર એ જ પ્રશ્નનો જવાબ આપે છે?
- શું તમારી કિંમતો, સુવિધાઓ અને સ્થળો સાદા લખાણમાં લખેલાં છે?
- શું બીજી સાઇટ તમારા બિઝનેસનું વર્ણન તમારી જેમ જ કરે છે?
- આસિસ્ટન્ટ બીજી સાઇટનાં કયાં પેજ ટાંકે છે, અને શું તમે તેમાં છો?
- શું તમારી માહિતી તાજી છે અને તેના પર તારીખ સ્પષ્ટ છે?
- મારા પેજને સ્પર્ધકના ટાંકેલા પેજ સાથે કેવી રીતે સરખાવવું, અને મારા નિયંત્રણ બહાર શું છે?
ChatGPT મારી સાઇટ કેમ શોધી શકતું નથી?
પહેલાં ઍક્સેસ તપાસો, કારણ કે ક્રૉલરને પાછો મોકલી દેવાતો હોય તો કન્ટેન્ટ પર ગમે તેટલું કામ મદદ કરતું નથી. દરેક આસિસ્ટન્ટ પોતાનાં સર્ચ પરિણામો બનાવતા ક્રૉલરનું નામ આપે છે: ChatGPT માટે OAI-SearchBot, Perplexity માટે PerplexityBot અને Claude માટે Claude-SearchBot. OpenAI કહે છે કે OAI-SearchBotમાંથી opt out કરેલી સાઇટ ChatGPTના સર્ચ જવાબોમાં બતાવાશે નહીં, જોકે navigational લિંક તરીકે તે હજી દેખાઈ શકે છે. Anthropic કહે છે કે Claude-SearchBotને બંધ કરવાથી યુઝરનાં સર્ચ પરિણામોમાં તમારી દૃશ્યતા ઘટી શકે છે.
આ બ્લૉક સામાન્ય છે. 1,000 સૌથી લોકપ્રિય ડોમેનના અમારા અભ્યાસમાં, robots.txt આપતાં 518 ડોમેનમાંથી 58એ OAI-SearchBotને, 67એ Claude-SearchBotને અને 86એ PerplexityBotને મનાઈ કરી હતી. તમારી પોતાની ફાઇલ પર ઝડપી નજર:
curl -s https://example.com/robots.txt | grep -i -A4 -E "user-agent: (oai-searchbot|perplexitybot|claude-searchbot|\*)" પછી બીજા બે દરવાજા તપાસો. ફાયરવૉલ કે CDN ક્રૉલરને 403 કે ચેલેન્જ પેજ આપી શકે છે જ્યારે બ્રાઉઝરને સાચું પેજ મળે છે; OpenAI સાઇટ માલિકોને ખાતરી કરવા કહે છે કે તેમનું હોસ્ટ કે CDN તેનાં પ્રકાશિત searchbot IP સરનામાં પરથી આવતા ટ્રાફિકને મંજૂરી આપે છે, અને Perplexity નોંધે છે કે web application firewall પાછળની સાઇટે તેના bots ને સ્પષ્ટ મંજૂરી આપવી પડી શકે. અને જે લખાણ ફક્ત JavaScript ચાલ્યા પછી દેખાય છે તે કદાચ ક્રૉલર સુધી ક્યારેય ન પહોંચે. AI ક્રૉલર માટે robots.txt, ફાયરવૉલના બ્લૉક અને JavaScript કન્ટેન્ટ પરની અમારી માર્ગદર્શિકાઓ દરેક સુધારો વિગતે સમજાવે છે. Google AI Overviews અને AI Mode માટે Googleની એકમાત્ર ટેક્નિકલ શરત એ છે કે પેજ ઇન્ડેક્સ થયેલું હોય અને snippet સાથે બતાવવા પાત્ર હોય.
શું તમારી સાઇટ પરનું કોઈ પેજ બરાબર એ જ પ્રશ્નનો જવાબ આપે છે?
ઍક્સેસ બરાબર હોય પછી સ્પર્ધકનું ટાંકેલું પેજ ખોલો અને જુઓ કે તે કેવું પેજ છે. ઘણી વાર તે પ્રશ્નની આસપાસ જ બનેલું પેજ હોય છે: સરખામણી, "best tools for" પ્રકારની માર્ગદર્શિકા, કિંમતોનું પેજ કે કોઈ એક ચોક્કસ ઉપયોગ માટેનું પેજ. જો તમારી સાઇટ પર ફક્ત હોમ પેજ અને સુવિધાઓની યાદી હોય, તો કદાચ તમારું કોઈ પેજ એ પ્રશ્ન સાથે મેળ ખાતું જ નથી.
આ મહત્ત્વનું છે કારણ કે આસિસ્ટન્ટ યુઝરના ચોક્કસ શબ્દોથી સર્ચ કરતા નથી. OpenAI કહે છે કે ChatGPT સામાન્ય રીતે પ્રશ્નને એક કે વધુ ચોક્કસ સર્ચ ક્વેરીમાં ફરીથી લખે છે, અને Google કહે છે કે AI Mode પેટાવિષયો પર ઘણી સંબંધિત સર્ચ કરે છે. જે પેજનું હેડિંગ અને પહેલો ફકરો આમાંની કોઈ ચોક્કસ ક્વેરી સાથે મેળ ખાય, તેના મળવાની શક્યતા વિષયને ફક્ત અડકતા સામાન્ય પેજ કરતાં વધુ છે.
જવાબ શરૂઆતમાં મૂકો. પહેલા ફકરામાં જણાવો કે પ્રોડક્ટ કોના માટે છે, શું કરે છે અને તેની કિંમત શું છે, એવાં વાક્યોમાં જે એકલાં ટાંકવામાં આવે તો પણ સમજાય. AI સુવિધાઓ માટે Googleની પોતાની સલાહમાં એ પણ છે કે મહત્ત્વનું કન્ટેન્ટ લખાણ સ્વરૂપે ઉપલબ્ધ હોય.
શું તમારી કિંમતો, સુવિધાઓ અને સ્થળો સાદા લખાણમાં લખેલાં છે?
જે હકીકતો ફક્ત ઇમેજ, PDF, configuratorમાં કે "contact sales" પાછળ છે તેને કોઈ પણ સિસ્ટમ માટે ટાંકવી મુશ્કેલ છે. સરખાવો કે સ્પર્ધકનું પેજ કેટલી નક્કર હકીકતો જણાવે છે: પ્લાન અને કિંમતો, સપોર્ટ થતા દેશો, integrations, ખુલવાનો સમય, ડિલિવરી વિસ્તારો. જો તેમાં લખ્યું હોય "દર મહિને $29થી, EU અને UKમાં ડિલિવરી" અને તમારામાં "flexible pricing", તો આસિસ્ટન્ટ પાસે ટાંકવા જેવું ફક્ત એક જ બાજુ છે.
પ્રોડક્ટના જવાબો વિશે OpenAI સ્પષ્ટ છે. તે કહે છે કે પ્રોડક્ટ પસંદ કરતી વખતે ChatGPT પહેલી અને ત્રીજી પાર્ટીના પ્રદાતાઓનો structured metadata, જેમ કે કિંમત અને પ્રોડક્ટનું વર્ણન, અને ત્રીજી પાર્ટીનું બીજું કન્ટેન્ટ ધ્યાનમાં લે છે, અને વેપારીઓને ઉપલબ્ધતા, કિંમત, ગુણવત્તા અને તેઓ ઉત્પાદક કે મુખ્ય વિક્રેતા છે કે નહીં જેવાં પરિબળો પ્રમાણે ક્રમ આપે છે. Google તમને Merchant Center અને Business Profileની માહિતી અપડેટ રાખવા અને સ્ટ્રક્ચર્ડ ડેટા પેજ પરના દેખાતા લખાણ સાથે મેળ ખાય તેની ખાતરી કરવા કહે છે.
શું બીજી સાઇટ તમારા બિઝનેસનું વર્ણન તમારી જેમ જ કરે છે?
આસિસ્ટન્ટ તમે તમારા વિશે જે કહો છો તેને બીજા તમારા વિશે જે કહે છે તેની સાથે જોડે છે. જો તમારા બિઝનેસનું નામ, કૅટેગરી અને વર્ણન તમારી સાઇટ, directories, ઍપ સ્ટોર અને સોશિયલ પ્રોફાઇલમાં જુદાં હોય, તો તેમને એક જ entity સાથે જોડવા મુશ્કેલ બને છે. તમારા નિયંત્રણની દરેક જગ્યાએ એક નામ અને એક ટૂંકું વર્ણન વાપરો.
તમારા હોમ પેજ કે about પેજ પર Organization સ્ટ્રક્ચર્ડ ડેટા ઉમેરો. Google sameAsને બીજી વેબસાઇટ પરના એવા પેજના URL તરીકે વ્યાખ્યાયિત કરે છે જેમાં તમારી સંસ્થા વિશે વધુ માહિતી હોય, જેમ કે સોશિયલ કે રિવ્યૂ પ્રોફાઇલ, અને કહે છે કે અમુક properties તમારી સંસ્થાને સમાન નામવાળી બીજી સંસ્થાઓથી અલગ પાડવા વપરાય છે.
<script type="application/ld+json">
{
"@context": "https://schema.org",
"@type": "Organization",
"name": "Example",
"url": "https://example.com/",
"logo": "https://example.com/logo.png",
"description": "Online booking software for small salons.",
"sameAs": [
"https://www.linkedin.com/company/example",
"https://github.com/example"
]
}
</script> આસિસ્ટન્ટ બીજી સાઇટનાં કયાં પેજ ટાંકે છે, અને શું તમે તેમાં છો?
જે જવાબોમાં સ્પર્ધક દેખાય છે તેમાં ટાંકેલો દરેક સ્રોત જુઓ. ઘણી વાર તેમાંના મોટા ભાગના સ્પર્ધકની પોતાની સાઇટ નહીં, પણ રિવ્યૂ સાઇટ, "best of" યાદીઓ, સરખામણીના લેખો અને ફોરમના થ્રેડ હોય છે. જો તમે એ બધામાંથી ગેરહાજર હો, તો આસિસ્ટન્ટ પાસે તમારા વિશે બહારનો પુરાવો બહુ ઓછો છે.
આસિસ્ટન્ટ આ વિશે બહુ થોડું કહે છે. OpenAI કહે છે કે પ્રોડક્ટના જવાબો રિવ્યૂ ધ્યાનમાં લઈ શકે છે અને તેના રિવ્યૂ સારાંશ જાહેર વેબસાઇટ પરના રિવ્યૂ પર આધારિત છે. Perplexity કહે છે કે તે લેખો, વેબસાઇટ અને જર્નલ જેવા વિશ્વસનીય સ્રોતોમાં સર્ચ કરે છે, અને સમીક્ષા પછી કેટલીક આખી સાઇટને Government, Academic કે Trusted તરીકે લેબલ આપે છે; આ સમીક્ષા પૂછે છે, ઉદાહરણ તરીકે, કે સાઇટ પોતાની ભૂલો સુધારે છે કે નહીં અને દરેક લખાણ કોણે લખ્યું તે જણાવે છે કે નહીં. Perplexity એવું કહેતું નથી કે આ લેબલ નક્કી કરે છે કે કયા સ્રોત ટાંકાશે, અને કહે છે કે ચુકવણી અને ભાગીદારી તેમને અસર કરતી નથી.
વ્યવહારુ પગલું સામાન્ય માર્કેટિંગ છે: તમારા ગ્રાહકો જ્યાં જુએ છે ત્યાં સાચા ગ્રાહકો પાસે રિવ્યૂ માગો, તમારી કૅટેગરીની directoriesમાં લિસ્ટ થાઓ, અને જે કમ્યુનિટીમાં તમે ખરેખર મદદ કરી શકો ત્યાં પ્રશ્નોના જવાબ આપો. જવાબમાં જ પૈસા આપીને સ્થાન મેળવવાનો વિકલ્પ નથી: OpenAI કહે છે કે જાહેરાત આપનારા ChatGPTના જવાબોને ઘડી, ક્રમ આપી કે બદલી શકતા નથી.
શું તમારી માહિતી તાજી છે અને તેના પર તારીખ સ્પષ્ટ છે?
OpenAI ChatGPTના યુઝરને કહે છે કે ટાંકેલો સ્રોત ક્યારે પ્રકાશિત કે અપડેટ થયો તે તપાસો, તેથી જવાબ વાંચનાર માટે તારીખો મહત્ત્વની છે. જો તમારું કિંમતોનું પેજ હજી ગયા વર્ષના પ્લાન બતાવે, કે તમારા સરખામણી પેજ પર તારીખ જ ન હોય, તો સ્પર્ધકનું ગયા મહિનાનું પેજ સહેજે વધુ ભરોસાપાત્ર લાગી શકે.
Google પેજ પર દેખાતી તારીખ અને સ્ટ્રક્ચર્ડ ડેટામાં તેની સાથે મેળ ખાતી datePublished અને dateModified વેલ્યૂની ભલામણ કરે છે. તે મોટા ફેરફાર વગર ફક્ત પેજ તાજું દેખાડવા તારીખ બદલવાને ચેતવણીના સંકેત તરીકે પણ ગણાવે છે. પહેલાં હકીકતો અપડેટ કરો, પછી તારીખ.
મારા પેજને સ્પર્ધકના ટાંકેલા પેજ સાથે કેવી રીતે સરખાવવું, અને મારા નિયંત્રણ બહાર શું છે?
એ જ પ્રશ્ન ઘણી વાર પૂછો, નોંધો કે સ્પર્ધકનું કયું પેજ સૌથી વધુ ટાંકાય છે, અને તેને તમારા સૌથી નજીકના પેજની બાજુમાં મૂકો:
- શું હેડિંગ પ્રશ્ન સાથે મેળ ખાય છે, અને શું પહેલો ફકરો તેનો જવાબ આપે છે?
- તેમનું પેજ કઈ હકીકતો જણાવે છે જે તમારું નથી જણાવતું?
- શું તેમનું લખાણ HTMLમાં છે, અને તમારું?
- શું તેમના પેજ પર તારીખ છે, અને તે કેટલી તાજી છે?
- કઈ બહારની સાઇટ તેમનો ઉલ્લેખ કરે છે, અને શું કોઈ તમારો ઉલ્લેખ કરે છે?
સૌથી મોટો તફાવત પહેલાં સુધારો, પછી બીજા દિવસે નહીં પણ થોડાં અઠવાડિયાં સુધી ફરી તપાસતા રહો. અમુક વસ્તુઓ તમે બદલી શકતા નથી. OpenAI કહે છે કે ChatGPT ઘણાં પરિબળો પરથી પરિણામોને ક્રમ આપે છે અને સ્થાનની ગૅરંટી નથી; Perplexity, Anthropic અને Google પણ સ્રોતોને કેવી રીતે ક્રમ આપે છે તે પ્રકાશિત કરતાં નથી. જવાબો યુઝરની memory, history અને સ્થળ પ્રમાણે પણ બદલાય છે.
AISeeWhy પહેલો ભાગ તમારા માટે તપાસે છે: તે તમારું પેજ 16 AI અને સર્ચ ક્રૉલર તરીકે અને સાથે બ્રાઉઝર તરીકે મેળવે છે, દરેક ક્રૉલર માટે robots.txt લાગુ કરે છે, ચેલેન્જ પેજ ઓળખે છે અને બતાવે છે કે JavaScript વગર કેટલું લખાણ પહોંચે છે. પછી તેની AI માં દૃશ્યતા સુવિધા સમય સાથે ટ્રૅક કરે છે કે ChatGPT, Claude, Perplexity અને Gemini વધુમાં વધુ ચાર સ્પર્ધકોની બાજુમાં તમારો ઉલ્લેખ કરે છે કે નહીં.
આ સમસ્યાના સુધારા
- H1 નીચે કોઈ ટૂંકો જવાબ નથી
- તમારી બ્રાન્ડની Reddit કે સમીક્ષા સાઇટ પર ચર્ચા નથી
- કોઈ પ્રકાશક ઓળખાયો નથી
- પ્રકાશક પાસે sameAs લિંક નથી
આગળનાં પગલાં
- AI ક્રૉલર માટે robots.txt ટેસ્ટર અને ચેકર
- llms.txt ચેકર અને વેલિડેટર
- પૂરા રિપોર્ટનું એક ઉદાહરણ જુઓ
- AI ક્રૉલર મૉનિટરિંગ
- પ્લાન અને કિંમતો
આ લેખમાંના ક્રૉલર
વારંવાર પૂછાતા પ્રશ્નો
ChatGPT મારી વેબસાઇટ કેમ બતાવતું નથી?
ઍક્સેસથી શરૂ કરો: OpenAI કહે છે કે OAI-SearchBotમાંથી opt out કરેલી સાઇટ ChatGPTના સર્ચ જવાબોમાં બતાવાતી નથી, અને તમારા હોસ્ટ કે CDNએ તેનાં પ્રકાશિત searchbot IP સરનામાંને મંજૂરી આપવી જોઈએ. ઍક્સેસ બરાબર હોય, તો સામાન્ય કારણ એ છે કે બીજું પેજ પ્રશ્નનો જવાબ વધુ સીધો, વધુ સ્પષ્ટ હકીકતો અને વધુ બહારના ઉલ્લેખો સાથે આપે છે. OpenAI કહે છે કે સ્થાનની ગૅરંટી નથી.
શું હું સ્પર્ધકના બદલે મારી ભલામણ થાય તે માટે ChatGPTને પૈસા આપી શકું?
ના. OpenAI કહે છે કે જાહેરાતો ChatGPTના જવાબોને અસર કરતી નથી, જાહેરાત આપનારા જવાબોને ઘડી, ક્રમ આપી કે બદલી શકતા નથી, અને જાહેરાતો અલગ અને લેબલ સાથે બતાવાય છે. શૉપિંગ જવાબોમાં પ્રોડક્ટનાં પરિણામો પણ જાહેરાત નથી.
સુધારા પછી ChatGPT કે Perplexity તેને કેટલા સમયમાં ધ્યાનમાં લેશે?
OpenAI કહે છે કે robots.txtના ફેરફારોને તેની સર્ચ સિસ્ટમ સુધી પહોંચતાં લગભગ 24 કલાક લાગી શકે છે, અને Perplexity 24 કલાક સુધી કહે છે. તેનાથી ફક્ત ઍક્સેસ પાછી મળે છે. પછી તમારું પેજ ટાંકાશે કે નહીં તે બીજા સ્રોતોની સરખામણીમાં તે કેવું છે તેના પર આધાર રાખે છે, જે પ્રકાશિત નથી, તેથી કન્ટેન્ટના ફેરફારોનું મૂલ્યાંકન અઠવાડિયાંમાં કરો.
શું llms.txt ફાઇલથી AI આસિસ્ટન્ટ મારી ભલામણ કરશે?
Google કહે છે કે AI Overviews કે AI Modeમાં દેખાવા માટે તમારે AI text files કે ખાસ માર્કઅપની જરૂર નથી. અમે તપાસેલાં ક્રૉલર અને સર્ચનાં help પેજમાં OpenAI, Perplexity અને Anthropic llms.txtનો ઉલ્લેખ કરતાં નથી, તેથી તેને રેન્કિંગ પરિબળ તરીકે ગણશો નહીં.
શું Perplexityનું Trusted લેબલ નક્કી કરે છે કે કઈ સાઇટ ટાંકાશે?
Perplexity એવું કહેતું નથી. તે Government, Academic અને Trusted લેબલને આખી વેબસાઇટની સ્રોત સમીક્ષાના પરિણામ તરીકે વર્ણવે છે, કહે છે કે લેબલ ન હોવું એ નકારાત્મક મૂલ્યાંકન નથી, અને કહે છે કે ચુકવણી લેબલને અસર કરતી નથી.
સ્રોતો
- OpenAI: Overview of OpenAI crawlers
- OpenAI: Searching the web with ChatGPT
- OpenAI: Shopping with ChatGPT Search
- OpenAI: Ads in ChatGPT
- Perplexity: Perplexity crawlers
- Perplexity: How does Perplexity work?
- Perplexity: Understanding source labels
- Anthropic: Does Anthropic crawl data from the web, and how can site owners block the crawler?
- Google Search Central: AI features and your website
- Google Search Central: Organization structured data
- Google Search Central: Influence your byline dates
- Google Search Central: Creating helpful, reliable, people-first content
- AISeeWhy: AI Crawler Access Report, 2026-11